摘要
本发明提供了一种云边端协同下的卫星切换策略优化方法和设备,方法包括:搭建初始化的原始卫星切换模型;基于仿真数据预收集经验样本并存储至经验回放池;在预设仿真周期内,按预设间隔交替执行如下操作:基于当前仿真数据,通过所述多个个体主Q网络生成新的经验样本并存入经验回放池;当达到所述预设间隔时,从经验回放池中选取训练样本,对模型进行训练;当所述仿真周期结束时,输出更新后的卫星切换模型作为目标模型,并将目标模型中的个体主Q网络部署在终端上;当检测到某个终端切换卫星时,边端将切换后的卫星的卫星属性信息发送给对应的卫星,以通过该卫星发送给对应终端。本发明能优化低轨卫星网络中多用户的卫星切换策略。
技术关键词
属性匹配
策略优化方法
仿真数据
混合网络
低轨卫星网络
网络部署
样本
地面通信站
模型更新
终端
更新模型参数
场景系数
信息熵
回放方法
周期
云端
多用户
存储器
因子
系统为您推荐了相关专利信息
波束权值
仿真数据
场景
智能蚁群算法
射线跟踪算法
模拟训练方法
多智能体强化学习
混合网络
多智能体协作
超网络
强化学习方法
实体
控制策略
消息传递机制
标量特征
IEC104协议
传感器设备配置
网关机设备
数据
传感器配置