基于深度强化学习的卫星光网络波长路由算法
来源:系统工程与电子技术杂志2023年第1期北京时间:
作者:李信, 李勇军, 赵尚弘
单位:空军工程大学信息与导航学院, 陕西 西安 710003
摘要:针对由卫星光网络拓扑动态变化、业务多样化和负载不均引起的路由收敛慢和波长利用率低的问题, 提出了一种基于深度强化学习的卫星光网络波长路由分配方法。基于软件定义中轨/低轨(medium earth orbit/low earth orbit, MEO/LEO)双层卫星网络架构, 利用深度强化学习算法动态感知网络当前的业务负载和链路状况, 构造基于时延、波长利用率和丢包率的奖励函数进行选路决策。为了解决单跳链路对整个光路的影响, 引入链路瓶颈因子, 搜索符合服务质量(quality of service, QoS)约束的最优路径。研究结果表明, 与传统卫星网络分布式路由(satellite network distributed routing algorithm, SDRA)算法和Q-routing算法相比, 所提算法降低了网络的时延、丢包率, 提高了波长利用率, 同时也降低了高优先级业务的阻塞率。
关键词:卫星光网络,波长路由,深度强化学习,服务质量
基金资助:国家自然科学基金(91638101);国家自然科学基金(61701522);陕西省自然科学基金(2018JM6069)
2023年1期其他文献查阅:
基于曲线拟合误差估计的阻抗优化识别方法
基于非对称幅度插值的二维来波方位估计
基于检测-跟踪算法的多分量瞬时频率-调频率估计
无需先验测量误差的定位节点选择方法
未知姿态目标航磁异常探测的最优飞行方向分析
交替极化阵列对消盲区分析与验证
基于非脉冲矢量网络分析仪的非反向交叉眼干扰实验设计与分析
基于边缘强化的无监督单目深度估计
基于PDW多特征融合的辐射源信号分选方法
车载毫米波雷达多径假目标分析与消除方法
基于NSGA-Ⅲ的机载雷达空空射频隐身探测参数设计
基于广义Rao检验的单/多比特MIMO雷达运动目标检测方法
基于杂波拖尾分布的雷达无人机检测性能分析
基于多核DSP的星载双基FMCW SAR成像算法实现
微波光子W波段宽带雷达成像技术研究
基于渐消因子的ECEF-GLS估计算法
基于YOLO的航管一次雷达目标检测方法
间歇式信息传输条件下无人机搜索覆盖规划
基于DoDAF的低慢小飞行器综合处置体系架构设计
基于改进多输出支持向量的船舶航迹预测
超网络体系作战下的打击目标优选模型
军事信息系统情境计算需求一致性验证研究
基于目标暴露区的地面防空兵力最佳配置区规划
基于有限谓词追踪的民机系统需求一致性检查方法
时变多辐射源跟踪任务的时-频扫描方案评估方法
基于电子商务竞标结构的分布式作战资源调度
多状态系统任务成功性仿真评估
基于太阳导行镜测量的高精度姿态确定算法
面向冗余机械臂避障运动规划的触控交互技术
空间目标远距离磁控方法及应用分析
运载火箭自适应增广控制参数设计及稳定性裕度分析
改进的多项式曲线拟合轨迹预测算法
基于EMD-DESN的无人机集群航迹目的地预测
樽海鞘群算法基于动力学模型的改进
基于改进自抗扰控制的电动伺服系统机械谐振抑制方法
基于自然语言处理的意图驱动网络表征
基于SVD-K-means算法的软扩频信号伪码序列盲估计
基于高斯似然的精准水声信道估计
动态自触发通信下多智能体输出反馈包容控制
基于分布式SDN的机动通信系统拓扑发现方法
基于TDOA的无人机集群协同单目标定位
基于神经网络和散射中心模型的目标参数提取
基于区间算法的频控阵阵元位置误差分析
基于多相滤波的高精度延时设计及实现
基于MVDR波束形成的FDA平台外干扰抑制
基于彩色图像Tetrolet变换的频数质心零水印算法
最优冗余线阵欠定信号双重构DOA估计方法
基于卷积ADMM网络的高效结构化稀疏ISAR成像方法
弹载双基前视成像雷达解析-迭代定位方法
基于FRFT的单基地MIMO雷达稳健波束形成算法
基于A3C的多功能雷达认知干扰决策方法
CEEMD结合改进小波阈值的激光雷达信号去噪算法
基于多传感器的雷达对抗侦察数据融合算法
战斗机无人机编组协同系统需求捕获与验证
基于知识图谱的战略智能体BDI模型
考虑子系统执行能力的多无人机协同任务规划
基于装备体系韧性的作战网络链路重要度评估及恢复策略
基于FD-TODIM的混杂空战多目标动态威胁评估
灰色群组聚类和改进CRITIC赋权的供应商选择VIKOR多属性决策
杂波环境下可移动主被动传感器长时调度方法
基于鲁棒精确微分器的分数阶滑模制导律设计
信号级GNSS/SINS超紧组合导航仿真平台设计
基于强化学习的改进三维A*算法在线航迹规划
基于随机森林权重补偿的无人机高精度定位算法
基于SINS/GBAS组合导航的高精度进近着陆导航技术
基于控制参数估计的再入滑翔目标智能轨迹预测算法
基于Masreliez-Martin的鲁棒分数阶容积卡尔曼滤波算法及应用
通导一体化环月星座设计初探
基于虚拟阵列扩展的改进加权空间平滑算法
基于IUPF算法的三维无人机毫米波波束跟踪
基于深度强化学习的卫星光网络波长路由算法
具有差异化服务的混合对等网络性能分析
面向任务的装备保障体系多Agent建模与评估方法
考虑竞争失效的视情维修和备件订购联合策略优化
基于多信号流图和相似性度量的故障可诊断性评价方法