基于强化学习的全电推进卫星变轨优化方法
来源:系统工程与电子技术杂志2022年第5期北京时间:
作者:韩明仁, 王玉峰
单位:1. 北京控制工程研究所, 北京 100094;2. 空间智能控制技术重点实验室, 北京 100094
摘要:采用电推力器实现自主轨道转移是全电推进卫星领域的关键技术之一。针对地球同步轨道(geostationary orbit, GEO)全电推进卫星的轨道提升问题, 将广义优势估计(generalized advantage estimator, GAE)和近端策略优化(proximal policy optimization, PPO)方法相结合, 在考虑多种轨道摄动影响以及地球阴影约束的情况下, 提出了基于强化学习的时间最优小推力变轨策略优化方法。针对状态空间过大、奖励稀疏导致训练困难这一关键问题, 提出了动作输出映射和分层奖励等训练加速方法, 有效提升了训练效率, 加快了收敛速度。数值仿真和结果对比表明, 所提方法更加简单、灵活、高效, 与传统的直接法、间接法以及反馈控制法相比,能够保证轨道转移时间的最优性。
关键词:全电推进卫星,小推力变轨优化,强化学习,近端策略优化,训练加速方法
基金资助:国家自然科学基金(11502017)
2022年5期其他文献查阅:
基于NMF与CNN联合优化的声学场景分类
基于NSGA-Ⅱ的波前相位畸变特性分析
基于模糊决策的快速星图识别
半实物射频仿真的误差联合概率密度函数分析
基于全局感知机制的地面红外目标检测方法
基于多分辨率动态模态分解的电磁信号时频-能量分析
利用k近邻区间距离的异步抗差航迹关联算法
FDA MIMO双基雷达主瓣走动矫正距离模糊杂波抑制
多种转发干扰下的脉内脉间波形综合优化设计
密集虚假运动目标生成方法
基于新最速下降法的目标跟踪算法
米波MIMO雷达波束空间精确最大似然算法
基于修正小波变换插值-TAN的雷达降水粒子分类
基于风格迁移不变特征的SAR与光学图像配准算法
生成式中断航迹接续关联方法
民用飞机多地域航材支援网络模型研究
基于知识推理的卫星网络态势理解
多类型体系贡献率评估的综合问题研究
面向复杂关联测控需求的冲突规避调度算法
防御性制空截击中警戒巡逻空域规划建模
基于分布式协同进化的星座自主任务规划算法
基于元模型的复杂产品虚拟样机建模方法研究
通信距离受限条件下的无人机集群协同区域搜索
并联式运载器上升段广义超螺旋有限时间控制
基于多区间参数修正的角速率姿态算法
基于国内宽带VLBI2010系统及iGMAS的UT1/ΔLOD数据融合方法
基于强化学习的全电推进卫星变轨优化方法
基于超螺旋滑模的船载稳定平台镇定控制
分布式多AUV协同搜索方法
伪惯导建模的极区双速度模式惯性系对准算法
高速低复杂度可重构L&R算法研究与实现
非完美CSI情况下大规模MIMO系统的下行链路能效优化
面向OFDM-MFSK水声通信的差错控制方法
多PAN太赫兹无线个域网边缘节点信息高效报告方法
面向用户需求的空天地一体化车载网络任务分配策略
基于分布式深度学习的边缘服务放置策略
失效信息已知时r/n(G)表决系统的剩余寿命预测
基于多源信息融合与HMM的剩余寿命预测
基于FWA-DBN的航空发电机偏心故障诊断