《系统工程与电子技术杂志》发表论文赏析

融合动态奖励策略的无人机编队路径规划方法

来源:系统工程与电子技术杂志2024年第10期北京时间:

作者:唐恒, 孙伟, 吕磊, 贺若飞, 吴建军, 孙昌浩, 孙田野

单位:1. 西安电子科技大学空间科学与技术学院, 陕西 西安 710118;2. 西北工业大学第365研究所, 陕西 西安 710072;3. 西安爱生无人机技术有限公司, 陕西 西安 710065;4. 中国空间技术研究院钱学森空间技术实验室, 北京 100094

摘要:针对未知动态环境下无人机(unmanned aerial vehicle, UAV)编队路径规划问题, 提出融合动态编队奖励函数的多智能体双延迟深度确定性策略梯度(multi-agent twin delayed deep deterministic strategy gradient algorithm incorporating dynamic formation reward function, MATD3-IDFRF)算法的UAV编队智能决策方案。首先, 针对无障碍物环境, 拓展稀疏性奖励函数。然后, 深入分析UAV编队路径规划中重点关注的动态编队问题, 即UAV编队以稳定的结构飞行并根据周围环境微调队形, 其本质为每两架UAV间距保持相对稳定, 同时也依据外界环境而微调。为此, 设计基于每两台UAV之间最佳间距和当前间距的奖励函数, 在此基础上提出动态编队奖励函数, 并结合多智能体双延迟深度确定性(multi-agent twin delayed deep deterministic, MATD3)算法提出MATD3-IDFRF算法。最后, 设计对比实验, 在复合障碍物环境中, 所提动态编队奖励函数能将算法成功率提升6.8%, 将收敛后的奖励平均值提升2.3%, 将编队变形率降低97%。

关键词:强化学习,奖励函数,无人机,动态编队,路径规划

基金资助:中国高校产学研创新基金(2021ZYA08004);西安市科技计划(2022JH-RGZN-0039);陕西省重点研发计划重点产业创新链项目(2022ZDLGY03-01);国家自然科学基金(62173330)

2024年10期其他文献查阅:

GPU加速下的三维快速分解后向投影SAS成像算法

基于改进MKELM的红外空间锥体目标识别

基于机器学习的MRTD客观测试方法研究

基于改进YOLO v5算法的道路小目标检测

多路径支撑集回溯贪婪重构算法

星载低剖面一维相扫缝隙阵天线设计

多子阵SAS方位空变运动补偿子孔径算法

微小型无人机载FMCW SAR宽波束运动补偿算法

基于STFrFT的间歇采样转发干扰抑制

基于频域波束降维的车载雷达多参数联合超分辨方法

同步提取变换去噪的雷达信号调制识别方法

机载高分辨CSSAR地面加速运动目标成像方法

基于改进残差神经网络的雷达信号识别方法

基于空间属性特征的毫米波雷达身体干扰识别

基于多任务学习的建筑毁伤评估方法

组织战略匹配管理中的语义建模方法研究综述

基于需求-功能-结构关系矩阵的导弹模块划分方法

天基信息支援体系建模与效能评估方法

基于SysML的空间有效载荷测试路径自动生成方法

复杂体系可靠性结构分析与建模GERT网络技术

多无人机协同任务规划方法研究综述

复杂软件系统双向耦合论证设计方法

考虑安全性需求的航空电子网络可靠性模型

动态拓扑下四旋翼无人机集群蜂拥控制

基于冲突点到达时间的航空器自主间隔控制律

有翼飞行器初制导阶段两段式协同集结方法

融合动态奖励策略的无人机编队路径规划方法

地月L1点低能转移轨道设计与优化

无人机集群曲线虚拟管道空间满足规划

基于通信功率自适应的无人机集群协同导航控制方法

基于行为树的组网服务管控架构及调度方法

基于跳数背压策略的低轨卫星网络负载均衡路由

基于两次窗口滑动运算的非等长帧同步字盲识别算法

不相关多子集零相关区序列集的构造

带残余频偏的软扩频信号伪码序列盲估计

填文献完整题目 获取完整文献

填写需求
联系方式
注:学术顾问会在1小时内联系您,请留意!