复杂动态环境下基于深度强化学习的AGV避障方法
来源:计算机集成制造系统杂志2023年第1期北京时间:
作者:蔡泽, 胡耀光, 闻敬谦, 张立祥
单位:北京理工大学工业与智能系统工程研究所
摘要:为提升自动导引车(AGV)在智能工厂复杂动态环境下的避障能力,使其能在全局路径引导下安全、高效地完成避障任务,提出一种基于深度强化学习的局部避障方法。首先,将避障问题表示为部分观测马尔可夫决策过程,详细描述了观测空间、动作空间、奖励函数和最优避障策略,通过设置不同的奖励实现以全局路径引导局部避障规划;然后,在此基础上,采用深度确定性策略梯度算法训练避障策略;最后,建立了仿真实验环境,并设计多种实验场景来验证所提方法的有效性。实验结果表明,所提方法可以应对复杂动态环境,减小避障时间与距离,提高运行效率。
关键词:动态避障,深度强化学习,全局路径引导,智能工厂
基金资助:国家重点研发计划资助项目(2021YFB1715700);国家自然科学基金资助项目(52175451)。
2023年1期其他文献查阅:
数字孪生连接交互理论与关键技术
基于数字孪生的返工型生产系统能耗在线优化
基于一致性哈希环多主节点的改进实用拜占庭容错算法
盘套类零件铸造毛坯及工序模型自动生成方法
基于PSO-SVR算法的工业机器人分级标定方法
基于多智能体强化学习的纺织面料染色车间动态调度方法
考虑多时间因素的绿色可重入混合流水车间调度问题
基于双深度Q学习网络的面向设备负荷稳定的智能车间调度方法
采用AGV分拣的型材下料车间成组调度问题研究
自适应多种群Jaya算法求解绿色并行机调度问题
基于交替混合迭代搜索方法的预制构件生产调度与工人配置集成优化
数据不完备下基于Informer的离心鼓风机故障趋势预测方法
基于主动生成式过采样和深度堆叠网络的轴承故障诊断
批量生产模式下基于客户满意度的设备视情维护策略优化
基于视觉感知的表面缺陷检测综述
主从特征融合驱动的铝型材表面缺陷检测
基于深度学习的完全填充型熔融沉积成型零件质量预测方法
基于Copula理论的多部件系统剩余寿命核密度预测方法
基于EEMD-PSO-ELM的RV减速器故障诊断模型
复杂动态环境下基于深度强化学习的AGV避障方法
面向大型三维结构检测的多机器人覆盖路径规划方法
基于改进RRT结合B样条的机械臂运动规划方法
基于多因素模型和多尺度遗传算法的复杂曲面喷涂轨迹综合优化
基于μ-PPT电推进器的立方体卫星群落姿态协同控制
基于自适应字典压缩感知的欠定工作模态参数识别
基于配合约束的几何公差分配方法
基于聚合代理模型的土压平衡盾构刀盘轻量化设计方法
考虑随机参照价格的双渠道绿色供应链定价和渠道策略研究
岸桥故障下考虑邻近岸桥共享作业的集装箱码头调度多目标优化
考虑说服性广告的销售模式选择和线下进入策略