基于DDPG算法的双轮腿机器人运动控制研究
来源:系统工程与电子技术杂志2023年第4期北京时间:
作者:陈恺丰, 田博睿, 李和清, 赵晨阳, 陆祖兴, 李新德, 邓勇
单位:1. 东南大学自动化学院, 江苏 南京 211189;2. 东南大学网络空间安全学院, 江苏 南京 211189;3. 南京应用数学中心, 江苏 南京 211135;4. 电子科技大学基础与前沿研究院, 四川 成都 610054
摘要:轮腿式机器人兼具轮式和足式机器人的机动性和灵活性, 在多种场景中具有广泛的应用前景。针对双轮腿机器人在崎岖地形运动控制缺陷、高度依赖于精确动力学模型、无法自适应求解等问题, 提出一种基于深度确定性策略梯度(deep deterministic policy gradient, DDPG)算法的双轮腿机器人控制方法。首先, 分析了双轮腿机器人模型及其模糊动力学模型; 然后, 使用DDPG算法生成双轮腿机器人在崎岖地面的运动控制策略; 最后, 为了验证控制器性能, 分别进行了3组运动控制对比实验。仿真实验表明, 在缺少地面状况先验知识的条件下, 采用DDPG算法生成的运动控制策略实现了双轮腿式机器人在崎岖地面快速稳定运动的功能, 其平均速度相比双轮机器人提高了约29.2%, 姿态角偏移峰值相比双足机器人分别减小了约43.9%、66%、50%。
关键词:运动控制,强化学习,轮腿机器人,深度确定性策略梯度算法
2023年4期其他文献查阅:
复杂干扰场景下的稳健自适应波束形成
基于信号随机涨落特征的电路噪声优化方法
基于耦合张量分解的稀疏阵列二维DOA估计算法
基于GPU的数字下变频累积误差控制方法
基于部分解耦合的非线性数字干扰对消算法
适用于多目标轨迹小角度交叉的PHD滤波器
飞机雷电耦合机理及屏蔽性能影响因素分析
基于编码相位调制的ISAR图像特征控制方法
基于粒子采样投影的雷达低旁瓣复合波形设计
基于稀疏分解的海面微动目标识别
星载双基地雷达杂波建模及特性分析
基于特征增强网络的SAR图像舰船目标检测
机载雷达地面静止目标二维检测算法
武器目标分配问题研究进展: 模型、算法与应用
自动化码头AGV电池备件与充电机配置联合决策
海上动目标身份置信度融合计算模型
敏捷C2组织生成及演进的度量与优化
结合启发式与最优控制的舰载机甲板路径规划算法
基于改进行为树的作战计划建模方法
基于MBSE的运载火箭上升段逃逸救生策略
多视图融合的无人机定位方法
部分约束下空中目标拦截制导控制一体化方法
基于DDPG算法的双轮腿机器人运动控制研究
无人艇与四旋翼无人机固定时间异构编队控制
卫星导航时域自适应抗干扰技术综述
基于新型趋近率的含齿隙随动系统鲁棒控制
基于转向与制动协同的无人车辆轨迹跟踪控制
基于VSCBOMP算法的FBMC/OQAM系统信道估计
基于自监督对比学习的信号调制识别算法
航空信息网络服务功能链迁移策略研究
基于随机抽取的稀疏校验矩阵重建算法
窄带干扰及动态环境BOC调制信号多通道并行捕获
基于运行数据的国产民机动态维修任务间隔优化
基于Dirichlet分布的设备失效概率预测模型
数字孪生驱动的武器装备智能保障技术研究