结合类脑导航的强化学习无人机自主导航

来源：计算机测量与控制杂志2024年第7期北京时间：

作者：吴勇,彭辉,熊峰钥

单位：成都信息工程大学

摘要：随着无人移动平台的不断发展,为其赋予高效的自主导航能力变得尤为重要；针对无人机自主导航常用的端到端强化学习方法存在训练效率低、泛化能力和通用性差等问题,引入了类脑导航模型,基于长短时记忆(LSTM)神经网络构建了类脑细胞导航模型,通过整合编码无人机智能体的自运动信息,实现了网格细胞和头朝向细胞的编码,进一步将这些信息作为深度强化学习算法D3QN的状态补充表示；通过在AirSim仿真环境的实验表明,类脑导航模型的引入能够有效提高算法的训练能力和无人机智能体的导航性能,相较于原D3QN算法,在环境目标改变的情况下仍能寻找到新的目标点,有效提升了算法的泛化能力。

关键词：无人机;深度强化学习;类脑导航;D3QN;自主导航

基金资助：四川省科技计划资助项目