《电子测量技术杂志》发表论文赏析

基于改进SAC的倒立摆控制算法研究

来源:电子测量技术杂志2024年第1期北京时间:

作者:张晓莉,郭仕林,刘鼎,宋婉莹

单位:西安科技大学通信与信息工程学院 西安 710600

摘要:针对倒立摆系统控制过程中易受外界干扰和自然不稳定的特点,以及深度强化学习SAC算法采样数据利用率较低和随机离线策略网络收敛较慢的问题,提出了一种结合近端经验采样和优化策略网络结构的改进算法PRER_SAC。构建神经网络拟合函数,策略网络使用性能更优的Mish函数作为激活函数,设置自调节温度系数以增强智能体的探索能力;设计远、近两个经验池,及一种改变数据存放频率的训练策略,提高数据样本的利用率。通过仿真实验对比,所提方法在同等训练次数下所得回报值和算法收敛速度优于DDPG和 SAC 算法,同传统控制方法PID和LQR相比,有更好的控制效果。最后,对训练好的智能体加入角度扰动,可在2 s内被消除抑制,证明提出的算法具有较强的适用性。

关键词:激活函数;神经网络;深度强化学习;倒立摆系统

基金资助:国家自然科学基金青年项目(61901358)、中国博士后科学基金面上项目(2019QDJ207)、陕西省教育厅一般专项(20JK0757)资助

2024年1期其他文献查阅:

可级联组网的无线时间比对系统设计

融合实体与关系交互信息的知识感知推荐模型

井下NFC天线的研究及仿真分析

衬胶管道脱粘缺陷超声检测与识别方法研究

基于改进KNN边缘滤波算法的陶瓷绝缘子表面检测研究

飞机机载线槽结构对电磁防护性能的影响研究

基于改进DBO优化BiLSTM的IGBT老化预测模型

微半球陀螺交直流混合电压切换驱动方法研究

基于象限分割的迟滞软切换VLC-WiFi接入选择算法

基于ASSA-RBF联合算法的三元锂离子电池SOC估计

面向特征选择任务的改进蜣螂优化算法

基于改进鲸鱼算法优化模糊控制的开关电源

基于改进SAC的倒立摆控制算法研究

联合高阶目标感知与相似匹配的目标跟踪算法

复杂背景条件下的电气设备图像实例分割算法

基于门控循环深度范围预测网络的多视角重建

多级解码神经网络用于滚珠丝杠点蚀检测

基于改进YOLOv5的轨道交通障碍物检测算法

基于语义指导和自适应卷积的遥感云检测算法

基于图像处理的八角光纤端面尺寸检测算法设计

高光谱图像去噪的稀疏空谱Transformer模型

基于 Multi-WHFPN 与 SimAM 注意力机制的版面分割

用于骨架行为识别的时空卷积Transformer网络

基于 Radon 变换的时空图像纹理角识别方法

基于多尺度特征融合的跨视角步态识别

填文献完整题目 获取完整文献

填写需求
联系方式
注:学术顾问会在1小时内联系您,请留意!