《电子测量技术杂志》发表论文赏析

基于强化学习的艾灸机器人温度控制策略研究

来源:电子测量技术杂志2022年第24期北京时间:

作者:张博,黄山,张浛芮,李应昆,涂海燕

单位:1.四川大学电气工程学院 成都 610065; 2.四川省成都市第五人民医院康复医学科 成都 611130; 3.四川省成都中医药大学附属医院针灸康复科 成都 610072

摘要:针对传统PID控制算法在艾灸机器人温度控制中存在参数辨识复杂、适应性差等问题,将强化学习引入到艾灸机器人温控领域中,提出了一种改进强化学习算法。首先,通过多物理场仿真软件和神经网络联合搭建智能体离线训练仿真环境,以解决智能体在线训练效率低下的问题;然后,提出一种结合奖励引导和余弦退火策略的改进强化学习算法,提高算法的收敛性和成功率;最后,将仿真环境训练后的模型迁移到真实环境进行实验验证。实验结果表明,温度超调量为0.2 ℃,稳态温度保持在43.1 ℃±0.4 ℃内,改进后的强化学习算法相比于传统PID控制算法的温度控制能力更好。

关键词:艾灸机器人;温度控制;强化学习;奖励引导;余弦退火

基金资助:四川省重大科技专项(2019ZDZX0019)、四川省中医药管理局项目(2018KF013)资助

2022年24期其他文献查阅:

基于PIN二极管设计的一种进行波束扫描的 超表面天线

一种气象温度传感器设计及实验研究

基于均方根值检波的脉冲调制辐射场测量技术

基于TVFFRLS-ACKF的锂离子电池SOC估算

5G毫米波大带宽信号内插器设计与实现

棱锥式角度传感器原理研究与设计

基于AD9364的高速率通用遥测系统设计

宽带微波取样器的信号调理电路设计

基于光子晶体的氯化钠溶液浓度传感研究

基于强化学习的艾灸机器人温度控制策略研究

心电信号降噪及R波提取技术研究

D2D通信中基于深度强化学习的资源分配

无线多通道冲击波采集存储技术

基于多点平抛运动的光伏热斑故障模型研究

基于互信息和GWB-LSSVM的网络攻击检测模型

基于改进领域对抗网络的瓷砖表面缺陷检测

Adam优化的BP神经网络地铁空调环境模式检测

高可靠性高速通信系统的国产化设计与实现

基于VIBE算法的室外泄漏气体检测

基于改进FCN双路径特征融合的局部放电图谱识别

基于改进YOLOv5s绝缘子缺陷检测技术研究

基于预过滤注意力的Transformer物体检测

基于关节点运动估计的人体行为识别

Y型管接头组对焊接间隙视觉检测方法研究

融合多尺度特征与注意力机制的 风机桨叶缺陷检测方法

填文献完整题目 获取完整文献

填写需求
联系方式
注:学术顾问会在1小时内联系您,请留意!