基于改进型TD3算法的车载边缘计算任务卸载决策

来源：电子测量技术杂志2024年第6期北京时间：

作者：李亚，王卫岗，张原，刘瑞鹏

单位：河南理工大学物理与电子信息学院 焦作 454000

摘要：为满足复杂车辆任务在时延、能耗和计算性能方面的要求，同时减少网络资源的竞争和消耗，设计了一种基于车载边缘计算(VEC)的任务卸载策略，以最小化任务处理延迟和能源消耗之间平衡的长期成本为目标，将车联网中的任务卸载问题建模为马尔可夫决策过程(MDP)，提出了在传统双延时深度确定性策略梯度(TD3)的基础上，利用长短期记忆网络(LSTM)来逼近策略函数和价值函数，将系统状态进行归一化处理以加速网络收敛并增强训练稳定性的改进算法(LN-TD3)。仿真结果表明，LN-TD3性能与全部本地计算和全部卸载计算相比提高了两倍以上；收敛速度上与深度确定性策略梯度DDPG、TD3相比提高了约20%。

关键词：车载边缘计算;TD3算法;任务卸载;深度强化学习;马尔可夫决策过程

基金资助：中层大气和全球环境探测重点实验室开放课题(LAGEO-2022-02)项目资助