基于深度强化学习的城市交通信号分层协同控制方法

来源：交通运输系统工程与信息杂志2025年第4期北京时间：

作者：代亮, 杜鹏飞, 黄自彬, 杨朋博

单位：长安大学，电子与控制工程学院，西安710064

摘要：强化学习具有强大的自适应性和学习能力，能够根据环境变化和反馈信号不断调整策略和行为，实现持续优化，为城市交通信号控制提供新的技术手段。针对现有强化学习方法在交通信号协同控制中存在的智能体协作效率低下与控制区域划分机制缺失问题，本文提出一种交通信号分层协同控制架构，通过构建交叉口智能体，进行状态空间与回报函数的关联性协同设计，并建立基于拥堵扩散的交通控制子区划分模型，实现动态划分交通控制子区。最后，构建子区智能体协调子区内部交叉口智能体，交叉口智能体根据子区智能体提供的全局性建议以及所在交叉口情况完成信号控制方案的优化，实现区域交通信号分层协同控制。仿真结果表明，与现有定时控制与强化学习方法相比，本文方法平均行程时间分别降低56.78%和29.23%。相比MPLight(Max Pressure Light)方法，平均速度提升7.21%，平均行程时间与停车次数分别减少22.62%和3.98%。此外，通过对比在不同规模以及拓扑结构路网的性能表现，验证本文方法在同质交叉口路网中具有一定可移植性。

关键词：智能交通,交通信号控制,深度强化学习,多智能体,子区划分

基金资助：陕西省交通运输厅交通科研项目 (24-15R)；长安大学中央高校基本科研业务费专项资金(300102323201)。