控制理论与应用

作者：乔志敏,柯良军

单位：太原工业学院,西安交通大学

关键词：交通信号; 强化学习; 动态权重; 延迟时间

基金：山西省教育厅高等学校科技创新项目(2022L523), 国家自然科学基金项目(61973244, 72001214), 山西省基础研究计划资助项目(2023030212223 00), 第五届太原工业学院学科带头人资助项目资助.

当前广泛应用的基于车流动力学建模的交通信号优化模型精确度较高, 但迁移能力稍弱, 针对该问题, 本文提出了一种基于深度强化学习的单智能体交通信号控制方法. 该方法首次在考虑交叉口有行人穿越干扰的情况下定义了动作空间, 从3个不同的角度定义了3种奖励函数, 并提出了一种累积延迟近似方法. 在算法方面, 提出了一种基于动态权重的Soft Actor-Critic算法, 该算法可以动态调整Actor网络和Critic 网络的更新幅度, 显著地提高了传统Soft Actor-Critic算法的收敛效率和收敛性能. 仿真结果表明, 本文提出的模型和算法在降低车辆延迟时间、减少车辆停车次数以及减少车辆队列长度等交通性能指标方面是有效的.

来源：2025年第1期

《控制理论与应用》期刊编辑部

查看控制理论与应用杂志2025年第1期