一种交通信号控制方法、装置、电子设备及存储介质制造方法及图纸

本公开提供了一种交通信号控制方法、装置、电子设备及存储介质，其中，该方法包括：获取目标路口的车流状态信息及至少一个相邻路口的车流状态信息，并获取针对目标路口对应的预训练的强化学习网络；基于目标路口的车流状态信息、至少一个相邻路口的车流状态信息以及强化学习网络，确定针对目标路口的交通信号控制信息；其中，交通信号控制信息用于控制目标路口的交通灯，按照强化学习网络输出的相位组合策略执行信号切换动作。本公开针对目标路口对应的相位组合策略是结合目标路网中有关目标路口的相邻路口的车流状态信息共同确定的，信号调控能力更强，从而便于进行实际道路的部署。署。署。

【技术实现步骤摘要】
一种交通信号控制方法、装置、电子设备及存储介质


[0001]本公开涉及交通信号控制
，具体而言，涉及一种交通信号控制方法、装置、电子设备及存储介质。

技术介绍

[0002]随着城市的不断发展，车辆的不断增多，交通拥堵已成为现代社会最令人头痛的一件事，交通管理工作越来越受到关注。交通信号控制问题是解决交通拥堵，优化交通运输效率的重要研究方向。目前，交通控制是通过路口的红绿信号灯来实现的。
[0003]在目前阶段，大型城市道路网络(简称“路网”)的交通信号控制主要采用传统控制方法实现，包括固定时间交通灯控制计划，即预先设定每种信号相位的时间周期，并通过设定的时间周期控制路口设置的红绿信号灯。除此之外，工程师还可以基于路口检测到的车流长度手动地调整不同信号相位的时间长度和比例，以更好的改善交通拥堵的问题。
[0004]然而，上述控制方法在复杂车流情况中调整能力较弱，对于改善交通状况的作用非常有限，且工程师的手动调整方式也存在一定的不便之处。

技术实现思路

[0005]本公开实施例至少提供一种交通信号控制方法、装置本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种交通信号控制方法，其特征在于，包括：获取目标路口的车流状态信息及至少一个相邻路口的车流状态信息，并获取针对所述目标路口对应的预训练的强化学习网络；基于所述目标路口的车流状态信息、所述至少一个相邻路口的车流状态信息以及所述强化学习网络，确定针对所述目标路口的交通信号控制信息；其中，所述交通信号控制信息用于控制所述目标路口的交通灯，按照所述强化学习网络输出的相位组合策略执行信号切换动作。2.根据权利要求1所述的方法，其特征在于，所述基于所述目标路口的车流状态信息、所述至少一个相邻路口的车流状态信息以及所述强化学习网络，确定针对所述目标路口的交通信号控制信息，包括：将所述目标路口的车流状态信息以及所述相邻路口的车流状态信息输入所述强化学习网络进行动作预测，确定对所述目标路口的交通灯进行信号切换动作控制的相位组合策略；所述相位组合策略用于指示对应目标路口的交通信号控制信息。3.根据权利要求2所述的方法，其特征在于，在所述目标路口属于目标路网的任一路口的情况下，在确定针对所述目标路口的交通信号控制信息之后，所述方法还包括：基于所述目标路网包括的各个路口分别对应的当前车流状态信息确定针对所述目标路网的状态奖励值；基于所述状态奖励值以及所述各个路口在当前相位组合策略下的回报奖励值，对所述目标路口对应的强化学习网络进行调整；基于调整后的所述目标路口对应的强化学习网络、以及在所述目标路口按照当前相位组合策略控制对应的交通灯执行信号切换动作的情况下，所述目标路口的下一个车流状态信息，确定针对所述目标路口的交通灯进行信号切换动作控制的下一个相位组合策略。4.根据权利要求3所述的方法，其特征在于，按照如下步骤确定所述目标路口在当前相位组合策略下的回报奖励值：获取所述目标路口在当前相位组合策略下的车流压力值；基于所述车流压力值的相反数，确定所述目标路口在当前相位组合策略下的回报奖励值。5.根据权利要求4所述的方法，其特征在于，所述获取所述目标路口在当前相位组合策略下的车流压力值，包括：检测驶入所述目标路口的第一车辆数量以及从所述目标路口驶出的第二车辆数量；基于所述第一车辆数量与所述第二车辆数量之间的差值运算，确定所述车流压力值。6.根据权利要求4或5所述的方法，其特征在于，所述基于所述车流压力值的相反数，确定所述目标路口在当前相位组合策略下的回报奖励值，包括：获取所述当前相位组合策略相比上一个相位组合策略的相位切换时长；基于所述相位切换时长以及所述车流压力值的相反数，确定所述目标路口在当前相位组合策略下的回报奖励值。7...

【专利技术属性】
技术研发人员：陈若冰，刘宇，王晓刚，
申请(专利权)人：上海商汤智能科技有限公司，
类型：发明
国别省市：