一种基于进化Q网络的城市多交叉口信号灯分布式控制方法技术

一种基于进化Q网络的城市多交叉口信号灯分布式控制方法，包括以下步骤：构建信号协同控制的马尔科夫模型，定义智能体、环境、状态、行为和奖励，为信号灯控制提供基础模型；通过状态编码方法，将实际交通状态转化为二进制特征向量，为Q网络提供标准化输入；基于特征提取结果，通过Q网络结构编码方法，将神经网络结构参数转化为二进制编码，为自动搜索最优网络结构做准备；通过Q网络结构进化算法，根据状态编码自动调整Q网络结构，寻找最优解，实现Q网络结构与信号灯协同控制任务复杂度的自动匹配；基于Q网络控制的路网子单元，构建分布式决策计算方法，实现大规模路网信号灯协同控制。本方法能够提升路网负载平衡度、降低运输延迟时间。

【技术实现步骤摘要】

本专利技术涉及道路信号灯控制技术，特别是涉及一种基于进化q网络的城市多交叉口信号灯分布式控制方法。

技术介绍

1、信号灯控制是城市路网交叉口化解不同方向行驶车辆冲突的普适性技术。在城市路网运行过程中，通过对信号灯的不同相位设定固定的显示时间，确定交叉口多侧道路的通行权。但是，固定时间控制缺乏实时调节能力，往往不能充分利用交叉口在时间和空间上的容量，例如，当某一相位对应的道路上已经没有车辆时，应当切换至下一相位，但是固定时间控制会使该相位保持至设定的结束时间，从而造成其余相位对应车辆时间的无谓消耗。

2、为了避免信号灯固定时间控制引起的车辆等待时间增加，城市路口安装传感器，对多侧道路的车辆等待时间、等待队列长度进行监测，并据此对信号灯相位进行实时调整，称自适应信号灯控制方法，该方法能有效维持交叉口多个相位对应道路负载的平衡度。

3、另外，早期信号灯采用独立控制方法，即每个交叉口的信号灯选择相位时，不受其他信号灯状态的影响。但此种方法有其局限性，如果能对路网中所有信号灯实现集中式协调，将显著提升路网吞吐率及负载平衡度等指标。然而，集中式本文档来自技高网...

【技术保护点】

1.一种基于进化Q网络的城市多交叉口信号灯分布式控制方法，其特征在于，包括以下步骤：

2.如权利要求1所述的基于进化Q网络的城市多交叉口信号灯分布式控制方法，其特征在于，步骤一具体包括：

3.如权利要求1所述的基于进化Q网络的城市多交叉口信号灯分布式控制方法，其特征在于，步骤二具体包括：

4.如权利要求1所述的基于进化Q网络的城市多交叉口信号灯分布式控制方法，其特征在于，步骤三具体包括：

5.如权利要求1所述的基于进化Q网络的城市多交叉口信号灯分布式控制方法，其特征在于，步骤四具体包括：

6.如权利要求1所述的基于进化Q网络的城...

【技术特征摘要】

1.一种基于进化q网络的城市多交叉口信号灯分布式控制方法，其特征在于，包括以下步骤：

2.如权利要求1所述的基于进化q网络的城市多交叉口信号灯分布式控制方法，其特征在于，步骤一具体包括：

3.如权利要求1所述的基于进化q网络的城市多交叉口信号灯分布式控制方法，其特征在于，步骤二具体包括：

4.如权利要求1所述的基于进化q网络的城市多交叉口信号灯分布式控制方法，其特征在于，步骤三具体包括：

5.如权利要求1所述的基于进化q网络的城市多交叉口信号灯分布式控制方法，其特征在于，步骤四具体包括：

6...

【专利技术属性】
技术研发人员：汤辉玥，徐文涛，温亦骋，杨占魁，张立贤，
申请(专利权)人：国家超级计算深圳中心深圳云计算中心，
类型：发明
国别省市：