摘要
一种基于进化Q网络的城市多交叉口信号灯分布式控制方法,包括以下步骤:构建信号协同控制的马尔科夫模型,定义智能体、环境、状态、行为和奖励,为信号灯控制提供基础模型;通过状态编码方法,将实际交通状态转化为二进制特征向量,为Q网络提供标准化输入;基于特征提取结果,通过Q网络结构编码方法,将神经网络结构参数转化为二进制编码,为自动搜索最优网络结构做准备;通过Q网络结构进化算法,根据状态编码自动调整Q网络结构,寻找最优解,实现Q网络结构与信号灯协同控制任务复杂度的自动匹配;基于Q网络控制的路网子单元,构建分布式决策计算方法,实现大规模路网信号灯协同控制。本方法能够提升路网负载平衡度、降低运输延迟时间。
技术关键词
分布式控制方法
交叉口信号灯
编码方法
马尔科夫模型
信号协同控制
进化算法
神经网络结构
路网系统
协调算法
小规模
决策计算方法
网格
参数