一种基于多智能体Q学习的车载通信MAC层信道接入方法技术

本发明专利技术公开了一种基于多智能体Q学习的车载通信MAC层信道接入方法，在VANETs环境中每个车辆节点构建自己的联合状态—动作对映射关系和联合策略；然后判断VANET网络中是否有新的车辆节点加入；若有，则新加入的车辆节点通过迁移学习快速获取动作空间、状态空间、和奖赏函数，此后每个车辆节点更新自己的联合状态—动作对关系和联合策略；若没有，则判断当前车辆节点是否有数据需要发送；若有数据要发送，则根据eCEQ算法确定满足相关均衡的动作策略解；从动作集中选择能使多智能体系统最终达到相关均衡的动作；确定CW值并以该CW值接入无线信道发送数据。本发明专利技术提高了数据成功发送的概率，减少了退避次数，数据包接收率及端到端传输时延问题等都得到有效改善。

【技术实现步骤摘要】
一种基于多智能体Q学习的车载通信MAC层信道接入方法
本专利技术属于物联网
，涉及车载通信中的基于多智能体Q学习的MAC层信道接入的实现方法。
技术介绍
自第二次工业革命专利技术了机动车辆之后，随着汽车领域的快速发展，汽车已成为人们现代生活中不可或缺的一部分。随着人们日常生活节奏的加快，公共汽车、私家车等交通工具的使用日益普遍。汽车在为人们日常出行带来便利的同时也引发了许多问题，例如交通拥堵、环境污染、交通事故等。其中交通堵塞已成为严重的社会问题，为道路使用者带来很多难题，每年由于交通堵塞造成大量燃料浪费和时间浪费。不仅使人们日常出行将大量时间浪费在车路上，燃料浪费及尾气排放等造成的雾霾严重危害着人类健康。交通事故也已成为人类生活的最大威胁之一。鉴于此，就需要未来车辆出行更安全、更绿色(例如尾气排放更少)、完全自动化、让乘客有更舒适的娱乐体验等。因此为使交通基础设施更加安全和高效，交通系统就必须足够智能。ITS(IntelligentTransportationSystems,智能交通系统)为改善道路交通安全、缓解交通拥堵、减少汽车油耗保护环境应运而生，在学术界和工业领域都受到本文档来自技高网...

【技术保护点】
一种基于多智能体Q学习的车载通信MAC层信道接入方法，其特征在于，所述方法包括如下步骤：步骤1：在VANETs环境中，每个车辆节点根据当前网络环境和其他车辆节点构建自己的联合状态—动作对映射关系和联合策略；步骤2：判断VANET网络中是否有新的车辆节点加入；步骤3：若有，则新加入的车辆节点通过迁移学习快速获取动作空间、状态空间、和奖赏函数，此后每个车辆节点更新自己的联合状态—动作对关系和联合策略；步骤4：若没有，则判断当前车辆节点是否有数据需要发送；步骤5：若有数据要发送，则根据eCEQ算法确定满足相关均衡的动作策略解；步骤6：从{I,K,R}动作集中选择能使多智能体系统最终达到相关均衡的动作...

【技术特征摘要】
1.一种基于多智能体Q学习的车载通信MAC层信道接入方法，其特征在于，所述方法包括如下步骤：步骤1：在VANETs环境中，每个车辆节点根据当前网络环境和其他车辆节点构建自己的联合状态—动作对映射关系和联合策略；步骤2：判断VANET网络中是否有新的车辆节点加入；步骤3：若有，则新加入的车辆节点通过迁移学习快速获取动作空间、状态空间、和奖赏函数，此后每个车辆节点更新自己的联合状态—动作对关系和联合策略；步骤4：若没有，则判断当前车辆节点是否有数据需要发送；步骤5：若有数据要发送，则根据eCEQ算法确...

【专利技术属性】
技术研发人员：赵海涛，于洪苏，沈箬怡，杜艾芊，朱洪波，
申请(专利权)人：南京邮电大学，
类型：发明
国别省市：江苏,32