车辆动态自适应通信方法、设备和介质技术

本发明专利技术公开了一种车辆动态自适应通信方法、设备和介质，应用于一车辆动态自适应通信系统，系统包括传感器功能域、控制器功能域、信息处理功能域、信息显示功能域、通信接口功能域，通信接口功能域用于实现内网连接和外网连接。方法包括：基于强化学习算法，定义有限的状态空间和动作空间，其中状态空间表示内网连接和外网连接的各种状态，动作空间表示可以采取的各种动作；初始化用于存储每种状态

【技术实现步骤摘要】
车辆动态自适应通信方法、设备和介质


[0001]本专利技术涉及车辆子系统的联合控制
，尤其涉及一种车辆动态自适应通信方法、设备和介质。

技术介绍

[0002]目前，基于“五域划分”的汽车电子电气架构，将全车的电子电气架构分为动力域、底盘域、车身域、座舱域和智能驾驶域，每个域由一个域控制器进行统一的控制。这种方式主要采用CAN总线作为通信技术，实现各个子系统之间的信息交换。
[0003]本申请专利技术人在实现本专利技术实施例技术方法的过程中，至少发现现有技术中存在如下技术问题：“五域划分”的汽车通信网络架构按照子系统的物理结构划分，不是按照子系统之间的通信需求和目标划分，可能导致通信网络架构不够合理和高效，无法充分利用各种通信技术和协议的优势，造成通信资源的浪费和通信效率的降低。另外，“五域划分”的汽车通信网络架构是一种相对固定和封闭的架构，难以适应不同类型（如：燃油车、混合动力车和纯电动车）和等级（如L2级别和L4级别）的汽车的通信需求和变化，也难以实现与互联网之间的数据共享和协同优化，影响汽车的智能化和个性化水平。
[0004]综上，现有技术的车辆通信网络架构无法满足现有的通信需求。

技术实现思路

[0005]本专利技术实施例提供一种车辆动态自适应通信方法、设备和介质，解决了现有技术的车辆通信网络架构无法满足现有的通信需求的技术问题。
[0006]本专利技术实施例一方面提供了一种车辆动态自适应通信方法，应用于一车辆动态自适应通信系统，所述车辆动态自适应通信系统包括传感器功能域、控制器功能域、信息处理功能域、信息显示功能域、通信接口功能域，所述通信接口功能域包括用于实现内网连接和外网连接的通信接口模块，所述内网连接为所述传感器功能域、所述控制器功能域、所述信息处理功能域、所述信息显示功能域之间的连接，所述外网连接为互联网与所述传感器功能域、所述控制器功能域、所述信息处理功能域、所述信息显示功能域之间的连接，所述车辆动态自适应通信方法包括：基于强化学习算法，定义有限的状态空间和动作空间，其中所述状态空间表示所述内网连接和所述外网连接的各种状态，所述动作空间表示可以采取的各种动作；初始化用于存储每种状态
‑
动作对应的Q值的Q表，所述Q值表示采取动作后所能获得的长期回报的期望值；根据探索
‑
控制策略，基于所述Q表，选择最佳状态
‑
动作，向每个功能域发送配置信息；根据公式，更新所述Q表，其中s和s
′
分别表示当前状态和下一个状态，a和a
′
分别表示当前动作和下一个动作，r表示即时回报，α表示学习率，γ表示折扣因子。
[0007]可选的，所述初始化用于存储每种状态
‑
动作对应的Q值的Q表，具体为：将所述Q表
中存储的每种状态
‑
动作对应的Q值进行随机赋值或全零赋值。
[0008]可选的，所述根据探索
‑
控制策略，基于所述Q表，选择最佳状态
‑
动作，具体为：根据探索
‑
控制策略，从所述Q表中选择Q值最大或有一定概率的状态
‑
动作为最佳状态
‑
动作。
[0009]可选的，所述状态包括：通信方式、通信协议、带宽、时延、丢包率。
[0010]可选的，所述动作包括：选择或切换通信方式、通信协议、通信参数。
[0011]可选的，在所述更新所述Q表之后，还包括：基于图论模型，将每个功能域和所述互联网视为节点，节点之间的通信连接视为边，每条边赋予权重值，所述权重值反映每条边的通信质量；根据通信需求，构建有向加权图，其中V表示节点集合，E表示边集合，W表示权重值集合；实时采集每条边的通信状态和质量信息，计算每条边的权重值，更新所述权重值集合W；根据各个节点和边的关系，分析通信方式之间的关系，调整通信连接和数据传输的优先级和策略；根据每条边的权重值，选择最优的通信方式，向每个功能域发送配置信息。
[0012]可选的，在所述更新所述Q表之后，还包括：S1：基于博弈论，将每个功能域和所述互联网视为玩家，将各种通信方式和通信协议视为策略，定义效用函数，所述效用函数表示每个玩家在采取一种策略所能获得的收益；S2：根据通信需求，构建非合作博弈，其中，N表示玩家集合，S表示策略集合，u表示效用函数；S3：根据每个玩家的效用函数，计算每个玩家在每种策略下的期望收益，根据期望收益分配每种策略的权重值；S4：根据每种策略的权重值，选择最优的通信方式和通信协议，向每个功能域发送配置信息；S5：根据每个玩家实际采取的策略和实际获得的收益，更新效用函数；S6：重复步骤S1
‑
S5，直到达到纳什均衡状态。
[0013]可选的，所述传感器功能域，用于采集车辆内部和车辆外部的传感信息；所述控制器功能域，用于执行车辆控制操作；所述信息处理功能域，用于处理所述传感器功能域传输的传感信息或所述互联网传输的待处理信息；所述信息显示功能域，用于显示所述信息处理功能域或所述互联网的信息；所述通信接口功能域，用于实现所述内网连接和所述外网连接。
[0014]另一方面，本专利技术实施例还提供一种计算机设备，包括存储器和处理器，所述存储器存储有计算机程序，所述处理器执行所述计算机程序时实现前述实施例中车辆动态自适应通信方法的步骤。
[0015]本专利技术实施例还提供一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现前述实施例中车辆动态自适应通信方法的步骤。
[0016]本专利技术实施例中提供的一个或多个技术方案，至少具有如下技术效果或优点：一种车辆动态自适应通信方法，应用于一车辆动态自适应通信系统，所述车辆动态自适应通信系统包括传感器功能域、控制器功能域、信息处理功能域、信息显示功能域、通信接口功能域，所述通信接口功能域包括用于实现内网连接和外网连接的通信接口模块，所述内网连接为所述传感器功能域、所述控制器功能域、所述信息处理功能域、所述信息显示功能域之间的连接，所述外网连接为互联网与所述传感器功能域、所述控制器功能域、所述信息处理功能域、所述信息显示功能域之间的连接，所述车辆动态自适应通信方法包括：基于强化学习算法，定义有限的状态空间和动作空间，其中所述状态空间表示所述内
网连接和所述外网连接的各种状态，所述动作空间表示可以采取的各种动作；初始化用于存储每种状态
‑
动作对应的Q值的Q表，所述Q值表示采取动作后所能获得的长期回报的期望值；根据探索
‑
控制策略，基于所述Q表，选择最佳状态
‑
动作，向每个功能域发送配置信息；根据公式，更新所述Q表，其中s和s
′
分别表示当前状态和下一个状态，a和a
′
分别表示当前动作和下一个动作，r表示即时回报，α表示学习率，γ表示折扣因子。本申请按照子系统之间的通信需求和目标，将车辆动态自适应通信系统的通信网络架构划分为传感器功能域、控制器本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种车辆动态自适应通信方法，应用于一车辆动态自适应通信系统，其特征在于，所述车辆动态自适应通信系统包括传感器功能域、控制器功能域、信息处理功能域、信息显示功能域、通信接口功能域，所述通信接口功能域包括用于实现内网连接和外网连接的通信接口模块，所述内网连接为所述传感器功能域、所述控制器功能域、所述信息处理功能域、所述信息显示功能域之间的连接，所述外网连接为互联网与所述传感器功能域、所述控制器功能域、所述信息处理功能域、所述信息显示功能域之间的连接，所述车辆动态自适应通信方法包括：基于强化学习算法，定义有限的状态空间和动作空间，其中所述状态空间表示所述内网连接和所述外网连接的各种状态，所述动作空间表示可以采取的各种动作；初始化用于存储每种状态
‑
动作对应的Q值的Q表，所述Q值表示采取动作后所能获得的长期回报的期望值；根据探索
‑
控制策略，基于所述Q表，选择最佳状态
‑
动作，向每个功能域发送配置信息；根据公式，更新所述Q表，其中s和s
′
分别表示当前状态和下一个状态，a和a
′
分别表示当前动作和下一个动作，r表示即时回报，α表示学习率，γ表示折扣因子。2.如权利要求1所述的方法，其特征在于，所述初始化用于存储每种状态
‑
动作对应的Q值的Q表，具体为：将所述Q表中存储的每种状态
‑
动作对应的Q值进行随机赋值或全零赋值。3.如权利要求1所述的方法，其特征在于，所述根据探索
‑
控制策略，基于所述Q表，选择最佳状态
‑
动作，具体为：根据探索
‑
控制策略，从所述Q表中选择Q值最大或有一定概率的状态
‑
动作为最佳状态
‑
动作。4.如权利要求1所述的方法，其特征在于，所述状态包括：通信方式、通信协议、带宽、时延、丢包率。5.如权利要求1所述的方法，其特征在于，所述动作包括：选择或切换通信方式、通信协议、通信参数。6.如权利要求1所...

【专利技术属性】
技术研发人员：邓建明，龚循飞，于勤，张俊，罗锋，廖程亮，樊华春，熊慧慧，张萍，
申请(专利权)人：江西五十铃汽车有限公司，
类型：发明
国别省市：