车联网中元强化学习边缘计算卸载方法、终端及服务器技术

技术编号:41845186 阅读:48 留言:0更新日期:2024-06-27 18:24
本发明专利技术公开了车联网中元强化学习边缘计算卸载方法、终端及服务器,属于车联网技术领域,包括:建立车载任务的有向无环图(DAG);基于子任务的优先级对DAG进行任务嵌入编码;将任务嵌入序列输入至序列到序列模型,生成任务卸载策略;并引入模型无关元学习框架(MAML),通过内外循环训练更新元策略参数。本发明专利技术对高速公路车联网场景中的移动边缘计算多任务卸载问题进行研究,提出一种基于MAML的边缘计算卸载算法,能够减少时延,及时响应车辆用户的需求,提供更高效、更可靠的服务,实现合理的卸载策略规划。

【技术实现步骤摘要】

本专利技术涉及车联网,尤其涉及车联网中元强化学习边缘计算卸载方法、终端及服务器


技术介绍

1、车联网(internet of vehicles, iov)正在成为未来交通领域的关键发展方向,它综合运用传感器、人工智能及云计算服务等技术,实现智能道路交通中各要素的整合。这些要素包括自动网联车辆(connected and automated vehicle, cav)、装备各类感应器和传感器的路边单元(road side unit, rsu)、交通信号灯、摄像头,以及连接整个车联网的网络系统。通过引入移动边缘计算(mobile edge computing, mec)将边缘计算设备部署于路边单元,可通过将计算任务卸载至边缘设备来减少决策延迟,确保网络运行和服务交付的高效性,提升用户体验。

2、近年来随着mec技术发展,已经有学者将元学习用于解决边缘计算的卸载问题。元学习(meta-learning),也被称作“学习的学习”,是一种在机器学习领域中用于提高模型对新任务快速适应能力的方法。它的核心思想是让模型通过学习一系列任务来获取通用的学习策略,本文档来自技高网...

【技术保护点】

1.一种车联网中元强化学习边缘计算卸载方法,其特征在于,执行主体为车载终端,包括以下步骤:

2.根据权利要求1所述的车联网中元强化学习边缘计算卸载方法,其特征在于,所述序列到序列模型为门控循环单元神经网络,门控循环单元神经网络的编码器接收有向无环图的任务序列,编码器对任务序列进行编码处理并输入至解码器,解码器对输入数据进行处理生成隐藏状态向量,根据解码器当前步骤的隐藏状态和编码器的所有输出计算得到加权和,并根据加权和、编码器的所有输出计算上下文向量,将上下文向量和解码器生成的隐藏层状态向量进行连接,预测得到每个任务的卸载决策。

3.根据权利要求1所述的车联网中元强...

【技术特征摘要】

1.一种车联网中元强化学习边缘计算卸载方法,其特征在于,执行主体为车载终端,包括以下步骤:

2.根据权利要求1所述的车联网中元强化学习边缘计算卸载方法,其特征在于,所述序列到序列模型为门控循环单元神经网络,门控循环单元神经网络的编码器接收有向无环图的任务序列,编码器对任务序列进行编码处理并输入至解码器,解码器对输入数据进行处理生成隐藏状态向量,根据解码器当前步骤的隐藏状态和编码器的所有输出计算得到加权和,并根据加权和、编码器的所有输出计算上下文向量,将上下文向量和解码器生成的隐藏层状态向量进行连接,预测得到每个任务的卸载决策。

3.根据权利要求1所述的车联网中元强化学习边缘计算卸载方法,其特征在于,计算各子任务的优先级前,将单个车载任务中的子任务卸载过程建模为一个马尔可夫决策过程,定义车载任务的马尔可夫决策过程的状态空间、动作空间以及奖励函数;当车联网中拥有多个辆车接入,且每辆车均需要进行车载任务时,将车联网中多个车载任务建模为多个马尔可夫决策过程。

4.根据权利要求3所述的车联网中元强化学习边缘计算卸载方法,其特征在于,...

【专利技术属性】
技术研发人员:邵彩幸杨洋魏丽媛左金辉
申请(专利权)人:西南民族大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1