本发明专利技术提供一种自动驾驶场景下任务导向的毫米波链路自适应多模态语义通信方法、装置、电子设备及存储介质，属于自动驾驶技术领域，所述方法包括：发射端将目标图像输入语义编码器得到第一特征图后输入至联合信源信道编码器，得到第二特征图；对第二特征图进行特征筛选，得到第三特征图后进行数字预编码以及模拟预编码，得到对应的发送信号矩阵后，发送至接收端；接收端对接收信号矩阵进行模拟合并及数字合并，得到接收特征图后输入至联合信源信道解码器，得到解码特征；对各解码特征进行融合处理，得到融合特征后，将融合特征输入至语义解码器，得到语义解码器输出的语义分割结果。本发明专利技术提高了语义通信的鲁棒性和准确性。
【技术实现步骤摘要】
本专利技术涉及自动驾驶 ，尤其涉及一种自动驾驶场景下任务导向的毫米波链路自适应多模态语义通信方法。
技术介绍
1、在自动驾驶技术中，环境感知、精确定位、信息交互和决策控制是其核心组成部分。其中，车辆对周围环境的感知和理解是实现自动驾驶的基础。然而，单车的感知范围和计算能力有限，容易受到遮挡，这与自动驾驶对高质量、全方位感知的需求不符，难以确保真正有效和安全的自动驾驶。因此，多辆车之间共享环境感知数据显得尤为重要。
2、语义通信技术通过提取和传输关键语义信息，能够显著减少数据传输量，为自动驾驶场景提供了新的解决方案。当前的研究已经涵盖了面向单模态图像分割的车载语义通信系统，考虑在单链路v2v场景中，图像经过编码器压缩，通过无线信道传输，在接收端通过解码器生成语义分割图。然而，面向单模态图像分割的车载语义通信系统仅根据一种模态的图像进行环境感知和信息交互，依赖于光照条件，在不同的时间段、天气条件下，图像的质量会大大影响语义分割的准确性。
3、因此，如何保证语义分割的准确性成为亟待解决的技术问题。
>技术实现思路本文档来自技高网...
【技术保护点】
1.一种自动驾驶场景下任务导向的毫米波链路自适应多模态语义通信方法，其特征在于，包括：
2.根据权利要求1所述的自动驾驶场景下任务导向的毫米波链路自适应多模态语义通信方法，其特征在于，所述方法还包括：
3.根据权利要求1所述的自动驾驶场景下任务导向的毫米波链路自适应多模态语义通信方法，其特征在于，所述第二特征图的通道数为，所述第三特征图的通道数为，其中，，所述发射端对所述第二特征图进行特征筛选，得到第三特征图，包括：
4.根据权利要求3所述的自动驾驶场景下任务导向的毫米波链路自适应多模态语义通信方法，其特征在于，所述各所述通道特征的语义重要性分数是基于...
【技术特征摘要】
1.一种自动驾驶场景下任务导向的毫米波链路自适应多模态语义通信方法，其特征在于，包括：
2.根据权利要求1所述的自动驾驶场景下任务导向的毫米波链路自适应多模态语义通信方法，其特征在于，所述方法还包括：
3.根据权利要求1所述的自动驾驶场景下任务导向的毫米波链路自适应多模态语义通信方法，其特征在于，所述第二特征图的通道数为，所述第三特征图的通道数为，其中，，所述发射端对所述第二特征图进行特征筛选，得到第三特征图，包括：
4.根据权利要求3所述的自动驾驶场景下任务导向的毫米波链路自适应多模态语义通信方法，其特征在于，所述各所述通道特征的语义重要性分数是基于如下公式计算得到的：
5.根据权利要求3或4所述的自动驾驶场景下任务导向的毫米波链路自适应多模态语义通信方法，其特征在于，所述语义评分是基于如下公式计算得到的...
【专利技术属性】
技术研发人员：张志龙，许露枝，谢文婷，刘丹谱，郭一珺，罗涛，尹长川，
申请(专利权)人：北京邮电大学，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。