System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 一种基于多尺度特征自适应融合的语义通信方法技术_技高网

一种基于多尺度特征自适应融合的语义通信方法技术

技术编号:42630227 阅读:24 留言:0更新日期:2024-09-06 01:31
本申请提出了一种基于多尺度特征自适应融合的语义通信方法,涉及通信与人工智能领域。所述方法包括采用基于多尺度特征融合注意力模块的语义编码器和语义解码器对语义样本序列进行处理,从而得到相应的估计语义样本序列。本发明专利技术对传统基于SE‑ResNet的注意力模块进行改进,通过引入不同尺寸的卷积核,在保持残差学习特点的同时,增加了网络对多尺度特征的捕获能力。将批量归一化层放置在了激活函数之前,解决了模型不收敛的问题,对网络的学习动态产生积极的影响。仿真实验结果表明,相比传统通信方法和现有的语义通信技术,本发明专利技术能够在保持传输效率的同时,显著提高语音信号的恢复精度,特别是在复杂的信道条件和低信噪比环境中。

【技术实现步骤摘要】

本专利技术属于通信与人工智能领域,具体涉及一种基于多尺度特征自适应融合的语义通信方法


技术介绍

1、在过去的几十年中,通信主要集中在如何准确有效地将符号(以比特为单位)从发射器传输到接收器。在此类系统中,误码率(ber)或符号误码率(ser)通常作为性能指标。随着从第一代(1g)发展到第五代(5g),实现的传输速率提升了数万倍,系统容量逐渐接近香农极限。最近,出现了各种新的应用,如自动驾驶、消费机器人、环境监测和远程医疗。这些应用程序的互连将以zetta字节为单位生成数量惊人的数据。此外,这些应用需要在有限的频谱资源上支持大规模连接,但需要更低的延迟,这给传统的源信道编码带来了严峻的挑战。语义通信可以通过提取数据的意义,过滤掉无用、不相关、不重要的信息,在语义域内处理数据,能够保留意义的同时进一步压缩数据。此外,语义通信有望在恶劣的信道环境中(即低信噪比(snr)区域)下具有鲁棒性,非常适合需要高可靠性的应用。这些因素促使技术人员通过考虑数字比特背后的语义含义来开发智能通信系统,以提高通信的准确性和效率。

2、与传统通信不同,语义通信旨在传输与传输目标相关的信息。例如,对于文本传输,意义因此是基本信息,而表达,即词的表达,是不必要的。通过这样做,数据流量将大大减少。在典型的通信系统中,当带宽有限、信噪比低或误码率/ser高时,这种系统可能特别有用。

3、目前,基于人工智能的语义通信系统正处于研究的初期阶段,展现出对传统通信模式的有力挑战。研究指出,相比传统通信系统,语义通信能显著降低数据传输量和通信资源消耗,提升通信效率,并能在低信噪比的条件下保持良好的通信质量。随着6g网络对万物互联的支持,预计将产生海量的数据流量,以及对通信系统提出更加多样化和个性化的要求。在这样的背景下,语义通信的研究不仅与时俱进,而且为构建未来的6g通信系统提供了一种新颖的视角。


技术实现思路

1、基于现有技术存在的问题,本专利技术提供了一种基于多尺度特征自适应融合的语义通信方法,其可以基于语义通信系统,所述语义通信系统是一个高度先进的语义通信框架,它融合了深度学习技术,特别是卷积神经网络(cnn)在多尺度感知领域的最新进展。此系统突破了传统通信仅关注符号级传输的局限,转向了一种更加高效和智能的通信模式,即直接提取并传输信源信息的语义内容。

2、一种基于多尺度特征自适应融合的语义通信方法,所述方法包括:

3、获取原始语义样本序列;

4、对原始语义样本序列进行分帧处理,得到第一语义样本序列;

5、利用基于多尺度特征融合注意力模块的语义编码器对所述第一语义样本序列进行处理,提取出所述第一语义样本序列的多尺度信息特征;

6、利用基于卷积神经网络的信道编码器对所述第一语义样本序列的多尺度信息特征进行转换,得到第一语义符号;

7、在发射端通过物理信号传输所述第一语义符号,在接收端得到所述第一语义符号对应的第二语义符号;

8、利用基于卷积神经网络的信道解码器对所述第二语义符号进行转换,得到第二语义样本序列;

9、利用基于多尺度特征融合注意力模块的语义解码器对所述第二语义样本序列进行处理,提取出所述第三语义样本序列;

10、对第三语义样本序列进行合帧处理,得到接收端的估计语义样本序列。

11、本专利技术的有益效果:

12、本专利技术针对空间维度的多核卷积对音频信号的重要意义,以及传统语义通信的注意力机制只考虑了通道之间的关系,在传统的语义编码器新增了多尺度特征自适应融合功能的注意力模块,相较于传统的se-resnet架构,所提出的网络结构带来了几个关键性的创新。首先,它通过引入不同尺寸的卷积核,在保持残差学习特点的同时,增加了网络对多尺度特征的捕获能力。这意味着网络不仅可以识别音频中的粗大特征,同时也能够捕捉到更细微的细节,这在处理不同大小的目标或是层次丰富的场景时尤为有价值。其次,由于在传统语义通信系统中批量归一化层放置在了激活函数之后会有模型训练不收敛的情况发生,本专利技术将批量归一化层放置在了激活函数之前,解决了模型不收敛的问题,这是对传统se-resnet中通常先进行批量归一化后再激活的顺序的一个优化。这样的调整会对网络的学习动态产生积极的影响。最后,这个结构还包含了维度扩展操作,允许将得到的特征图在空间上进行扩展,以适应后续的运算。这一点在传统的se-resnet结构中不常见,它为后续的特征组合和变换提供了更大的灵活性。综合来看,这个改进的结构在继承了se-resnet的深度和残差连接优点的基础上,通过多尺度特征学习和顺序调整增加了对复杂视觉模式的识别能力,并可能提供了更好的训练稳定性和优化效率。它的设计思想和结构调整,是对传统se-resnet的有益补充,对于提高网络在语义通信任务中的表现潜力具有重要意义。

本文档来自技高网...

【技术保护点】

1.一种基于多尺度特征自适应融合的语义通信方法,其特征在于,所述方法包括:

2.根据权利要求1所述的基于多尺度特征自适应融合的语义通信方法,其特征在于,所述对原始语义样本序列进行分帧处理,得到第一语义样本序列包括对所述原始语义样本序列按照不同尺寸进行分帧处理,得到多个不同长度的第一语义样本序列,所述多个不同长度的第一语义样本序列包括目标第一语义样本序列以及覆盖所述目标第一语义样本序列对应的至少一个边缘的第一语义样本序列。

3.根据权利要求2所述的基于多尺度特征自适应融合的语义通信方法,其特征在于,所述利用基于多尺度特征融合注意力模块的语义编码器对所述第一语义样本序列进行处理,提取出所述第一语义样本序列的多尺度信息特征包括利用基于多尺度特征融合注意力模块的语义编码器对多个不同长度的第一语义样本序列进行处理,分别提取出多个不同长度的第一语义样本序列的多尺度信息特征;将所述目标第一语义样本序列的多尺度信息与对应的边缘的第一语义样本序列的多尺度信息采用注意力机制进行融合,得到所述目标第一语义样本序列的多尺度注意力信息特征。

4.根据权利要求1所述的基于多尺度特征自适应融合的语义通信方法,其特征在于,所述多尺度特征融合注意力模块包括多个尺寸逐渐增加的卷积层;后一个卷积层的输入端连接前一个卷积层的输出端;所有卷积层的输出端通过加法器进行连接;最后一个卷积层对应的加法器连接全局平均池化层;所述全局平均池化层连接多个全连接层,最后一个全连接层连接加法器,所述加法器连接扩展层;所述扩展层连接softmax激活函数层;所述softmax激活函数层与卷积层的输出端的加法器通过乘法器连接。

5.根据权利要求4所述的基于多尺度特征自适应融合的语义通信方法,其特征在于,所述多个尺寸逐渐增加的卷积层包括3×3卷积核,5×5卷积核,7×7卷积核,9×9卷积核中两个及以上卷积核对应的卷积层。

6.根据权利要求4或5所述的基于多尺度特征自适应融合的语义通信方法,其特征在于,每个卷积层包括顺次连接的卷积核、批量归一化层和Relu激活函数层;所述卷积核作为输入层,所述批量归一化层作为中间层,所述Relu激活函数层作为输出层。

7.根据权利要求1所述的基于多尺度特征自适应融合的语义通信方法,其特征在于,所述方法还包括利用重塑层对所述第一语义符号进行处理,得到第一码元序列;在发射端通过物理信号传输所述第一码元序列,在接收端得到所述第一码元序列对应的第二码元序列;利用重塑层对所述第二码元序列进行处理,得到第二语义符号。

...

【技术特征摘要】

1.一种基于多尺度特征自适应融合的语义通信方法,其特征在于,所述方法包括:

2.根据权利要求1所述的基于多尺度特征自适应融合的语义通信方法,其特征在于,所述对原始语义样本序列进行分帧处理,得到第一语义样本序列包括对所述原始语义样本序列按照不同尺寸进行分帧处理,得到多个不同长度的第一语义样本序列,所述多个不同长度的第一语义样本序列包括目标第一语义样本序列以及覆盖所述目标第一语义样本序列对应的至少一个边缘的第一语义样本序列。

3.根据权利要求2所述的基于多尺度特征自适应融合的语义通信方法,其特征在于,所述利用基于多尺度特征融合注意力模块的语义编码器对所述第一语义样本序列进行处理,提取出所述第一语义样本序列的多尺度信息特征包括利用基于多尺度特征融合注意力模块的语义编码器对多个不同长度的第一语义样本序列进行处理,分别提取出多个不同长度的第一语义样本序列的多尺度信息特征;将所述目标第一语义样本序列的多尺度信息与对应的边缘的第一语义样本序列的多尺度信息采用注意力机制进行融合,得到所述目标第一语义样本序列的多尺度注意力信息特征。

4.根据权利要求1所述的基于多尺度特征自适应融合的语义通信方法,其特征在于,所述多尺度特征融合注意力模块包括多个尺寸逐渐增加的...

【专利技术属性】
技术研发人员:李职杜张宝霈江佳骏邓明亮薛青王巨震
申请(专利权)人:重庆邮电大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1