一种轻量级Transformer的垃圾图像超分辨方法及系统技术方案

本发明专利技术公开了一种轻量级Transformer的垃圾图像超分辨方法及系统，轻量级Transformer块实现多尺度分层网络，获取不同程度的图像细节特征，提高图像的质量。并利用残差操作集成层次特征，提高浅层特征作用，获得更多的细节信息。先验知识转化块将先验信息加到不同尺度不同层获得的结构信息中，提高图像超分辨的鲁棒性。特征融合块根据生物技术中双目互补的思想，通过残差学习操作融合并行的先验知识转化块，提取互补的特征，提高预测图像的像素。最后通过一个卷积，重构高质量图像。本发明专利技术在改进垃圾图像超分辨效果的同时，降低了计算复杂度，实现了高效的轻量级超分辨网络，适用于垃圾图像的识别、分类等应用，在多种应用领域均有显著提升。有显著提升。有显著提升。

【技术实现步骤摘要】
一种轻量级Transformer的垃圾图像超分辨方法及系统


[0001]本专利技术属于图像处理与计算机视觉
，具体涉及一种轻量级Transformer的垃圾图像超分辨方法及系统。

技术介绍

[0002]图像超分辨是计算机视觉领域一个重要分支，指的是以低分辨率图像为输入，重建具有丰富图像细节和清晰纹理的高分辨率图像。图像超分辨在医疗诊断、安全监控和视频恢复等领域有着广泛的应用。例如，在医疗领域，高质量的图像可以帮助医生准确检测疾病；在监控与安全领域，可以提高图像质量，得到更多有价值的图像信息。因此，图像超分辨无论在学术研究还是工业应用中都具有重要意义。
[0003]为了解决单图像超分辨问题，研究人员根据上述模型，开发了多种基于低水平视觉任务退化模型的方法。其中不使用神经网络进行处理的超分辨方法被称为传统方法。一般来说，传统的单图像超分辨率可分为三类，即基于图像本身信息的方法、基于先验知识的方法和机器学习方法。但是传统方法在图像处理的过程中存在一些弊端，例如模型过于复杂、计算成本过高和超分辨过程需要手动设置参数等。针对上述问题，深度学本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种轻量级Transformer的垃圾图像超分辨方法，其特征在于，包括以下步骤：对低分辨率图像进行分层提取并加入残差信息，获得四种不同层级的图像细节特征信息；通过卷积和轻量化操作对四种不同层级的图像细节特征信息进行处理，然后将先验知识分级融合到四种不同层级的图像细节特征信息中，利用残差融合架构将特征合并输出；对输出的图像细节特征信息进行像素重组，得到预测的高分辨率图像。2.根据权利要求1所述的轻量级Transformer的垃圾图像超分辨方法，其特征在于，获得四种不同层级的图像细节特征信息具体为：使用分层特征提取模块输出不同程度的图像细节特征信息，使用特征融合块结合四种图像特征，并将先验信息与图像特征融合，得到四种不同层级的图像细节特征信息。3.根据权利要求2所述的轻量级Transformer的垃圾图像超分辨方法，其特征在于，分层特征提取模块包括四个层级，具体如下：第一层级包括8个Transformer L1块，根据数据处理的顺序，前4块Transformer L1块执行初步提取，并通过PCA模块处理后输入第二层级；后四块Transformer L1块用于对加入残差信息后的图像特征进行再次提取，然后输出至特征融合块；第二层级包括6个Transformer L2块，前3块Transformer L2块用于对上级特征提取后继续向下输出；后3块Transformer L2块用于对Transformer L1和Transformer L3残差合并后进一步特征处理，并输出至特征融合块；第三层级包括4个Transformer L3块，前2块Transformer L3块用于对上级特征提取后通过PCA模块与5
×
5卷积输入第四层级，后2块Transformer L3块在融合残差信息处理后，输出至特征融合块；第四层级包括两个Transformer L4块，用于对融合第一层级与第三层级残差后的特征信息进行提取，并输出至特征融合块。4.根据权利要求3所述的轻量级Transformer的垃圾图像超分辨方法，其特征在于，第一层级、第二层级、第三层级和第四层级中，Transformer块的数量自底向上逐渐增加。5.根据权利要求3所述的轻量级Transformer的垃圾图像超分辨方法，其特征在于，第四层级中，使用残差连接得到融合后的图像特征信息，经过层标准化后输入多头注意力机制，输出的特征图为：其中，X为输入的特征图，分...

【专利技术属性】
技术研发人员：田春伟，王璐，张璇昱，
申请(专利权)人：西北工业大学，
类型：发明
国别省市：