一种基于混合退化和内容感知的立体图像盲超分辨率方法技术

本发明专利技术公开了一种基于混合退化和内容感知的立体图像盲超分辨率方法，属于图像处理技术领域；本发明专利技术针对目前尚未存在真实场景立体图像数据集的问题，提出了一种立体图像高阶门控退化模型来生成立体图像合成数据集，从而模拟真实世界场景中的复杂退化。其次，提出了一种用于立体图像的混合退化‑内容表征学习机制。该机制通过无监督对比学习的方式，使得网络不仅能够提取到立体图像中的退化信息，而且可以联合提取到左视点图像和右视点图像中的显式内容信息，并将此学习到的HDCR作为先验信息来辅助网络进行更好的重建。然后，本发明专利技术设计了一种混合先验融合块，它能够自适应地处理各种不同的复杂退化，并将学习到的先验信息高效地融合进网络中。最后，本发明专利技术提出了一种跨视点视差注意力模块来准确捕获跨视点信息。本发明专利技术为真实场景下的立体图像超分辨率方法提供了研究方案，在一定程度上推动了图像检测和分割等高层视觉任务的发展。

【技术实现步骤摘要】

本专利技术涉及图像处理，具体为一种基于混合退化和内容感知的立体图像盲超分辨率方法。

技术介绍

1、图像和视频因其形象、直观等特点，已成为视觉信息的重要承载形式。为了追求更加清晰和逼真的视觉体验，数字图像采集技术和处理技术得到了迅猛发展。随着机器人导航、虚拟现实和增强现实技术的广泛应用，拥有深度感和立体感的立体图像越来越受到学术界和工业界的关注。然而，在实际采集过程中，立受限于拍摄设备和环境，高分辨率立体图像通常很难获取。相较于高成本的硬件设备，采用软件算法实现立体图像超分辨率(stereo image super-resolution，stereo sr)更为灵活和经济。该技术在原有硬件条件下，利用图像的空间信息以及先验知识，力求恢复图像在退化过程中损失的高频细节信息，从而以低成本重建出高分辨率的立体图像。

2、立体图像超分辨率重建技术作为一门有着巨大实用价值的专业技术，已被广泛应用于诸多领域。在医学领域，图像超分辨技术可以对肿瘤图像、核磁共振图像等进行分辨率的增强，借助于重建后的高分辨率医学立体影像，可以更加逼真地显示病灶，帮助医生更准确地定本文档来自技高网...

【技术保护点】

1.一种基于混合退化和内容感知的立体图像盲超分辨率方法，其特征在于，通过提出一种立体图像盲超分辨率网络对真实场景下的立体图像进行超分辨率重建，所述立体图像盲超分辨率网络包括：

2.根据权利要求1所述的一种基于混合退化和内容感知的立体图像盲超分辨率方法，其特征在于，所述立体图像盲超分辨率网络的训练分为两个阶段：

3.根据权利要求1所述的一种基于混合退化和内容感知的立体图像盲超分辨率方法，其特征在于，所述立体图像高阶门控退化模型通过在高阶退化模型的基础上加入门控机制，由随机门控制器实现，在随机门控制器的指导下，将多种基本退化进行随机打乱与组合，进而扩大退化空间以涵盖基...

【技术特征摘要】

1.一种基于混合退化和内容感知的立体图像盲超分辨率方法，其特征在于，通过提出一种立体图像盲超分辨率网络对真实场景下的立体图像进行超分辨率重建，所述立体图像盲超分辨率网络包括：

2.根据权利要求1所述的一种基于混合退化和内容感知的立体图像盲超分辨率方法，其特征在于，所述立体图像盲超分辨率网络的训练分为两个阶段：

3.根据权利要求1所述的一种基于混合退化和内容感知的立体图像盲超分辨率方法，其特征在于，所述立体图像高阶门控退化模型通过在高阶退化模型的基础上加入门控机制，由随机门控制器实现，在随机门控制器的指导下，将多种基本退化进行随机打乱与组合，进而扩大退化空间以涵盖基本退化的不同子集；

4.根据权利要求1所述的一种基于混...

【专利技术属性】
技术研发人员：李素梅，田梦圆，林沛明，
申请(专利权)人：天津大学，
类型：发明
国别省市：