一种基于深度学习的红外图像超分辨率重建方法技术

本发明专利技术公开了一种基于深度学习的红外图像超分辨率重建方法，首先将红外视频转化成连续的多帧红外图像并进行红外图像增强预处理，获得对比度更高、视觉效果更好的红外图像；同时建立基于深度学习的图像超分辨率重建算法模型；基于该模型，利用可见光数据集进行模型训练得到高低分辨率图像之间的关系模型；将红外图像输入该模型进行超分辨率重建，获得高分辨率的红外图像；最后整合红外图像得到信息更丰富的红外图像视频。本发明专利技术在红外图像的质量优化上具有十分优秀的效果，同时可以快速地将低质量的红外视频转换成高质量的视频，在军事、医学、安防等领域具有十分重要的作用。

【技术实现步骤摘要】
一种基于深度学习的红外图像超分辨率重建方法
本专利技术属于图像处理领域，具体涉及一种基于深度学习的红外图像超分辨率重建方法。
技术介绍
随着红外成像技术的不断发展，红外图像在军事、医学、公共安全等领域具有十分重要的作用。然而，红外图像相比可见光图像具有对比度低、细节信息不足、边缘模糊等特点，在实际应用中仍然存在很多问题。因此，对红外图像成像质量的优化成为了图像处理领域十分重要的分支。但是，直接通过红外成像设备获得高质量图片的过程往往存在很多干扰，对成像设备的要求也很高，这也意味着更高的硬件成本。所以，将图像超分辨率方法应用到红外图像上、对红外图像进行超分辨率重建从而获得更高的成像质量将是一个必要手段。近几年，在可见光领域，已有大量科研工作者基于深度学习提出了许多超分辨率图像的算法，往往可以获得较好的成像结果。DongC.etal.在2014年首次提出基于深度学习的图像超分辨率算法SRCNN，2015年何凯明提出了残差网络结构ResNet，解决了网络结构较深时无法训练的问题。这些算法提出将采集到的高分辨率图像进行压缩获得低分辨率图像，再进本文档来自技高网...

【技术保护点】
1.一种基于深度学习的红外图像超分辨率重建方法，其特征在于，步骤如下：/n步骤1、采集一段红外视频，将其分为若干帧红外图像，转入步骤2；同时基于通道注意力机制残差学习图像超分辨率重建算法，建立低分辨率图像与高分辨率图像之间的关系模型，转入步骤3；/n步骤2、将若干帧红外图像分别进行图像增强预处理，获得各帧对应的增强图像R(x，y)，转入步骤4；/n步骤3、利用可见光数据集学习低分辨率图像与高分辨率图像之间的关系模型，获得图像超分辨率重建模型，转入步骤4；/n步骤4、将各帧对应的增强图像R(x，y)依次输入图像超分辨率重建模型，进行超分辨率重建，从而得到分辨率更高的红外图像，转入步骤5；/n步骤...

【技术特征摘要】
1.一种基于深度学习的红外图像超分辨率重建方法，其特征在于，步骤如下：
步骤1、采集一段红外视频，将其分为若干帧红外图像，转入步骤2；同时基于通道注意力机制残差学习图像超分辨率重建算法，建立低分辨率图像与高分辨率图像之间的关系模型，转入步骤3；
步骤2、将若干帧红外图像分别进行图像增强预处理，获得各帧对应的增强图像R(x，y)，转入步骤4；
步骤3、利用可见光数据集学习低分辨率图像与高分辨率图像之间的关系模型，获得图像超分辨率重建模型，转入步骤4；
步骤4、将各帧对应的增强图像R(x，y)依次输入图像超分辨率重建模型，进行超分辨率重建，从而得到分辨率更高的红外图像，转入步骤5；
步骤5、将各帧重建后的红外图像进行整合输出，得到信息更为丰富的红外图像视频。


2.根据权利要求1所述的基于深度学习的红外图像超分辨率重建方法，其特征在于，步骤1中，基于通道注意力机制残差学习图像超分辨率重建算法，建立低分辨率图像与高分辨率图像之间的关系模型，具体步骤如下：
选择任意一个标准数据集，将所述标准数据集中的高分辨率图像IHR进行下采样获得低分辨率图像ILR，通过卷积层C1得到第一中间变量F0，F0通过若干个基于通道注意力机制的残差学习块HB得到第二中间变量Fb，再通过一个卷积层C2得到第三中间变量，第三中间变量与F0相加得到第四中间变量FDF，最后通过一个上采样层和一个卷积层C3获得超分辨率图像ISR，将ISR与用于训练的高分辨率图像IHR进行比较，通过反向传播过程修改低分辨率图像重建的模型参数的权重，通过多次学习最终获得泛化能力较高的深度学习模型，即低分辨率图像与高分辨率图像之间的关系模型，具体计算公式如下：






Fb＝HBFb-1；

【专利技术属性】
技术研发人员：陈钱，展梦灵，
申请(专利权)人：南京理工大学，
类型：发明
国别省市：江苏;32