一种基于红外与可见光的图像融合方法和系统技术方案

技术编号:40418009 阅读:19 留言:0更新日期:2024-02-20 22:35
本发明专利技术提供一种基于红外与可见光的图像融合方法和系统,其中方法包括将待融合的红外图像与可见光图像进行图像融合,得到初步融合后的图像;训练端到端的超分辨网络;将初步融合后的图像输入至训练后的端到端的超分辨网络,得到最终融合后的图像。本发明专利技术中估计器Estimator和恢复器Restorer交替目标轮数,并且在模型最后将像素值误差作为监督信息。因为估计器Estimator和恢复器Restorer的参数在不同的迭代之间共享,所以整个网络可以很好地训练,而对中间结果没有任何限制。

【技术实现步骤摘要】

本专利技术属于图像融合,尤其涉及一种基于红外与可见光的图像融合方法和系统


技术介绍

1、在实际的航空场景中,由于光照、气象条件等环境因素的变化,导致单一传感器很难获取到不同条件、不同时间段下的高质量航空遥感图像。比如可见光图像通常包含丰富的纹理细节信息,但却容易因云层等遮挡而丢失场景中的目标;与之相反,红外传感器通过捕获物体的热辐射信息进行成像,能够有效地突出各类显著目标,但是缺乏对场景的细节描述。因此需要一种的方法针对全天候下的不同光照、气象等条件稳定地进行可见光图像与红外图像融合以生成高质量航空遥感图像。

2、传统的图像融合方法通常可分为像素级图像融合,特征级图像融合和决策级图像融合。其中像素级融合先对融合源图像进行严格的点对点的图像校正、降噪和配准等图像预处理,然后对源图像对应像素进行融合处理;特征级融合属于中间层次融合,该类方法针对性地提取图像的特征信息,例如边缘,纹理等进行融合;决策级融合属于最高层次的融合,与特征级融合相比,它对源图像的处理是在提取出图像的目标特征之后,继续进行特征识别、决策分类等处理,然后联合各个源图像的决策信息本文档来自技高网...

【技术保护点】

1.一种基于红外与可见光的图像融合方法,其特征在于,包括:

2.根据权利要求1所述的基于红外与可见光的图像融合方法,其特征在于,所述将待融合的红外图像与可见光图像进行图像融合,得到初步融合后的图像,包括:

3.根据权利要求2所述的基于红外与可见光的图像融合方法,其特征在于,所述确定红外图像与可见光图像的纹理信息,包括:

4.根据权利要求2所述的基于红外与可见光的图像融合方法,其特征在于,所述将红外图像与可见光图像的基础特征与细节特征经过concat连接操作汇总后输入至TPFusion图像融合网络的解码器,得到初步融合后的图像,包括:

5.根...

【技术特征摘要】

1.一种基于红外与可见光的图像融合方法,其特征在于,包括:

2.根据权利要求1所述的基于红外与可见光的图像融合方法,其特征在于,所述将待融合的红外图像与可见光图像进行图像融合,得到初步融合后的图像,包括:

3.根据权利要求2所述的基于红外与可见光的图像融合方法,其特征在于,所述确定红外图像与可见光图像的纹理信息,包括:

4.根据权利要求2所述的基于红外与可见光的图像融合方法,其特征在于,所述将红外图像与可见光图像的基础特征与细节特征经过concat连接操作汇总后输入至tpfusion图像融合网络的解码器,得到初步融合后的图像,包括:

5.根据权利要求1所述的基于红外...

【专利技术属性】
技术研发人员:徐一张潇吴宪云李云松王向前杨东阁
申请(专利权)人:南京天巡遥感技术研究院有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1