基于红外目标掩膜的红外与可见光图像融合方法技术

技术编号:40517445 阅读:19 留言:0更新日期:2024-03-01 13:34
本发明专利技术公开的基于红外目标掩膜的红外与可见光图像融合方法,属于图像融合技术领域。本发明专利技术实现方法为:构建红外目标掩膜图像捕捉红外图像中热辐射目标的信息。根据红外目标掩膜构建基于红外图像目标掩膜引导的混合损失函数来约束融合过程,利用像素、梯度和结构相似度,计算两种模态图像和融合图像之间的损失,引导网络提取热辐射目标区域,减轻跨模态干扰。构建双通道多尺度特征提取模块,充分捕捉两幅源图像中的互补特征。特征融合模块使用N<subgt;R</subgt;个ResBlock子模块对提取到的特征进行融合,并通过两个卷积层分别结合激活函数进行图像重建,完成红外与可见光图像的融合,提高红外与可见光图像的融合效率,使融合图像同时获取显著目标和丰富的背景纹理信息。

【技术实现步骤摘要】

本专利技术属于图像融合,尤其涉及一种基于红外目标掩膜的红外与可见光图像融合方法


技术介绍

1、图像融合技术旨在结合不同的模态特征来生成信息丰富的图像,实现场景的清晰表达。红外图像通过捕捉物体发出的热辐射信息,可以有效地突出目标,但缺乏细节信息;可见光图像包含丰富的纹理结构,但易受天气、光线条件和障碍物等外部因素的影响,从而失去目标。红外与可见光融合图像既包含红外目标,又包含丰富的可见光细节,目前已广泛应用于医学成像、军事识别、目标检测、遥感等领域。

2、目前,利用深度学习方法对红外图像和可见光图像进行融合是科研人员关注的一个重点方向。根据网络架构,基于深度学习的融合算法主要分为基于卷积神经网络(cnn)的方法,基于自动编码器(ae)的方法及基于生成对抗性网络(gan)的方法。尽管这些基于深度学习的融合方法解决了传统算法存在的缺点,并取得了较好的融合性能,但仍然存在源图像中重要信息保留不足及特征退化和细节丢失问题,导致产生跨模态干扰,融合图像红外目标亮度变暗和可见场景细节丢失。


技术实现思路>

1、本文档来自技高网...

【技术保护点】

1.基于红外目标掩膜的红外与可见光图像融合方法,其特征在于:包括以下步骤,

2.如权利要求1所述的基于红外目标掩膜的红外与可见光图像融合方法,其特征在于:步骤1中,

3.如权利要求2所述的基于红外目标掩膜的红外与可见光图像融合方法,其特征在于:步骤2中,

4.如权利要求3所述的基于红外目标掩膜的红外与可见光图像融合方法,其特征在于:步骤3中,

5.如权利要求4所述的基于红外目标掩膜的红外与可见光图像融合方法,其特征在于:步骤4中,

【技术特征摘要】

1.基于红外目标掩膜的红外与可见光图像融合方法,其特征在于:包括以下步骤,

2.如权利要求1所述的基于红外目标掩膜的红外与可见光图像融合方法,其特征在于:步骤1中,

3.如权利要求2所述的基于红外目标掩膜的红外与可见光...

【专利技术属性】
技术研发人员:高美静白洋
申请(专利权)人:北京理工大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1