基于能量最小化和梯度正则化的图像融合方法及装置制造方法及图纸

技术编号:20365544 阅读:24 留言:0更新日期:2019-02-16 17:44
本发明专利技术提供的基于l2能量最小化和l1梯度正则化的图像融合方法及装置,获取来自同一场景并进行图像配准的红外图像和可见光图像,通过NSST将红外图像和可见光图像进行多尺度、多方向分解,并得到相应的低频子带系数与高频子带系数,针对反映能量信息的低频子带系数,采用基于l2‑能量最小化的优化模型作为融合规则;针对反映纹理信息的高频子带系数,利用基于l1‑梯度正则化的优化模型作为融合规则,通过两种融合规则,将隐藏的红外显著目标信息与可见光的梯度纹理信息相结合,使最终的融合图像符合人眼视觉系统,通过将可见光的纹理信息与红外图像的显著性特征完美结合,取得较好的融合效果。

【技术实现步骤摘要】
基于能量最小化和梯度正则化的图像融合方法及装置
本专利技术涉及图像融合领域,特别涉及一种基于能量最小化和梯度正则化的图像融合方法及装置。
技术介绍
图像融合技术将来自多传感器的图像合并为一幅新图像,该图像蕴含了多种类型的信息特征,从而对图像内的场景或目标进行更为精确地描述与理解。目前,图像融合在民用领域和国防领域都有着广泛的应用,其中微光与红外图像融合是目前应用最为广泛的。在光照度不佳的微光条件下,可见光图像成像质量较差,对目标具有不易观察的隐蔽性。而红外图像则根据物体自身的辐射产生图像,可以主动地获取场景中的目标信息,因此能够很好地显示隐藏的热目标。通过两者的有效结合,能在一定情况下克服人眼在微弱光线下视觉特性存在的天然缺陷,延伸人眼的视觉波段范围,有效地形成对比度高、背景增强、目标突出的融合图像[3]。针对红外与微光融合,学者们提出了许多方法,特别是针对像素级别的图像融合,其中大致可以分为以下两大类:第一类是基于空间域的方法,第二类是基于变换域的方法。空间域方法则是直接对图像的空间像素元进行处理,其中比较有代表性的方法有:稀疏分解(SR)、脉冲式耦合人工神经网络(PCNN)、多尺本文档来自技高网...

【技术保护点】
1.一种基于

【技术特征摘要】
1.一种基于能量最小化和梯度正则化的图像融合方法,其特征在于,所述方法包括:获取来自同一场景并进行图像配准的红外图像和可见光图像;利用非下采样剪切波变换NSST算法对所述红外图像和所述可见光图像进行多尺度多方向分解得到低频子带系数和高频子带系数;采用基于-能量最小化的优化模型作为所述低频子带系数的融合规则,利用基于-梯度正则化的优化模型作为所述高频子带系数的融合规则;利用NSST逆变换重构低频子带系数与高频子带系数形成融合图像。2.根据权利要求1所述的基于能量最小化和梯度正则化的图像融合方法,其特征在于,所述获取来自同一场景并进行图像配准的红外图像和可见光图像,包括:分别获取同一场景的红外图像和可见光图像;对红外图像和可见光图像进行特征提取得到特征点,通过进行相似性度量找到匹配的特征点对,通过匹配的特征点对得到图像空间坐标变换参数,由坐标变换参数进行红外图像和可见光图像的图像配准。3.根据权利要求1所述的基于能量最小化和梯度正则化的图像融合方法,其特征在于,所述利用非下采样剪切波变换NSST算法对所述红外图像和所述可见光图像进行多尺度多方向分解得到低频子带系数和高频子带系数,包括:利用非下采样剪切波变换NSST算法对所述红外图像和所述可见光图像进行多尺度多方向分解得到低频子带系数和高频子带系数,其中l是分解层数,k是每层分解方向的数量,(i,j)代表像素元的位置,IR代表红外图像,VI代表可见光图像。4.根据权利要求3所述的基于能量最小化和梯度正则化的图像融合方法,其特征在于,所述采用基于-能量最小化的优化模型作为所述低频子带系数的融合规则,利用基于-梯度正则化的优化模型作为所述高频子带系数的融合规则,包括:基于能量最小化的优化模型,表达式如下:其中CIRl,k(i,j)代表在(i,j)处的最终低频分量融合系数,CIRl,k(i,j)与分别代表红外图像与可见光图像的低频子带系数,l是分解层数,k是每层分解方向的数量,λ代表正则参数,||||2代表-范数;通过公式(13)可以得到公式(16)的欧拉-拉格朗日方程为:源图像对融合图像贡献的下表达式:其中ω1与ω2代表权重参数,代表源图像对融合图像的贡献;将公式(2)与(3)相互结合得到公式(1)的解为:其中λ为一种函数,表示源图像灰度值的变化而变化,表征IR图像的空间信息分布,表达式如下所示:其中IR(i,j)表示红外图像中像素(i,j)的强度值,p表示像素强度,Mp表示其强度等于p的像素的数量,并且L是灰度级的数量;利用基于-梯度正则化的优化模型作为高频子带系数的融合规则,表达式如下:其中Dl,k(i,j)为融合图像在(i,j)处的高频子带系数,DIRl,k(i,j)与分别为红外图像与可见光图像的高频子带系数,l是分解层数,k是每层分解方向的数量,α为正则化参数,||||2代表-范数,||||1代表-范数;公式(6)的欧拉-拉格朗日方程为:其中div代表散度算子;引入时间变量t,由式(14)得到公式(23)对应的梯度下降流为:设置方程参数的初始化,对于边界条件采用边缘重复扩展处理:其中k为迭代次数,Δt为时间步长;将公式(9)带入到公式(10)中获得Dl,k(i,j)的平稳解:采用公式(13)对公式(26)进行迭代得到Dl,k(i,j)的最终解,表达式如下:5.根据权利要求4所述的基于能量最小化和梯度正则化的图像融合方法,其特征在于,所述利用NSST逆变换重构低频子带系数与高频子带系数形...

【专利技术属性】
技术研发人员:程博阳金龙旭李国宁
申请(专利权)人:中国科学院长春光学精密机械与物理研究所
类型:发明
国别省市:吉林,22

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1