基于差值信息双波段红外图像伪彩色融合方法技术

本发明专利技术公开了一种基于差值信息双波段红外图像伪彩色融合方法，属于图像处理技术领域。本发明专利技术基于FPGA实现，通过计算图像的差值信息来计算各波段图像特有的部分，通过一定的规则映射到色彩空间。本发明专利技术首先对输入图像进行预处理，包括图像去噪，图像锐化等图像处理操作，之后将图像配准,提高系统的精度；再通过计算中波图像和长波图像对应点的差值，得到中波图像特有区域,长波图像特有区域以及过渡区域，由差异信息计算出每个像元的Cb值和Cr值。最后将灰度图像Cb值和Cr值一一对应并转换成RGB图像，最后输出伪彩色融合图像。本发明专利技术融合效果显著,并且可以适用于多种复杂环境。效果显著,并且可以适用于多种复杂环境。效果显著,并且可以适用于多种复杂环境。

【技术实现步骤摘要】
基于差值信息双波段红外图像伪彩色融合方法


[0001]本专利技术属于图像处理技术，具体为一种基于差值信息双波段红外图像伪彩色融合方法。

技术介绍

[0002]红外成像技术是现如今夜视技术研究的热点，相比可见光，红外成像探测技术有着明显优势。首先，红外热成像技术是一种被动式的非接触的检测识别技术，隐蔽性好，可以轻松实现隐蔽探测。其次，红外辐射是自然界中最广泛的辐射，可以在雨雪、烟云等恶劣天气探测，实现全天侯监控。同时，红外探测技术还能对伪装及隐秘目标探测。
[0003]随着夜视技术的发展，单一波段传感器已经无法适用于所有场合。在复杂场景与恶劣天气下，使用单一波段探测器进行图像采集，所获得的图像信息是不完整的，长波红外图像能够保留景物的细节，中波段的红外图像能够突出目标，增大对比度。因此，使用多波段探测器对目标进行采集融合，将所获得的图像信息优势互补，这样就可以得到更全面的图像信息。
[0004]伪彩色图像处理是把一幅单色图像转变为彩色图像的技术。伪彩色处理主要是把黑白的灰度图像或者多波段图像转换为彩色图像的技术过程。主要目的是为了提高人眼对图像细节的分辨能力，使图像的某些细节更容易清晰地辨认以及获得隐藏在灰度图像中不能直接通过肉眼观察到的信息。
[0005]图像融合按照处理层次的不同，可以划分为像素级、特征级和决策级三种融合方式。像素级融合保留了场景的原始信息，准确性高但是处理的信息量较大；特征级融合保留了重要图像特征但有一定的信息压缩，有利于实时处理；决策级融合在源图像和特征提取的基础上进行联合判决，该方法的容错能力高，实时性好，但是信息量的损失较大。

技术实现思路

[0006]本专利技术提出了一种基于FPGA的双波段图像伪彩色融合的方法，通过将FPGA平台上采集的双波段红外图像利用像素级图像融合并与彩色域算法结合的方法，实现了双波段红外图像的伪彩色融合。
[0007]实现本专利技术目的的技术方案为：一种基于差值信息的双波段红外图像伪彩色融合方法，包括以下步骤：
[0008]步骤1：获取中长波红外图像数据；
[0009]步骤2：对中长波红外图像数据进行预处理；
[0010]步骤3：提取预处理后的双波段红外图像的边界，以边界点为特征点进行配准；
[0011]步骤4：计算配准后的长波红外图像和中波红外图像对应点的差值，得到中波特有区域，长波特有区域和过渡区域；
[0012]步骤5：通过特有区域在YcbCr颜色空间进行差异赋色，给Cb,Cr通道赋值；
[0013]步骤6：计算中波图像和长波图像的边缘强度，根据边缘强度所占比例设置参考图
像的权值系数，将加权后中长波图像之和送入Y通道；
[0014]步骤7：将得到的新的YcbCr空间图像转换至RGB空间，完成图像融合。
[0015]优选地，对红外图像的预处理包括：图像去噪、图像锐化、图像亮度对比度迭代归一化。
[0016]优选地，提取双波段红外图像的边界，以边界点为特征点进行配准的具体方法为：
[0017]提取的红外图像的目标边界点坐标集为(x,y),配准后坐标集为(x
′
,y
′
)，按照仿射变换的性质建立仿射变换的模型，得到配准后的坐标；
[0018]通过仿射变换模型，参考长波红外图像对中波红外图像进行平移、旋转、缩放变换达到同一场景多源图像配准。
[0019]优选地，仿射变换模型公式具体为：
[0020][0021]其中，θ是像素点以左上角为中心点顺时针旋转的角度，β
x
是水平方向位移量，β
y
是垂直方向位移量。
[0022]优选地，步骤4对配准后的长波红外图像和中波红外图像进行对应点差值的计算，得到中波特有区域，长波特有区域和过渡区域，具体方法为：
[0023]对长波红外图像和中波红外图像进行两者的差值计算，得到差异信息，其中，正差值为dif
P
(i,j),负差值为dif
N
(i,j),若无差异，则dif
P
(i,j)＝dif
N
(i,j)＝0；
[0024]令k＝dif
P
max(i，j)
‑
dif
N
max(i，j)；
[0025]其中，dif
P
max(i，j)是红外长波图像与红外中波图像差值最大的像素点，dif
N
max(i，j)是红外中波图像与红外长波图像差值最大的像素点；
[0026]根据k值判断不同的区域，具体判断方法如下：
[0027]当k＜0时
[0028]当k＞0时
[0029]优选地，通过特有区域在YcbCr颜色空间进行差异赋色，给Cb，Cr通道赋值的具体方法为：
[0030]当k＜0时，
[0031][0032]当k＞0时，
[0033][0034]其中，sp为颜色因子，可根据需要调整数值(sp＞0)。
[0035]优选地，中波图像和长波图像的边缘强度G的计算公式如下：
[0036][0037]其中，表示图像在第i行第j列的x，y方向上的一阶偏导，M、N为图像的行列数，则：
[0038][0039]其中，f(x，y)表示图像在点(x，y)位置像素的灰度值。
[0040]优选地，加权后的中长波图像为：
[0041]C＝ω
LW
×
F+ω
MW
×
G
[0042][0043]其中，F表示长波红外图像的灰度值，G表示中波红外图像的灰度值，C表示加权后的中长波图像，G
LW
表示长波红外图像的边缘强度，G
MW
表示中波红外图像的边缘强度。
[0044]本专利技术与现有技术相比，其显著优点为：
[0045](1)本专利技术将灰度融合与彩色域算法结合起来，划分差值区域，能够突出表现出不同波段的成像差异，更有利于人眼观察；
[0046](2)本专利技术可操作性强，可以根据环境需要改变颜色因子以得到适合多种复杂环境需要的红外伪彩色融合图像。
[0047](3)本专利技术提出了一种改进的YcbCr转换RGB的算法减少了运算量，更适用于FPGA硬件系统。
[0048]下面结合附图对本专利技术做进一步详细的描述。
附图说明
[0049]图1为本专利技术实施例的长波红外探测器采集到的长波红外图像。
[0050]图2为本专利技术实施例的中波红外探测器采集到的中波红外图像。
[0051]图3为本专利技术实施例中波红外和长波红外融合后的图像。
[0052]图4为本专利技术实施例中波红外和长波红外融合后的图像。
[0053]图5为本专利技术实施例中波红外和长波红外融合后的图像。
[0054]图6为本专利技术实施例中波红外和长波红外融合后的图像。
[0055]本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于差值信息的双波段红外图像伪彩色融合方法，其特征在于，包括以下步骤：步骤1：获取中长波红外图像数据；步骤2：对中长波红外图像数据进行预处理；步骤3：提取预处理后的双波段红外图像的边界，以边界点为特征点进行配准；步骤4：计算配准后的长波红外图像和中波红外图像对应点的差值，得到中波特有区域，长波特有区域和过渡区域；步骤5：通过特有区域在YcbCr颜色空间进行差异赋色，给Cb,Cr通道赋值；步骤6：计算中波图像和长波图像的边缘强度，根据边缘强度所占比例设置参考图像的权值系数，将加权后中长波图像之和送入Y通道；步骤7：将得到的新的YcbCr空间图像转换至RGB空间，完成图像融合。2.根据权利要求1所述的基于差值信息的双波段红外图像伪彩色融合方法，其特征在于，对红外图像的预处理包括：图像去噪、图像锐化、图像亮度对比度迭代归一化。3.根据权利要求1所述的基于差值信息的双波段红外图像伪彩色融合方法，其特征在于，提取双波段红外图像的边界，以边界点为特征点进行配准的具体方法为：提取的红外图像的目标边界点坐标集为(x,y),配准后坐标集为(x
′
,y
′
)，按照仿射变换的性质建立仿射变换的模型，得到配准后的坐标；通过仿射变换模型，参考长波红外图像对中波红外图像进行平移、旋转、缩放变换达到同一场景多源图像配准。4.根据权利要求3所述的基于差值信息的双波段红外图像伪彩色融合方法，其特征在于，仿射变换模型公式具体为：其中，θ是像素点以左上角为中心点顺时针旋转的角度，β
x
是水平方向位移量，β
y
是垂直方向位移量。5.根据权利要求1所述的基于差值信息的双波段红外图像伪彩色融合方法，其特征在于，步骤4对配准后的长波红外图像和中波红外图像进行对应点差值的计算，得到中波特有区域，长波特有区域和过渡区域，具体方法为：对长波红外图像和中波红外图像进行两者的差值计算，得...

【专利技术属性】
技术研发人员：高巍，张俊举，胡逸飞，胡宥成，白宗宝，
申请(专利权)人：南京理工大学，
类型：发明
国别省市：