图像融合方法、装置及电子设备制造方法及图纸

本公开实施例中提供了一种图像融合方法、装置及电子设备，属于图像处理技术领域，该方法包括：获取被摄体的透视图像和红外图像；对所述透视图像和所述红外图像分别执行目标特征提取以获得所述透视图像和所述红外图像中的被摄体区域；对所述透视图像中的被摄体区域和所述红外图像中的被摄体区域执行配准操作以获得所述被摄体区域的经配准的透视图像和红外图像；以及对所述被摄体区域的经配准的透视图像和红外图像执行图像融合操作以获得融合图像。通过本公开的处理方案，解决了安防领域中X射线透视图像与红外热辐射图像在不同角度、不同比例、不同维度下的信息融合问题。

Image fusion method, device and electronic equipment

【技术实现步骤摘要】
图像融合方法、装置及电子设备
本公开涉及图像处理
，尤其涉及一种图像融合方法、装置及电子设备。
技术介绍
图像融合技术较多的被用于可见光图像与红外图像的融合，以实现同一物体信息的融合，以用于物品非接触查验及安防等。X射线图像通过X射线穿过被摄体,形成被摄体的透视图像；由于被摄体的原子序数、密度及厚度不同，从而形成明暗不同的灰度图像，其可以直接反应被摄体的内部结构及材质等特征。另一方面，高于绝对零度的物体都会向外辐射电磁波，长波红外即是一种非可见范围内的电磁波。通过红外相机采集这些电磁波可以得到这些物体的红外图像，红外图像能够直接反映出物体及周围环境的温度分布情况。X射线图像和红外图像这两类图像能够在各自的领域表现出被摄体的不同属性，若想同时查看这两个维度的信息，需要观看两幅图像，且这两幅图像受限于像素分辨率，一般会以不同的大小比例显示在各自的图像上，因此需要反复比较对照两幅图像来查看某特定位置的信息。
技术实现思路
有鉴于此，本公开实施例提供一种图像融合方法、装置及电子设备，以至少部分解决现有技术中存在的问题。第一方面，本公开实施例提供了一种图像融合方法，包括：获取被摄体的透视图像和红外图像，其中所述透视图像为通过使用放射线照射所述被摄体并捕获穿过所述被摄体的放射线而获得的图像；对所述透视图像和所述红外图像分别执行目标特征提取以获得所述透视图像和所述红外图像中的被摄体区域；对所述透视图像中的被摄体区域和所述红外图像中的被摄体区域执行配准操作以获得所述被摄体区域的经配准的透视图像和红外图像；以及对所述被摄体区域的经配准的透视图像和红外图像执行图像融合操作以获得融合图像。根据本公开实施例的一种具体实现方式，所述放射线为X射线，并且所述透视图像为X射线透视图像。根据本公开实施例的一种具体实现方式，所述对所述透视图像和所述红外图像分别执行目标特征提取以获得所述透视图像和所述红外图像中的被摄体区域，包括：对所述透视图像和所述红外图像执行预处理，其中所述预处理包括降低噪声处理和边缘增强处理中的至少一种；以及对经所述预处理的透视图像和红外图像执行目标特征提取以获得所述透视图像和所述红外图像中的被摄体区域。根据本公开实施例的一种具体实现方式，所述对所述透视图像和所述红外图像分别执行目标特征提取以获得所述透视图像和所述红外图像中的被摄体区域，包括：对所述透视图像和所述红外图像执行边缘检测以获得所述透视图像和所述红外图像中的物体的边缘轮廓；以及从所述透视图像和所述红外图像中的物体的边缘轮廓筛选出所述被摄体的轮廓以获得所述被摄体区域。根据本公开实施例的一种具体实现方式，所述对所述透视图像和所述红外图像执行预处理，包括：对所述透视图像和所述红外图像应用自适应中值滤波以得到滤波后的图像；以及对所述滤波后的图像采用一阶微分算法以得到增强图像。根据本公开实施例的一种具体实现方式，所述对所述透视图像中的被摄体区域和所述红外图像中的被摄体区域执行配准操作以获得所述被摄体区域的经配准的透视图像和红外图像，包括：对所述透视图像中的被摄体区域和所述红外图像中的被摄体区域的二维像素矩阵应用矩阵变换以得到二维空间上的对齐图像；将经矩阵变换的图像从空间域转换到频率域，对图像的高频部分执行滤波处理并将滤波后的图像转换到空间域；以及利用Harris角点检测得到被摄体的外围轮廓，并选取预定角点来进行坐标系对齐以获得所述被摄体区域的经配准的透视图像和红外图像。根据本公开实施例的一种具体实现方式，所述对所述透视图像中的被摄体区域和所述红外图像中的被摄体区域的二维像素矩阵应用矩阵变换以得到二维空间上的对齐图像，包括：选取所述透视图像中的被摄体区域和所述红外图像中的被摄体区域中的较大尺寸的图像作为基准图像；以及利用图像缩放方法将较小尺寸的图像拉伸到与所述较大尺寸的图像的尺寸相同的尺寸。根据本公开实施例的一种具体实现方式，所述对所述被摄体区域的经配准的透视图像和红外图像执行图像融合操作以获得融合图像，包括：对所述被摄体区域的经配准的红外图像执行伪彩色的映射以获得红外辐射的彩色图像；以及基于小波变换对所述被摄体区域的经配准的透视图像和所述红外辐射的彩色图像进行图像融合。第二方面，本公开实施例提供了一种图像融合装置，包括：图像获取模块，获取被摄体的透视图像和红外图像，其中所述透视图像为通过捕获穿过所述被摄体的放射线而获得的图像；目标特征提取模块，对所述透视图像和所述红外图像分别执行目标特征提取以获得所述透视图像和所述红外图像中的被摄体区域；配准模块，对所述透视图像中的被摄体区域和所述红外图像中的被摄体区域执行配准操作以获得所述被摄体区域的经配准的透视图像和红外图像；以及融合模块，对所述被摄体区域的经配准的透视图像和红外图像执行图像融合操作以获得融合图像。第三方面，本公开实施例还提供了一种电子设备，该电子设备包括：至少一个处理器；以及，与该至少一个处理器通信连接的存储器；其中，该存储器存储有可被该至少一个处理器执行的指令，该指令被该至少一个处理器执行，以使该至少一个处理器能够执行前述第一方面或第一方面的任一实现方式中的图像融合方法。第四方面，本公开实施例还提供了一种非暂态计算机可读存储介质，该非暂态计算机可读存储介质存储计算机指令，该计算机指令用于使该计算机执行前述第一方面或第一方面的任一实现方式中的图像融合方法。第五方面，本公开实施例还提供了一种计算机程序产品，该计算机程序产品包括存储在非暂态计算机可读存储介质上的计算程序，该计算机程序包括程序指令，当该程序指令被计算机执行时，使该计算机执行前述第一方面或第一方面的任一实现方式中的图像融合方法。本公开实施例中的图像融合方案，包括：获取被摄体的透视图像和红外图像，其中所述透视图像为通过使用放射线照射所述被摄体并捕获穿过所述被摄体的放射线而获得的图像；对所述透视图像和所述红外图像分别执行目标特征提取以获得所述透视图像和所述红外图像中的被摄体区域；对所述透视图像中的被摄体区域和所述红外图像中的被摄体区域执行配准操作以获得所述被摄体区域的经配准的透视图像和红外图像；以及对所述被摄体区域的经配准的透视图像和红外图像执行图像融合操作以获得融合图像。通过本公开的处理方案，解决了安防领域中X射线透视图像与红外热辐射图像在不同角度、不同比例、不同维度下的信息融合问题。附图说明为了更清楚地说明本公开实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本公开的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其它的附图。图1为本公开实施例提供的一种图像融合方法的流程示意图；图2(a)为本公开实施例提供的车辆的X射线透视图的示意图，本文档来自技高网...

【技术保护点】
1.一种图像融合方法，其特征在于，包括：/n获取被摄体的透视图像和红外图像，其中所述透视图像为通过使用放射线照射所述被摄体并捕获穿过所述被摄体的放射线而获得的图像；/n对所述透视图像和所述红外图像分别执行目标特征提取以获得所述透视图像和所述红外图像中的被摄体区域；/n对所述透视图像中的被摄体区域和所述红外图像中的被摄体区域执行配准操作以获得所述被摄体区域的经配准的透视图像和红外图像；以及/n对所述被摄体区域的经配准的透视图像和红外图像执行图像融合操作以获得融合图像。/n

【技术特征摘要】
1.一种图像融合方法，其特征在于，包括：
获取被摄体的透视图像和红外图像，其中所述透视图像为通过使用放射线照射所述被摄体并捕获穿过所述被摄体的放射线而获得的图像；
对所述透视图像和所述红外图像分别执行目标特征提取以获得所述透视图像和所述红外图像中的被摄体区域；
对所述透视图像中的被摄体区域和所述红外图像中的被摄体区域执行配准操作以获得所述被摄体区域的经配准的透视图像和红外图像；以及
对所述被摄体区域的经配准的透视图像和红外图像执行图像融合操作以获得融合图像。


2.根据权利要求1所述的图像融合方法，其特征在于，所述放射线为X射线，并且所述透视图像为X射线透视图像。


3.根据权利要求1所述的图像融合方法，其特征在于，所述对所述透视图像和所述红外图像分别执行目标特征提取以获得所述透视图像和所述红外图像中的被摄体区域，包括：
对所述透视图像和所述红外图像执行预处理，其中所述预处理包括降低噪声处理和边缘增强处理中的至少一种；以及
对经所述预处理的透视图像和红外图像执行目标特征提取以获得所述透视图像和所述红外图像中的被摄体区域。


4.根据权利要求1所述的图像融合方法，其特征在于，所述对所述透视图像和所述红外图像分别执行目标特征提取以获得所述透视图像和所述红外图像中的被摄体区域，包括：
对所述透视图像和所述红外图像执行边缘检测以获得所述透视图像和所述红外图像中的物体的边缘轮廓；以及
从所述透视图像和所述红外图像中的物体的边缘轮廓筛选出所述被摄体的轮廓以获得所述被摄体区域。


5.根据权利要求3所述的图像融合方法，其特征在于，所述对所述透视图像和所述红外图像执行预处理，包括：
对所述透视图像和所述红外图像应用自适应中值滤波以得到滤波后的图像；以及
对所述滤波后的图像采用一阶微分算法以得到增强图像。


6.根据权利要求1所述的图像融合方法，其特征在于，所述对所述透视图像中的被摄体区域和所述红外图像中的被摄体区域执行配准操作以获得所述被摄...

【专利技术属性】
技术研发人员：曲海波，赵杰，范立军，
申请(专利权)人：北京华力兴科技发展有限责任公司，
类型：发明
国别省市：北京;11