图像融合的系统和方法技术方案

本申请公开了一种图像融合的方法，包括获取包括至少两个第一像素的第一图像和包括至少两个第二像素的第二图像。至少两个第二像素中的每一个可以对应于至少两个第一像素中的一个。该方法还包括将至少两个第一像素分为至少包括第一类别和第二类别的不同类别。该方法还包括基于至少两个第一像素中的每一个和与其对应的第二像素之间的融合操作融合第一图像与第二图像，以产生融合图像。与属于第一类别的第一像素相关的融合操作和与属于第二类别的第一像素相关的融合操作根据不同的融合规则进行。

【技术实现步骤摘要】
【国外来华专利技术】图像融合的系统和方法
本申请一般涉及用于图像融合的方法、系统和介质。更具体地，本申请涉及用于融合可见光图像和红外光图像的方法、系统和介质。
技术介绍
可见光图像在安防监控系统中有着广泛的应用。通常，通过捕获包括在场景中的物体的反射的可见光来产生可见光图像。物体反射的可见光可以指示对象的相关信息。然而，在低亮度条件下，可见光图像中可能包括大量噪声，从而降低可见光图像的质量。为了解决这个问题，可以使用基于红外光反射捕获的红外光图像，而非可见光图像。红红外光图像在低亮度条件下可以包括比可见光图像更少的噪声。然而，红外光图像的质量可能受到场景中物体的材质和/或颜色的影响。因此，期望融合可见光图像和红外光图像以在低亮度条件下提供高质量图像。
技术实现思路
本申请的一部分附加特性可以在以下描述中进行说明。通过对以下描述和相应附图的研究或者对实施例的生产或操作的了解，本申请的一部分附加特性对于本领域技术人员是明显的。本申请的特征可以通过对以下描述的具体实施例的各个方面的方法、手段和组合的实践或使用得以实现和达到。根据本申请的第一方面，提供了一种用于图像融合的系统。该系统可以包括至少一个存储一组指令的存储介质和与至少一个存储介质通信的至少一个处理器。当执行该组指令时，至少一个处理器可以用于使系统获取包括至少两个第一像素的第一图像。第一图像可以由第一成像通道生成。至少一个处理器可以进一步用于获取包括至少两个第二像素的第二图像。第二图像可以由与第一成像通道不同的第二成像通道生成。至少两个第二像素中的每一个可以对应于至少两个第一像素的一个。至少一个处理器可以进一步用于使系统将至少两个第一像素分类为至少包括第一类别和第二类别的不同类别。至少一个处理器可以进一步用于使系统利用第二图像基于至少两个第一像素中的每一个和与其对应的第二像素之间的融合操作融合第一图像以产生融合图像，其中与属于第一类别的第一像素相关的融合操作和与属于第二类别的第一像素相关的融合操作根据不同的融合规则执行。在一些实施例中，第一成像通道可以用于捕获可见光图像，并且第二成像通道可以用于捕获红外光图像。在一些实施例中，第一类别可以至少包括白色点或近似于白色点的点。在一些实施例中，第二类别可以至少包括非白色点。在一些实施例中，为了执行与属于第一类别的第一像素相关的融合操作，至少一个处理器可以用于使系统确定属于第一类别的第一像素的色度分量。至少一个处理器还可以用于使系统指定所述属于第一类别的第一像素的色度分量作为融合图像中的第三像素的色度分量。在一些实施例中，至少一个处理器可以进一步用于使系统基于属于第一类别的第一像素和属于第二类别的第一像素生成第一二进制图像。至少一个处理器可以进一步用于使系统对第一图像和第一二值图像执行卷积操作，使得属于第一类别的第一像素的色度分量保持不变。在一些实施例中，为了执行与属于第二类别的第一像素相关的融合操作，至少一个处理器可以用于使系统确定属于第二类别的第一像素的色度分量。至少一个处理器可以进一步用于使系统确定色度增强系数。至少一个处理器可以进一步用于使系统基于属于第二类别的第一像素的色素分量和色度增强系数确定融合图像中的第四像素的色度分量。在一些实施例中，色度增强系数可以基于属于第二类别的第一像素的亮度分量和对应于属于第二类别的第一像素的第二像素的亮度分量确定。在一些实施例中，至少一个处理器可以用于使系统基于属于第一类别的第一像素和属于第二类别的第一像素来生成第二二进制图像。至少一个处理器可以用于使系统对第一图像和第二二进制图像执行卷积操作，使得属于第二类别的第一像素的色度分量保持不变。在一些实施例中，为了执行与属于第一类别的第一像素相关的融合操作，至少一个处理器可以用于使系统确定属于第一类别的第一像素的亮度和对应于属于第一类别的第一像素的第二像素的亮度。至少一个处理器可以进一步用于使系统基于属于第一类别的第一像素的亮度和对应于属于第一类别的第一像素的第二像素的亮度来确定融合图像中的第五像素的亮度分量。根据本申请的第二方面，提供了一种用于图像融合的方法。该方法可以包括获取包括至少两个第一像素的第一图像。第一图像可以由第一成像通道生成。该方法还可以包括获取包括至少两个第二像素的第二图像。可以由与第一成像通道不同的第二成像通道生成第二图像。至少两个第二像素中的每一个可以对应于至少两个第一像素中的一个。该方法还可以包括将至少两个第一像素分类为至少包括第一类别和第二类别的不同类别。该方法仍然可以包括利用第二图像基于至少两个第一像素中的每一个和与其对应的第二像素之间的融合操作融合第一图像以产生融合图像，其中与属于第一类别的第一像素相关的融合操作和与属于第二类别的第一像素相关的融合操作根据不同的融合规则执行。根据本申请的第三方面，提供了一种用于图像采集的系统。该系统可以包括存储一组指令的至少一个存储介质和配置为与至少一个存储介质通信的至少一个处理器。当执行该组指令时，至少一个处理器可以用于使系统获取包括至少两个第一像素的第一图像。第一图像可以由第一成像通道生成。至少一个处理器可以进一步用于使系统获取包括至少两个第二像素的第二图像。第二图像可以由与第一成像通道不同的第二成像通道生成。至少两个第二像素中的每一个可以对应于至少两个第一像素中的一个。至少一个处理器可以进一步用于使系统将至少两个第一像素分类为至少包括第一类别和第二类别的不同类别。至少一个处理器可以进一步用于使系统利用第二图像基于至少两个第一像素中的每一个和与其对应的第二像素之间的融合操作融合第一图像以产生融合图像，其中与属于第一类别的第一像素相关的融合操作和与属于第二类别的第一像素相关的融合操作根据不同的融合规则执行。附图说明本申请将通过示例性实施例进行进一步描述。这些示例性实施例将通过附图进行详细描述。这些实施例是非限制性的示例性实施例，在这些实施例中，各图中相同的编号表示相似的结构，其中：图1是根据本申请的一些实施例所示的示例性图像融合系统的示意图；图2是根据本申请的一些实施例所示的计算设备的示例性硬件组件和软件组件的示意图；图3是根据本申请的一些实施例所示的移动设备的示例性硬件组件和软件组件的示意图；图4是根据本申请的一些实施例所示的示例性处理设备的示意图；图5是根据本申请的一些实施例所示的用于产生融合图像的示例性过程的流程图；图6是根据本申请的一些实施例所示的用于产生融合图像的示例性过程的流程图；图7是根据本申请的一些实施例所示的用于确定融合像的Y分量的示例性过程的流程图；图8是根据本申请的一些实施例所示的用于确定对与白色点对应的融合图像的UV分量的示例性过程的流程图；以及图9是根据本申请的一些实施例所示的用于确定与非白色点对应的融合图像的UV分量的示例性过程的流程图。具体实施方式为了更清楚地说明本申请实施例的技术方案，下面将对实施例描述中所需要使用的附图作简单的介绍。然而，本领域技术人员应该明本文档来自技高网...

【技术保护点】
1.一种系统，包括：/n至少一个存储介质，包括一组指令集；以及/n与至少一个存储介质通信的至少一个处理器，其中在执行所述指令集时，所述至少一个处理器用于使所述系统：/n获取包括至少两个第一像素的第一图像，所述第一图像由第一成像通道产生；/n获取包括至少两个第二像素的第二图像，所述第二图像由不同于所述第一成像通道的第二成像通道生成，所述至少两个第二像素中的每一个对应于所述至少两个第一像素中的一个；/n将至少两个第一像素分为不同类别，所述不同类别至少包括第一类别和第二类别；以及/n基于至少两个第一像素和其对应的第二像素的融合操作使第一图像与第二图像融合以产生融合图像，其中与属于第一类别的第一像素相关的融合操作和与属于第二类别的第一像素相关的融合操作是根据不同的融合规则进行。/n

【技术特征摘要】
【国外来华专利技术】1.一种系统，包括：
至少一个存储介质，包括一组指令集；以及
与至少一个存储介质通信的至少一个处理器，其中在执行所述指令集时，所述至少一个处理器用于使所述系统：
获取包括至少两个第一像素的第一图像，所述第一图像由第一成像通道产生；
获取包括至少两个第二像素的第二图像，所述第二图像由不同于所述第一成像通道的第二成像通道生成，所述至少两个第二像素中的每一个对应于所述至少两个第一像素中的一个；
将至少两个第一像素分为不同类别，所述不同类别至少包括第一类别和第二类别；以及
基于至少两个第一像素和其对应的第二像素的融合操作使第一图像与第二图像融合以产生融合图像，其中与属于第一类别的第一像素相关的融合操作和与属于第二类别的第一像素相关的融合操作是根据不同的融合规则进行。


2.如权利要求1所述的系统，其中所述第一成像通道用于捕获可见光图像，并且所述第二成像通道用于捕获红外光图像。


3.如权利要求1所述的系统，其中所述第一类别至少包括白色点或近似于白色点的点。


4.如权利要求3所述的系统，其中所述第二类别至少包括非白色点。


5.如权利要求4所述的系统，其中，为了执行所述与属于第一类别的第一像素相关的融合操作，所述至少一个处理器用于使所述系统：
确定所述属于第一类别的第一像素的色度分量；以及
指定所述属于第一类别的第一像素的色度分量作为融合图像中的第三像素的色度分量。


6.如权利要求5所述的系统，其中，所述至少一个处理器用于使所述系统：
基于所述属于第一类别的第一像素和所述属于第二类别的第一像素生成第一二进制图像；以及
对所述第一图像和所述第一二进制图像执行卷积操作，使所述属于第一类别的第一像素的色度分量保持不变。


7.如权利要求4所述的系统，其中，为了执行所述与属于第二类别的第一像素相关的融合操作，所述至少一个处理器用于使所述系统：
确定所述属于第二类别的第一像素的色度分量；
确定色度增强系数；以及
基于所述属于第二类别的第一像素的色度分量和所述色度增强系数确定融合图像中的第四像素的色度分量。


8.如权利要求7所述的系统，其中所述色度增强系数基于所述属于第二类别的第一像素的亮度分量和对应于所述属于第二类别的第一像素的第二像素的亮度分量确定。


9.如权利要求7所述的系统，其中，所述至少一个处理器用于使所述系统：
基于所述属于第一类别的第一像素和所述属于第二类别的第一像素生成第二二进制图像；以及
对所述第一图像和所述第二二进制图像执行卷积操作，使所述属于第二类别的第一像素的色度分量保持不变。


10.如权利要求4所述的系统，其中，为了执行与属于所述第一类别的第一像素相关的融合操作，所述至少一个处理器用于使所述系统：
确定所述属于第一类别的第一像素的亮度和对应于所述属于第一类别的第一像素的第二像素的亮度；以及
基于所述属于第一类别的第一像素的亮度和对应于所述属于第一类别的第一像素的第二像素的亮度，确定融合图像中的第五像素的亮度分量。


11.一种用于图像融合的方法，所述方法在包括至少一个处理器和至少一个存储介质的计算设备上实现，包括：
获取包括至少两个第一像素的第一图像，所述第一图像由第一成像通道产生；
获取包括至少两个第二像素的第二图像，所述第二图像由不...

【专利技术属性】
技术研发人员：瞿二平，
申请(专利权)人：浙江大华技术股份有限公司，
类型：发明
国别省市：浙江;33