一种图像融合方法、计算机程序产品及电子设备技术

本申请提供一种图像融合方法、计算机程序产品及电子设备，图像融合方法包括：获取多帧待融合图像；其中，多帧待融合图像对应的采集场景相同而曝光不同，多帧待融合图像包括基准帧以及至少一帧非基准帧，基准帧基于多帧待融合图像的亮度或者纹理信息确定；确定融合掩膜以及非基准帧对应的增量信息；其中，融合掩膜用于表征基准帧以及非基准帧中需要进行融合的像素点的位置，增量信息包括像素变化的纹理信息和/或颜色信息；根据融合掩膜确定基准帧对应的基准融合权重，以及，根据增量信息以及融合掩膜确定非基准帧对应的非基准融合权重；根据基准融合权重以及非基准融合权重对多帧待融合图像进行融合。待融合图像进行融合。待融合图像进行融合。

【技术实现步骤摘要】
一种图像融合方法、计算机程序产品及电子设备


[0001]本申请涉及图像处理
，具体而言，涉及一种图像融合方法、计算机程序产品及电子设备。

技术介绍

[0002]多曝光融合算法是高动态范围(High Dynamic Range，HDR)技术中的一大分类，这类算法主要是对输入的相同场景但不同曝光的几张图像进行融合，从而提高图像的效果。在图像融合的过程中，通常是首先计算各个不同曝光图像的权重，然后根据权重对这些不同曝光的图像进行融合。其中，由于多曝光融合算法的本质在于将所有输入图像中有用的信息结合在一起，得到一张信息量最多的图像，因此，权重计算的趋势也是暗的地方用亮帧，亮的地方用暗帧。
[0003]在现有技术中，多曝光融合算法一般包括权重计算以及图像融合两个部分，其中，在权重计算的过程中，权重计算可能存在不合理的地方，从而导致根据该权重进行融合得到的图像的效果较差。

技术实现思路

[0004]本申请实施例的目的在于提供一种图像融合方法、计算机程序产品及电子设备，用以解决现有技术中根据权重进行融合得到的图像的效果较差的技术问题。
[0005]第一方面，本申请实施例提供一种图像融合方法，包括：获取多帧待融合图像；其中，所述多帧待融合图像对应的采集场景相同而曝光不同，所述多帧待融合图像包括基准帧以及至少一帧非基准帧，所述基准帧基于所述多帧待融合图像的亮度或者纹理信息确定；确定融合掩膜以及所述非基准帧对应的增量信息；其中，所述融合掩膜用于表征所述基准帧以及所述非基准帧中需要进行融合的像素点的位置，所述增量信息包括像素变化的纹理信息和/或颜色信息；根据所述融合掩膜确定所述基准帧对应的基准融合权重，以及，根据所述增量信息以及所述融合掩膜确定所述非基准帧对应的非基准融合权重；根据所述基准融合权重以及所述非基准融合权重对所述多帧待融合图像进行融合。
[0006]在上述方案中，在获取到采集场景相同而曝光不同的多帧待融合图像后，可以分别确定多帧待融合图像对应的融合掩膜以及多帧待融合图像中的非基准帧对应的增量信息，从而可以基于上述融合掩膜确定基准帧对应的基准融合权重，以及根据上述融合掩膜以及上述增量信息确定非基准帧对应的非基准融合权重，并基于上述基准融合权重以及非基准融合权重实现图像融合。其中，在上述确定融合权重的过程中，由于利用了表征非基准帧相对于基准帧的信息变化程度的增量信息，因此可以充分利用非基准帧中的信息确定融合权重，使得基于融合权重进行图像融合时，可以提升融合得到的图像效果。
[0007]在可选的实施方式中，所述融合掩膜包括过曝掩膜，所述过曝掩膜为对所述基准帧进行过曝检测后得到的掩膜图像；所述确定融合掩膜，包括：将所述基准帧转换为对应的灰度图像；根据所述灰度图像中像素点的像素值与过曝阈值之间的大小关系确定所述过曝
掩膜。在上述方案中，由于过曝的像素点是指亮度较大的像素点，因此，可以通过将像素点的像素值与过曝阈值进行比较，从而筛选出非基准帧中亮度较大的像素点，得到对应的过曝掩膜。
[0008]在可选的实施方式中，所述融合掩膜包括欠曝掩膜，所述欠曝掩膜为对所述基准帧进行欠曝检测后得到的掩膜图像；所述确定融合掩膜，包括：将所述基准帧转换为对应的灰度图像；根据所述灰度图像中像素点的像素值与欠曝阈值之间的大小关系确定所述欠曝掩膜。在上述方案中，由于欠曝的像素点是指亮度较小的像素点，因此，可以通过将像素点的像素值与欠曝阈值进行比较，从而筛选出非基准帧中亮度较小的像素点，得到对应的欠曝掩膜。
[0009]在可选的实施方式中，所述增量信息包括像素变化的纹理信息；所述确定所述非基准帧对应的增量信息，包括：确定所述基准帧以及所述非基准帧分别对应的梯度响应信息；根据所述基准帧对应的梯度响应信息以及所述非基准帧对应的梯度响应信息确定所述纹理信息。在上述方案中，梯度响应信息可以用于表征图像中的梯度信息，增量信息可以包括像素变化的纹理信息，因此，根据上述基准帧对应的梯度响应信息以及非基准帧对应的梯度响应信息，可以确定非基准帧对应的纹理信息。
[0010]在可选的实施方式中，所述增量信息包括像素变化的颜色信息；所述确定所述非基准帧对应的增量信息，包括：确定所述基准帧以及所述非基准帧分别对应的饱和度响应信息；根据所述基准帧对应的饱和度响应信息以及所述非基准帧对应的饱和度响应信息确定所述颜色信息。在上述方案中，饱和度响应信息可以用于表征图像中的饱和度信息，增量信息可以包括像素变化的颜色信息，因此，根据上述基准帧对应的饱和度响应信息以及非基准帧对应的饱和度响应信息，可以确定非基准帧对应的颜色信息。
[0011]在可选的实施方式中，所述确定所述非基准帧对应的增量信息，包括：确定所述非基准帧对应的原始增量信息；对所述原始增量信息进行噪声抑制处理，得到所述增量信息。在上述方案中，由于融合权重是基于增量信息确定的，因此，通过对非基准帧对应的原始增量信息进行噪声抑制处理，可以抑制图像噪声对融合权重的影响，使得基于融合权重进行图像融合时，可以提升融合得到的图像效果。
[0012]在可选的实施方式中，所述对所述原始增量信息进行噪声抑制处理，得到所述增量信息，包括：根据所述原始增量信息与增量阈值之间的大小关系确定噪声掩膜；将所述噪声掩膜与所述原始增量信息的乘积确定为所述增量信息。在上述方案中，由于原始增量信息较小的像素点可以认为是噪声点，因此，可以根据原始增量信息与增量阈值之间的大小关系确定噪声掩膜，以根据噪声掩膜滤掉原始增量信息中噪声点对应的增量信息，从而可以抑制图像噪声对融合权重的影响，使得基于融合权重进行图像融合时，可以提升融合得到的图像效果。
[0013]第二方面，本申请实施例提供一种计算机程序产品，包括计算机程序指令，所述计算机程序指令被处理器读取并运行时，执行如第一方面所述的图像融合方法。
[0014]第三方面，本申请实施例提供一种电子设备，包括：处理器、存储器和总线；所述处理器和所述存储器通过所述总线完成相互间的通信；所述存储器存储有可被所述处理器执行的计算机程序指令，所述处理器调用所述计算机程序指令能够执行如第一方面所述的图像融合方法。
[0015]第四方面，本申请实施例提供一种计算机可读存储介质，所述计算机可读存储介质存储计算机程序指令，所述计算机程序指令被计算机运行时，使所述计算机执行如第一方面所述的图像融合方法。
[0016]为使本申请的上述目的、特征和优点能更明显易懂，下文特举本申请实施例，并配合所附附图，作详细说明如下。
附图说明
[0017]为了更清楚地说明本申请实施例的技术方案，下面将对本申请实施例中所需要使用的附图作简单地介绍，应当理解，以下附图仅示出了本申请的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他相关的附图。
[0018]图1为本申请实施例提供的一种图像融合方法的流程图；
[0019]图2为本申请实施例提供的另一种图像融合方法的示意图；本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种图像融合方法，其特征在于，包括：获取多帧待融合图像；其中，所述多帧待融合图像对应的采集场景相同而曝光不同，所述多帧待融合图像包括基准帧以及至少一帧非基准帧，所述基准帧基于所述多帧待融合图像的亮度或者纹理信息确定；确定融合掩膜以及所述非基准帧对应的增量信息；其中，所述融合掩膜用于表征所述基准帧以及所述非基准帧中需要进行融合的像素点的位置，所述增量信息包括像素变化的纹理信息和/或颜色信息；根据所述融合掩膜确定所述基准帧对应的基准融合权重，以及，根据所述增量信息以及所述融合掩膜确定所述非基准帧对应的非基准融合权重；根据所述基准融合权重以及所述非基准融合权重对所述多帧待融合图像进行融合。2.根据权利要求1所述的图像融合方法，其特征在于，所述融合掩膜包括过曝掩膜，所述过曝掩膜为对所述基准帧进行过曝检测后得到的掩膜图像；所述确定融合掩膜，包括：将所述基准帧转换为对应的灰度图像；根据所述灰度图像中像素点的像素值与过曝阈值之间的大小关系确定所述过曝掩膜。3.根据权利要求1或2所述的图像融合方法，其特征在于，所述融合掩膜包括欠曝掩膜，所述欠曝掩膜为对所述基准帧进行欠曝检测后得到的掩膜图像；所述确定融合掩膜，包括：将所述基准帧转换为对应的灰度图像；根据所述灰度图像中像素点的像素值与欠曝阈值之间的大小关系确定所述欠曝掩膜。4.根据权利要求1
‑
3任一项所述的图像融合方法，其特征在于，所述增量信息包括像素变化的纹理信息；所述确定所述非基准帧对应的增量信息，包括：确定所述基准帧以及所述非基准帧分别对应的梯度响应信息；根据所述基准帧对应的梯度响应信息以及所述非基准帧对应的梯度响应信息确定所述纹理信息。5...

【专利技术属性】
技术研发人员：袁一璟，
申请(专利权)人：北京极感科技有限公司，
类型：发明
国别省市：