图像处理方法及装置、电子设备及计算机可读存储介质制造方法及图纸

本申请公开一种图像处理方法、图像处理装置、电子设备及非易失性计算机可读存储介质。图像处理方法包括获取第一图像和第二图像，并计算第一图像中的第一像素和第二图像中与第一像素匹配的第二像素的第一相似度；根据第一相似度确定第一像素的第一权值和第二像素的第二权值；获取第一图像中包含目标对象的第一目标区域及第二图像中包含目标对象的第二目标区域；根据第一目标区域的每个第一像素的预设范围内的第一像素的第一权值，得到第三权值、并根据第二目标区域的每个第二像素的预设范围内的第二像素的第二权值以得到第四权值；及根据第一权值、第二权值、第三权值和第四权值，融合第一图像和第二图像，以生成目标图像。以生成目标图像。以生成目标图像。

【技术实现步骤摘要】
图像处理方法及装置、电子设备及计算机可读存储介质


[0001]本申请涉及图像融合
，更具体而言，涉及一种图像处理方法、图像处理装置、电子设备及非易失性计算机可读存储介质。

技术介绍

[0002]在现有的高动态(Wide Dynamic Range，WDR)方案中，多帧合成对提高图像的动态范围至关重要。现有的主要方案是通过计算像素点之间的亮度绝对差之和(Sum of Absolute Differences，SAD)来进行像素块的匹配。在实际使用中我们发现，基于SAD的这种匹配方式特别受图像噪声以及亮度变化的影响，在亮度不高、噪声较大的图像匹配的精度较差。

技术实现思路

[0003]本申请实施方式提供一种图像处理方法、图像处理装置、电子设备及非易失性计算机可读存储介质。
[0004]本申请实施方式的图像处理方法包括获取曝光时长不同的第一图像和第二图像，并计算所述第一图像中的第一像素和所述第二图像中与所述第一像素匹配的第二像素的第一相似度；根据所述第一相似度确定所述第一像素的第一权值和所述第二像素的第二权值；获取所述第一图像中包含目标对象的第一目标区域及所述第二图像中包含所述目标对象的第二目标区域；根据所述第一目标区域的每个所述第一像素的预设范围内的所述第一像素的所述第一权值，更新所述第一目标区域的每个所述第一像素的所述第一权值，以得到第三权值、并根据所述第二目标区域的每个所述第二像素的预设范围内的所述第二像素的所述第二权值，更新所述第二目标区域的每个所述第二像素的所述第二权值，以得到第四权值；及根据所述第一权值、所述第二权值、所述第三权值和所述第四权值，融合所述第一图像和所述第二图像，以生成目标图像。
[0005]本申请实施方式的图像处理装置包括第一获取模块、第一确定模块、第二获取模块、更新模块和融合模块。所述第一获取模块用于获取曝光时长不同的第一图像和第二图像，并计算所述第一图像中的第一像素和所述第二图像中与所述第一像素匹配的第二像素的第一相似度。所述第一确定模块用于根据所述第一相似度确定所述第一像素的第一权值和所述第二像素的第二权值。所述第二获取模块用于获取所述第一图像中包含目标对象的第一目标区域及所述第二图像中包含所述目标对象的第二目标区域。所述更新模块用于根据所述第一目标区域的每个所述第一像素的预设范围内的所述第一像素的所述第一权值，更新所述第一目标区域的每个所述第一像素的所述第一权值，以得到第三权值、并根据所述第二目标区域的每个所述第二像素的预设范围内的所述第二像素的所述第二权值，更新所述第二目标区域的每个所述第二像素的所述第二权值，以得到第四权值。所述融合模块用于根据所述第一权值、所述第二权值、所述第三权值和所述第四权值，融合所述第一图像和所述第二图像，以生成目标图像。
[0006]本申请实施方式的电子设备包括处理器。所述处理器用于获取曝光时长不同的第一图像和第二图像，并计算所述第一图像中的第一像素和所述第二图像中与所述第一像素匹配的第二像素的第一相似度；根据所述第一相似度确定所述第一像素的第一权值和所述第二像素的第二权值；获取所述第一图像中包含目标对象的第一目标区域及所述第二图像中包含所述目标对象的第二目标区域；根据所述第一目标区域的每个所述第一像素的预设范围内的所述第一像素的所述第一权值，更新所述第一目标区域的每个所述第一像素的所述第一权值，以得到第三权值、并根据所述第二目标区域的每个所述第二像素的预设范围内的所述第二像素的所述第二权值，更新所述第二目标区域的每个所述第二像素的所述第二权值，以得到第四权值；及根据所述第一权值、所述第二权值、所述第三权值和所述第四权值，融合所述第一图像和所述第二图像，以生成目标图像。
[0007]本申请实施方式的非易失性计算机可读存储介质包含计算机程序，当所述计算机程序被一个或多个处理器执行时，使得所述处理器执行如下图像处理方法：获取曝光时长不同的第一图像和第二图像，并计算所述第一图像中的第一像素和所述第二图像与所述第一像素中匹配的第二像素的第一相似度；根据所述第一相似度确定所述第一像素的第一权值和所述第二像素的第二权值；获取所述第一图像中包含目标对象的第一目标区域及所述第二图像中包含所述目标对象的第二目标区域；根据所述第一目标区域的每个所述第一像素的预设范围内的所述第一像素的所述第一权值，更新所述第一目标区域的每个所述第一像素的所述第一权值，以得到第三权值、并根据所述第二目标区域的每个所述第二像素的预设范围内的所述第二像素的所述第二权值，更新所述第二目标区域的每个所述第二像素的所述第二权值，以得到第四权值；及根据所述第一权值、所述第二权值、所述第三权值和所述第四权值，融合所述第一图像和所述第二图像，以生成目标图像。
[0008]本申请实施方式的图像处理方法、图像处理装置、电子设备及非易失性计算机可读存储介质中，由于在融合第一图像和第二图像的过程中，会获取包含目标对象的第一目标区域和包含目标对象的第二目标区域，且还会针对第一目标区域中的第一像素的第一权值进行更新，并针对第二目标区域中的第二像素的第二权值进行更新，及更新第一权值是考虑周围的第一像素的第一权值，更新第二权值是考虑周围的第二像素的第二权值，从而保证在最终融合第一图像和第二图像时，位于第一目标区域和第二目标区域的部分在融合后，其第一像素和第二像素的权重过渡比较平滑，以避免出现明显的信噪比下降问题，从而保证目标图像的质量。
[0009]本申请的实施方式的附加方面和优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本申请的实施方式的实践了解到。
附图说明
[0010]本申请的上述和/或附加的方面和优点从结合下面附图对实施方式的描述中将变得明显和容易理解，其中：
[0011]图1是本申请某些实施方式的图像处理方法的流程示意图；
[0012]图2是本申请某些实施方式的图像处理装置的示意图
[0013]图3是本申请某些实施方式的电子设备的平面示意图；
[0014]图4是本申请某些实施方式的图像处理方法的场景示意图；
[0015]图5是本申请某些实施方式的图像处理方法的场景示意图；
[0016]图6是本申请某些实施方式的图像处理方法的流程示意图；
[0017]图7是本申请某些实施方式的图像处理方法的场景示意图；
[0018]图8是本申请某些实施方式的图像处理方法的流程示意图；
[0019]图9是本申请某些实施方式的图像处理方法的流程示意图；
[0020]图10是本申请某些实施方式的图像处理方法的场景示意图；
[0021]图11是本申请某些实施方式的图像处理方法的流程示意图；
[0022]图12是本申请某些实施方式的图像处理方法的流程示意图；
[0023]图13是本申请某些实施方式的图像处理方法的场景示意图；
[0024]图14是本申请某些实施方式的图像处理方法的流程示意图；
[0025]图15是本申请某些实施方式的图像处理方法的场景示意图本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种图像处理方法，其特征在于，包括：获取曝光时长不同的第一图像和第二图像，并计算所述第一图像中的第一像素和所述第二图像中与所述第一像素匹配的第二像素的第一相似度；根据所述第一相似度确定所述第一像素的第一权值和所述第二像素的第二权值；获取所述第一图像中包含目标对象的第一目标区域及所述第二图像中包含所述目标对象的第二目标区域；根据所述第一目标区域的每个所述第一像素的预设范围内的所述第一像素的所述第一权值，更新所述第一目标区域的每个所述第一像素的所述第一权值，以得到第三权值、并根据所述第二目标区域的每个所述第二像素的预设范围内的所述第二像素的所述第二权值，更新所述第二目标区域的每个所述第二像素的所述第二权值，以得到第四权值；及根据所述第一权值、所述第二权值、所述第三权值和所述第四权值，融合所述第一图像和所述第二图像，以生成目标图像。2.根据权利要求1所述的图像处理方法，其特征在于，还包括：基于预设窗口对所述第一图像和所述第二图像进行遍历，以得到每个所述第一像素的第一码流和每个所述第二像素的第二码流；计算所述第一图像中的每个所述第一像素的所述第一码流和所述第二图像中的每个所述第二像素的所述第二码流的距离；确定所述距离最小所述第一像素和所述第二像素匹配。3.根据权利要求2所述的图像处理方法，其特征在于，所述基于预设窗口对所述第一图像和所述第二图像进行遍历，以得到每个所述第一像素的第一码流和每个所述第二像素的第二码流，包括：获取所述第一图像的所述预设窗口内的所有所述第一像素的第一中心像素的像素值、及所述第二图像的所述预设窗口内的所有所述第二像素的第二中心像素的像素值；在所述预设窗口内的所述第一像素的像素值小于所述第一中心像素的像素值的情况下，确定所述预设窗口内的所述第一像素的像素值为第一编码值；在所述预设窗口内的所述第一像素的像素值大于或等于所述第一中心像素的像素值的情况下，确定所述预设窗口内的所述第一像素的像素值为第二编码值，所述第一编码值和所述第二编码值不同；在所述预设窗口内的所述第二像素的像素值小于所述第二中心像素的像素值的情况下，确定所述预设窗口内的所述第二像素的像素值为所述第一编码值；在所述预设窗口内的所述第二像素的像素值大于或等于所述第二中心像素的像素值的情况下，确定所述预设窗口内的所述第二像素的像素值为所述第二编码值；所述计算所述第一图像中的每个所述第一像素的所述第一码流和所述第二图像中的每个所述第二像素的所述第二码流的距离，包括：统计所述第一图像中的每个所述第一像素的所述第一码流和所述第二图像中的每个所述第二像素的所述第二码流中，相同位置的编码值出现不同的次数，以作为所述距离。4.根据权利要求3所述的图像处理方法，其特征在于，所述计算所述第一图像中的第一像素和所述第二图像中与所述第一像素匹配的第二像素的第一相似度，包括：根据所述第一图像中的所述第一像素的所述第一码流和所述第二图像中匹配的所述
第二像素的所述第二码流的所述距离计算所述第一相似度，所述距离越小，所述第一相似度越大。5.根据权利要求3所述的图像处理方法，所述计算所述第一图像中的第一像素和所述第二图像中与所述第一像素匹配的第二像素的第一相似度，包括：获取所述第一像素的第一梯度值和第一像素插值，及所述第二像素的第二梯度值和第二像素插值；计算每个所述第一梯度值和每个所述第二梯度值的第一距离，并计算每个所述第一像素插值和所述每个所述第二像素插值的第二距离；根据所述距离、所述第一距离和所述第二距离，计算所述第一相似度。6.根据权利要求1所述的图像处理方法，其特征在于，还包括：对所述第二图像进行降采样，以得到降采样图像；获取所述降采样图像中与所述第一像素匹配的待匹配像素；确定所述第二图像中，包含所述待匹配像素的待匹配区域；获取所述待匹配区域中与所述第一像素匹配的所述第二像素。7.根据权利要求1所述的图像处理方法，其特征在于，还包括：对所述第一图像和所述第二图像进行亮度对齐；所述根据所述第一权值、所述第二权值、所述第三权值和所述第四权值，融合所述第一图像和所述第二图像，以生成目标图像，包括：根据所述第一权值、所述第二权值、所述第三权值和所述第四权值，融合亮度对齐后的所述第一图像和所述第二图像，以生成所述目标图像。8.根据权利...

【专利技术属性】
技术研发人员：牛兵兵，
申请(专利权)人：OPPO广东移动通信有限公司，
类型：发明
国别省市：