图像处理方法、装置和电子系统制造方法及图纸

本发明专利技术提供了一种图像处理方法、装置和电子系统，获取在不同曝光度下采集的多张初始图像和多张初始图像对应的蒙版图像，蒙版图像用于指示多张初始图像中的前景区域；融合多张初始图像的亮度信息得到初始亮度信息；基于蒙版图像，融合初始亮度信息和多张初始图像中的参考帧图像的亮度信息得到最终亮度信息；基于最终亮度信息和参考帧图像的色彩信息得到目标图像。该方式基于不同曝光度的多张图像得到指示图像前景区域的蒙版图像，进而通过蒙版图像融合参考帧图像中前景区域的亮度信息和初始亮度信息中的非前景区域，以确保融合后图像中的前景区域与参考帧图像中的匹配，从而提高了融合后图像中前景区域的视觉效果，也提升了融合后图像的整体效果。

【技术实现步骤摘要】
图像处理方法、装置和电子系统
本专利技术涉及图像处理
，尤其是涉及一种图像处理方法、装置和电子系统。
技术介绍
HDR(High-DynamicRange，高动态范围)图像，相比普通的图像，可以提供更多的动态范围和图像细节，HDR图像是使用多张不同曝光的图片，然后利用软件将这些不同曝光的图像组合成的一张图像，该图像能够更好的反映出真实环境中的视觉效果。相关技术中，HDR图像合成方法通常采用线性融合的方式，但是该方式得到的合成图像对比度偏低，视觉上容易出现发灰的现象，导致合成的图像的人像区域视觉上看起来也发灰，使得图像整体的效果不够自然。
技术实现思路
本专利技术的目的在于提供一种图像处理方法、装置和电子系统，以提高合成图像中人像区域的效果，同时提升合成图像的整体效果。第一方面，本专利技术提供了一种图像处理方法，该方法包括：获取在不同曝光度下采集的多张初始图像，以及多张初始图像对应的蒙版图像；其中，该蒙版图像基于多张初始图像中的至少一部分图像生成；该蒙版图像用于指示多张初始图像中的前景区域；对多张初始图像的亮度信息进行融合处理，得到初始亮度信息；基于蒙版图像，将初始亮度信息和多张初始图像中的参考帧图像的像素亮度信息进行融合处理，得到最终亮度信息；基于最终亮度信息和参考帧图像的色彩信息，得到目标图像。在可选的实施方式中，上述基于蒙版图像，将初始亮度信息和多张初始图像中的参考帧图像的像素亮度信息进行融合处理，得到最终亮度信息的步骤，包括：将初始亮度信息与参考帧图像的像素亮度信息，通过蒙版图像进行alpha融合，得到最终亮度信息。在可选的实施方式中，上述蒙版图像中每个像素点的像素值为0或者255；上述将初始亮度信息与参考帧图像的像素亮度信息，通过蒙版图像进行alpha融合，得到最终亮度信息的步骤，包括：通过下述算式，计算得到最终亮度信息：new_res＝ev0*(M/255)+(1-M/255)*res；其中，new_res表示最终亮度信息；ev0表示参考帧图像的像素亮度信息；M表示蒙版图像中每个像素点的像素值；res表示初始亮度信息。在可选的实施方式中，上述获取在不同曝光度下采集的多张初始图像，以及多张初始图像对应的蒙版图像的步骤，包括：获取在不同曝光度下采集的多张初始图像；其中，每张初始图像对应的一种曝光度；从多张初始图像中，选取指定数量的初始图像；对指定数量的初始图像的亮度信息进行融合处理，得到融合图像；对融合图像进行二值化处理，得到蒙版图像。在可选的实施方式中，上述指定数量为两个；上述从多张初始图像中，选取指定数量的初始图像的步骤，包括：从多张初始图像中，选取曝光度最大的初始图像和曝光度最小的初始图像。在可选的实施方式中，上述对指定数量的初始图像的亮度信息进行融合处理，得到融合图像的步骤，包括：针对指定数量的初始图像中每对曝光度相邻的两张初始图像，对当前曝光度相邻的两张初始图像进行融合处理，得到当前曝光度相邻的两张初始图像的第一融合图像；针对指定数量的初始图像得到的多张第一融合图像中每对曝光度相邻的两张第一融合图像，对当前曝光度相邻的两张第一融合图像进行融合处理，得到当前曝光度相邻的两张第一融合图像的第二融合图像；将第二融合图像作为新的第一融合图像，继续执行针对每对曝光度相邻的两张第一融合图像，对当前曝光度相邻的两张第一融合图像进行融合处理，得到当前曝光度相邻的两张第一融合图像的第二融合图像的步骤，直到得到一张最终的融合图像。在可选的实施方式中，上述对当前曝光度相邻的两张初始图像进行融合处理，得到当前曝光度相邻的两张初始图像的第一融合图像的步骤，包括：针对当前曝光度相邻的两张初始图像中的每个像素点，执行下述操作：根据当前曝光度相邻的两张初始图像中当前像素点的亮度值，从预设的权重矩阵中查找加权权重；其中，该权重矩阵中包括任意两个亮度值对应的加权权重；根据查到的加权权重和当前曝光度相邻的两张初始图像中当前像素点的亮度值，确定第一融合图像中当前像素点对应的亮度值。在可选的实施方式中，上述根据当前曝光度相邻的两张初始图像中当前像素点的亮度值，从预设的权重矩阵中查找加权权重的步骤，包括：从当前曝光度相邻的两张初始图像中，确定第一个初始图像中当前像素点的第一亮度值和第二个初始图像中当前像素点的第二亮度值；将第一亮度值与一的加和，确定为目标列数；将第二亮度值与一的加和，确定为目标行数；根据目标列数和目标行数，确定加权权重在权重矩阵中的位置，将权重矩阵中位置对应的数值确定为查找到的加权权重。在可选的实施方式中，上述根据查到的加权权重和当前曝光度相邻的两张初始图像中当前像素点的亮度值，确定第一融合图像中当前像素点对应的亮度值的步骤，包括：通过下述算式确定第一融合图像中当前像素点对应的亮度值：Bi＝w1i*A1i+w2i*A2i；其中，Bi表示第一融合图像中第i个像素点的亮度值，其中，第i个像素点为当前像素点；w1i表示从权重矩阵中查到的加权权重，为当前曝光度相邻的两张初始图像中第一个初始图像A1中第i个像素点对应的加权权重；w2i表示当前曝光度相邻的两张初始图像中第二个初始图像A2中第i个像素点对应的加权权重，其中，w2i＝1-w1i；A1i表示第一个初始图像A1中第i个像素点的亮度值；A2i表示第二个初始图像A2中第i个像素点的亮度值。在可选的实施方式中，上述对融合图像进行二值化处理，得到蒙版图像的步骤，包括：对二值化处理后的融合图像进行引导滤波处理，得到滤波后的蒙版图像。在可选的实施方式中，上述对多张初始图像的亮度信息进行融合处理，得到初始亮度信息的步骤，包括：针对多张初始图像中每对曝光度相邻的两张初始图像，对当前曝光度相邻的两张初始图像进行融合处理，得到当前曝光度相邻的两张初始图像的第一亮度图；针对多张初始图像得到的多张第一亮度图中每对曝光度相邻的两张第一亮度图，对当前曝光度相邻的两张第一亮度图进行融合处理，得到当前曝光度相邻的两张第一亮度图的第二亮度图；将第二亮度图作为新的第一亮度图，继续执行针对每对曝光度相邻的两张第一亮度图，对当前曝光度相邻的两张第一亮度图进行融合处理，得到当前曝光度相邻的两张第一亮度图的第二亮度图的步骤，直到得到一张亮度图为止；将得到的一张亮度图的亮度信息确定为初始亮度信息。在可选的实施方式中，上述初始图像的颜色空间为YUV形式，亮度信息为Y通道，色彩信息为UV通道。第二方面，本专利技术提供了一种图像处理装置，该装置包括：图像获取模块，用于获取在不同曝光度下采集的多张初始图像，以及多张初始图像对应的蒙版图像；其中，该蒙版图像基于多张初始图像中的至少一部分图像生成；该蒙版图像用于指示多张初始图像中的前景区域；第一融合模块，用于对多张初始图像的亮度信息进行融合处理，得到初始亮度信息；第二融合模块，用于基于蒙版图像，将初始亮度信息和多张初始图像中的参考帧图像的像素亮度信息进行融合处理，得到最终亮度信息；信息整合模块，用于基于最终亮度信息和参考帧图像的色彩信息，得到目标图像。第三方面，本专利技术提供了一种电子系统本文档来自技高网...

【技术保护点】
1.一种图像处理方法，其特征在于，所述方法包括：/n获取在不同曝光度下采集的多张初始图像，以及所述多张初始图像对应的蒙版图像；其中，所述蒙版图像基于所述多张初始图像中的至少一部分图像生成；所述蒙版图像用于指示所述多张初始图像中的前景区域；/n对所述多张初始图像的亮度信息进行融合处理，得到初始亮度信息；/n基于所述蒙版图像，将所述初始亮度信息和所述多张初始图像中的参考帧图像的像素亮度信息进行融合处理，得到最终亮度信息；/n基于所述最终亮度信息和所述参考帧图像的色彩信息，得到目标图像。/n

【技术特征摘要】
1.一种图像处理方法，其特征在于，所述方法包括：
获取在不同曝光度下采集的多张初始图像，以及所述多张初始图像对应的蒙版图像；其中，所述蒙版图像基于所述多张初始图像中的至少一部分图像生成；所述蒙版图像用于指示所述多张初始图像中的前景区域；
对所述多张初始图像的亮度信息进行融合处理，得到初始亮度信息；
基于所述蒙版图像，将所述初始亮度信息和所述多张初始图像中的参考帧图像的像素亮度信息进行融合处理，得到最终亮度信息；
基于所述最终亮度信息和所述参考帧图像的色彩信息，得到目标图像。


2.根据权利要求1所述的方法，其特征在于，所述基于所述蒙版图像，将所述初始亮度信息和所述多张初始图像中的参考帧图像的像素亮度信息进行融合处理，得到最终亮度信息的步骤，包括：
将所述初始亮度信息与所述参考帧图像的像素亮度信息，通过所述蒙版图像进行alpha融合，得到最终亮度信息。


3.根据权利要求2所述的方法，其特征在于，所述蒙版图像中每个像素点的像素值为0或者255；所述将所述初始亮度信息与所述参考帧图像的像素亮度信息，通过所述蒙版图像进行alpha融合，得到最终亮度信息的步骤，包括：
通过下述算式，计算得到所述最终亮度信息：
new_res＝ev0*(M/255)+(1-M/255)*res；
其中，new_res表示所述最终亮度信息；ev0表示所述参考帧图像的像素亮度信息；M表示所述蒙版图像中每个像素点的像素值；res表示所述初始亮度信息。


4.根据权利要求1-3任一项所述的方法，其特征在于，获取在不同曝光度下采集的多张初始图像，以及所述多张初始图像对应的蒙版图像的步骤，包括：
获取在不同曝光度下采集的多张初始图像；其中，每张所述初始图像对应的一种曝光度；
从所述多张初始图像中，选取指定数量的所述初始图像；
对所述指定数量的所述初始图像的亮度信息进行融合处理，得到融合图像；
对所述融合图像进行二值化处理，得到所述蒙版图像。


5.根据权利要求4所述的方法，其特征在于，所述指定数量为两个；所述从所述多张初始图像中，选取指定数量的所述初始图像的步骤，包括：
从所述多张初始图像中，选取曝光度最大的初始图像和曝光度最小的初始图像。


6.根据权利要求4所述的方法，其特征在于，所述对所述指定数量的所述初始图像的亮度信息进行融合处理，得到融合图像的步骤，包括：
针对所述指定数量的所述初始图像中每对曝光度相邻的两张初始图像，对当前曝光度相邻的两张初始图像进行融合处理，得到所述当前曝光度相邻的两张初始图像的第一融合图像；
针对所述指定数量的初始图像得到的多张第一融合图像中每对曝光度相邻的两张第一融合图像，对当前曝光度相邻的两张第一融合图像进行融合处理，得到所述当前曝光度相邻的两张第一融合图像的第二融合图像；
将所述第二融合图像作为新的第一融合图像，继续执行针对每对曝光度相邻的两张第一融合图像，对当前曝光度相邻的两张第一融合图像进行融合处理，得到所述当前曝光度相邻的两张第一融合图像的第二融合图像的步骤，直到得到一张最终的融合图像。


7.根据权利要求6所述的方法，其特征在于，所述对当前曝光度相邻的两张初始图像进行融合处理，得到所述当前曝光度相邻的两张初始图像的第一融合图像的步骤，包括：
针对当前曝光度相邻的两张初始图像中的每个像素点，执行下述操作：
根据所述当前曝光度相邻的两张初始图像中当前像素点的亮度值，从预设的权重矩阵中查找加权权重；其中，所述权重矩阵中包括任意两个亮度值对应的加权权重；
根据查到的所述加权权重和所述当前曝光度相邻的两张初始图像中当前像素点的亮度值，确定所述第一融合图像中所述当前像素点对应的亮度值。


8.根据权利要求7所述的方法，其特征在于，所述根据所述当前曝光度相邻的两张初始图像中当前像素点的亮度值，从预...

【专利技术属性】
技术研发人员：蒋霆，饶青，韩明燕，刘帅成，
申请(专利权)人：北京迈格威科技有限公司，
类型：发明
国别省市：北京;11