图像处理方法、图像处理装置、存储介质与电子设备制造方法及图纸

本公开提供了图像处理方法、图像处理装置、计算机可读存储介质与电子设备，涉及图像处理技术领域。其中，本公开的一种图像处理方法包括：获取连续多帧图像；提取至少两帧图像的前景区域图像；根据各前景子区域在各所述前景区域图像中的最大像素值对各所述前景子区域进行融合，形成前景融合图像，所述前景子区域为所述前景区域图像的子区域；基于所述前景融合图像与至少一帧图像的背景区域图像，生成目标图像。本公开通过多帧图像融合实现了模拟长曝光效果的技术方案，适用于智能手机等电子设备，在最终输出的目标图像中能够保留清晰连续的运动轨迹，同时降低噪声的影响。

【技术实现步骤摘要】
图像处理方法、图像处理装置、存储介质与电子设备
本公开涉及图像处理
，尤其涉及图像处理方法、图像处理装置、计算机可读存储介质与电子设备。
技术介绍
长曝光是指维持镜头长时间曝光从而得到特殊效果的一种拍摄方法。一般的，长曝光图像可以拍出运动物体的运动轨迹效果，例如对夜景中的运动光源(如车灯、流星)进行长曝光拍摄能够得到连续光轨的效果(即流光图像)，对水流(如瀑布、河流)进行长曝光拍摄，能够得到具有水流奔腾动感的图像。目前的长曝光拍摄一般适用于单反相机。在智能手机等电子设备上，由于相机镜头较小，在使用长曝光拍摄时，如果曝光时间不足，则拍出的运动主体可能存在鬼影(如车身的鬼影)，如果曝光时间过长，则可能导致图像过曝光，且长曝光过程中容易受到设备机身抖动的影响，造成图像模糊。
技术实现思路
本公开提供了一种图像处理方法、图像处理装置、计算机可读存储介质与电子设备，进而至少在一定程度上实现模拟长曝光的图像拍摄效果。根据本公开的第一方面，提供一种图像处理方法，包括：获取连续多帧图像；提取至少两帧图像的前景区域图像；根据各前景子区域在各所述前景区域图像中的最大像素值对各所述前景子区域进行融合，形成前景融合图像，所述前景子区域为所述前景区域图像的子区域；基于所述前景融合图像与至少一帧图像的背景区域图像，生成目标图像。根据本公开的第二方面，提供一种图像处理方法，包括：在连续多帧图像中确定参考帧图像，并将除所述参考帧图像外的其他至少一帧图像确定为待融合图像；确定所述待融合图像的前景区域；从所述待融合图像中提取至少一个子区域；将所述待融合图像中的所述子区域分别融合至所述参考帧图像，其中，当所述子区域位于所述前景区域时，将所述子区域在所述待融合图像与所述参考帧图像中较大的像素值作为融合后所述子区域的像素值。根据本公开的第三方面，提供一种图像处理装置，包括：图像获取模块，被配置为获取连续多帧图像；图像分割模块，被配置为提取至少两帧图像的前景区域图像；前景融合模块，被配置为根据各前景子区域在各所述前景区域图像中的最大像素值对各所述前景子区域进行融合，形成前景融合图像，所述前景子区域为所述前景区域图像的子区域；目标融合模块，被配置为基于所述前景融合图像与至少一帧图像的背景区域图像，生成目标图像。根据本公开的第四方面，提供一种图像处理装置，包括：图像确定模块，被配置为在连续多帧图像中确定参考帧图像，并将除所述参考帧图像外的其他至少一帧图像确定为待融合图像；图像分割模块，被配置为前景区域确定所述待融合图像的前景区域；子区域提取模块，被配置为从所述待融合图像中提取至少一个子区域；子区域融合模块，被配置为将所述待融合图像中的所述子区域分别融合至所述参考帧图像，其中，当所述子区域位于所述前景区域时，将所述子区域在所述待融合图像与所述参考帧图像中较大的像素值作为融合后所述子区域的像素值。根据本公开的第五方面，提供一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现上述第一或第二方面的图像处理方法及其可能的实现方式。根据本公开的第六方面，提供一种电子设备，包括：处理器；存储器，用于存储所述处理器的可执行指令。其中，所述处理器配置为经由执行所述可执行指令来执行上述第一或第二方面的图像处理方法及其可能的实现方式。本公开的技术方案具有以下有益效果：提供了通过多帧图像融合实现模拟长曝光效果的技术方案。一方面，本方案适用于智能手机等电子设备，实际应用中采用普通曝光拍摄多帧图像即可，相较于采用长曝光拍摄的方式，能够避免由于曝光时间不合适所导致的鬼影、过曝光等问题，并且受设备机身抖动的影响较小，从而改善图像模糊问题。另一方面，本方案对前景区域图像采用最大像素值融合，相当于将运动光源或运动对象的实际图像进行了融合，能够保留清晰连续的运动轨迹，同时降低噪声的影响，从而提高最终输出的目标图像的质量。应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。附图说明图1示出本示例性实施方式中一种电子设备的结构示意图；图2示出本示例性实施方式中一种图像处理方法的流程步骤图；图3示出本示例性实施方式中一种确定曝光条件的流程步骤图；图4示出本示例性实施方式中一种提取前景区域图像的流程步骤图；图5示出本示例性实施方式中一种提取前景区域图像的示意图；；图6示出本示例性实施方式中一种确定子区域像素值的示意图；图7示出本示例性实施方式中一种图像配准的流程步骤图；图8示出本示例性实施方式中一种生成目标图像的流程步骤图；图9示出本示例性实施方式中一种图像处理方法的流程架构图；图10示出本示例性实施方式中另一种图像处理方法的流程架构图；图11示出本示例性实施方式中另一种图像处理方法的流程步骤图；图12示出本示例性实施方式中另一种图像处理方法的流程架构图；图13示出本示例性实施方式中的连续多帧图像；图14示出由图13的连续多帧图像融合得到的目标图像图15示出本示例性实施方式中一种图像处理装置的结构示意图；图16示出本示例性实施方式中另一种图像处理装置的结构示意图。具体实施方式现在将参考附图更全面地描述示例实施方式。然而，示例实施方式能够以多种形式实施，且不应被理解为限于在此阐述的范例；相反，提供这些实施方式使得本公开将更加全面和完整，并将示例实施方式的构思全面地传达给本领域的技术人员。所描述的特征、结构或特性可以以任何合适的方式结合在一个或更多实施方式中。在下面的描述中，提供许多具体细节从而给出对本公开的实施方式的充分理解。然而，本领域技术人员将意识到，可以实践本公开的技术方案而省略所述特定细节中的一个或更多，或者可以采用其它的方法、组元、装置、步骤等。在其它情况下，不详细示出或描述公知技术方案以避免喧宾夺主而使得本公开的各方面变得模糊。此外，附图仅为本公开的示意性图解，并非一定是按比例绘制。图中相同的附图标记表示相同或类似的部分，因而将省略对它们的重复描述。附图中所示的一些方框图是功能实体，不一定必须与物理或逻辑上独立的实体相对应。可以采用软件形式来实现这些功能实体，或在一个或多个硬件模块或集成电路中实现这些功能实体，或在不同网络和/或处理器装置和/或微控制器装置中实现这些功能实体。附图中所示的流程图仅是示例性说明，不是必须包括所有的步骤。例如，有的步骤还可以分解，而有的步骤可以合并或部分合并，因此实际执行的顺序有可能根据实际情况改变。本公开的示例性实施方式首先提供一种图像处理方法，其应用场景包括但不限于：在夜景拍摄中，对运动光源)进行连续多帧拍摄，通过融合得到具有连续光轨效果的流光图像；对水流进行连续多帧拍摄，通过融合得到具有水流奔腾动感的瀑布或河流图像。本公开的示例性实施方式还提供一种电子设备，用于执行本示例性实施方式的图像处理方法。该电子设备可以是具有拍摄功能的终端设备，如智本文档来自技高网...

【技术保护点】
1.一种图像处理方法，其特征在于，包括：/n获取连续多帧图像；/n提取至少两帧图像的前景区域图像；/n根据各前景子区域在各所述前景区域图像中的最大像素值对各所述前景子区域进行融合，形成前景融合图像，所述前景子区域为所述前景区域图像的子区域；/n基于所述前景融合图像与至少一帧图像的背景区域图像，生成目标图像。/n

【技术特征摘要】
1.一种图像处理方法，其特征在于，包括：
获取连续多帧图像；
提取至少两帧图像的前景区域图像；
根据各前景子区域在各所述前景区域图像中的最大像素值对各所述前景子区域进行融合，形成前景融合图像，所述前景子区域为所述前景区域图像的子区域；
基于所述前景融合图像与至少一帧图像的背景区域图像，生成目标图像。


2.根据权利要求1所述的方法，其特征在于，所述前景区域图像中的每个像素点均为一个所述前景子区域。


3.根据权利要求1所述的方法，其特征在于，所述根据各前景子区域在各所述前景区域图像中的最大像素值对各所述前景子区域进行融合，形成前景融合图像，包括：
对于每个前景子区域，分别在各所述前景区域图像中确定所述前景子区域的像素统计值；
将所述前景子区域的最大像素统计值对应的所述前景区域图像确定为所述前景子区域对应的目标前景区域图像；
将所述前景子区域在所述目标前景区域图像中的像素值作为所述前景子区域在所述前景融合图像中的像素值。


4.根据权利要求1所述的方法，其特征在于，所述基于所述前景融合图像与至少一帧图像的背景区域图像，生成目标图像，包括：
融合至少两帧图像的背景区域图像，得到背景融合图像；
基于所述前景融合图像与所述背景融合图像，生成所述目标图像。


5.根据权利要求4所述的方法，其特征在于，所述融合至少两帧图像的背景区域图像，得到背景融合图像，包括：
将背景区域中每个像素点在各所述背景区域图像中的像素值取平均，得到所述背景融合图像。


6.根据权利要求1所述的方法，其特征在于，所述获取连续多帧图像，包括：
根据环境光照参数确定曝光条件；
获取在所述曝光条件下连续拍摄的多帧图像。


7.根据权利要求6所述的方法，其特征在于，所述根据环境光照参数确定曝光条件，包括：
根据环境光照参数确定对应的第一曝光时长；
获取最小感光度对应的第二曝光时长；
根据所述第一曝光时长与所述第二曝光时长中的最大值，以及所述最小感光度确定所述曝光条件。


8.根据权利要求1所述的方法，其特征在于，所述提取至少两帧图像的前景区域图像，包括：
将所述连续多帧图像中的至少两帧待分割图像分别与所述连续多帧图像中的参考帧图像相减，得到每一帧待分割图像对应的差值图像；
根据所述差值图像中各像素值与预设阈值的比较结果，生成所述每一帧待分割图像对应的前景掩模图像；
利用所述前景掩模图像从所述待分割图像中提取所述前景区域图像。


9.根据权利要求1所述的方法，其特征在于，在提取至少两帧图像的前景区域图像后，所述方法还包括：
根据所述至少两帧图像的背景区域图像，对所述至少两帧图像进行配准。


10.根据权利要求9所述的方法，其特征在于，在对所述至少两帧图像进行配准后，所述方法还包括：
对配准后的所述至少两帧图像再次提取前景区域图像。


11.根据权利要求9所述的方法，其特征在于，所述根据所述至少两帧图像的背景区域图像，对所述至少两帧图像进行配准，包括：
分别从两帧图像的背景区域图像中提取特征点；
对所述两帧图像的背景区域图像进行特征点匹配，得到匹配点对；
根据所述匹配点对确定单应性矩阵；
通过所述单应性矩阵，将所述两帧图像中的一帧图像向另一帧图像配准。


12.根据权利要求9所述的方法，其特征在于，在根据所述至少两帧图像的背景区域图像，对所述至少两帧图像进行配准前，所述方法还包括：
当各所述背景区域图像对应的背景区域不完全重合时，对各所述背景区域图像对应的背景区域取交集，得到公共背景区域；
将每一张背景区域图像中位于所述公共背景区域以外的部分删除。


13.根据权利要求9所述的方法，其特征在于，所述至少两帧图像包括参考帧图像；
所述对所述至少两帧图像进行配准，包括：
将所述至少两帧图像中除所述参考帧图像以外的图像均向所述参考帧图像配准。


14.根据权利要求8或13所述的方法，其特征在于，所述参考帧图像为所述连续多帧图像中的第一帧图像。


15.根据权利要求1所述的方法，其特征在于，在根据各前景子区域在各所述前景区域图像中的最大像素值对各所述前景子区域进行融合，形成前景融合图像前，所述方法还包括：
当各所述前景区域图像对应的前景区域不完全重合时，对各所述前景区域图像对应的前景区域取交集，得到公共前景区域；
将每一张前景区域图像中位于所述公共前景区域以外的部分删除。


16.根据权...

【专利技术属性】
技术研发人员：邹涵江，
申请(专利权)人：OPPO广东移动通信有限公司，
类型：发明
国别省市：广东;44