图像处理方法和装置、电子装置和计算机可读存储介质制造方法及图纸

本发明专利技术公开了一种图像处理方法，用于电子装置。图像处理方法包括：获取当前用户的场景图像；获取当前用户的深度图像；处理场景图像和深度图像以提取当前用户在场景图像中的人物区域而获得人物区域图像；将人物区域图像与预定二维背景图像融合以得到合并图像。本发明专利技术还公开了一种图像处理装置、电子装置和计算机可读存储介质。本发明专利技术实施方式的图像处理方法、图像处理装置、电子装置和计算机可读存储介质通过获取当前用户的深度图像以将场景图像中的人物区域提取出来。由于深度图像的获取不易受光照、场景中色彩分布等因素的影响，因此，通过深度图像提取到的人物区域更加准确，尤其可以准确标定出人物区域的边界。

Image processing methods and devices, electronic devices and computer readable storage media

The invention discloses an image processing method, which is used in an electronic device. The image processing method comprises: image of the current user; the depth image of the current user; processing the scene image and the depth image to extract the current user in the scene in the image area and character image characters; the character region of the image with a predetermined two-dimensional background image fusion to get the combined image. The invention also discloses an image processing device, an electronic device and a computer readable storage medium. The image processing method, the image processing device, the electronic device and the computer readable storage medium of the implementation method of the invention are used to extract the current user's depth image to extract the character area in the scene image. Because the depth image acquisition is not easy to be affected by factors such as illumination and color distribution in scenes, it is more accurate to extract the character regions from deep images, especially the boundaries of human regions can be accurately calibrated.

【技术实现步骤摘要】
图像处理方法和装置、电子装置和计算机可读存储介质
本专利技术涉及图像处理
，特别涉及一种图像处理方法和装置、电子装置和计算机可读存储介质。
技术介绍
现有的将人物与虚拟背景融合的技术通常使用特征点提取人物轮廓，但使用特征点提取的人物轮廓精确度不高，尤其无法准确标定出人物的边界，影响图像融合的效果。
技术实现思路
本专利技术的实施例提供了一种图像处理方法、图像处理装置、电子装置和计算机可读存储介质。本专利技术实施方式的图像处理方法用于电子装置，所述图像处理方法包括：获取当前用户的场景图像；获取所述当前用户的深度图像；处理所述场景图像和所述深度图像以提取所述当前用户在所述场景图像中的人物区域而获得人物区域图像；和将所述人物区域图像与预定二维背景图像融合以得到合并图像。本专利技术实施方式的图像处理装置，用于电子装置。所述图像处理装置包括可见光摄像头、深度图像采集组件和处理器。所述可见光摄像头用于获取当前用户的场景图像。所述深度图像采集组件用于获取所述当前用户的深度图像。所述处理器用于处理所述场景图像和所述深度图像以提取所述当前用户在所述场景图像中的人物区域而获得人物区域图像，以及将所述人物区域图像与预定二维背景图像融合以得到合并图像。本专利技术实施方式的电子装置包括一个或多个处理器、存储器和一个或多个程序。其中所述一个或多个程序被存储在所述存储器中，并且被配置成由所述一个或多个处理器执行，所述程序包括用于执行上述的图像处理方法的指令。本专利技术实施方式的计算机可读存储介质包括与能够摄像的电子装置结合使用的计算机程序，所述计算机程序可被处理器执行以完成上述的图像处理方法。本专利技术实施方式的图像处理方法、图像处理装置、电子装置和计算机可读存储介质通过获取当前用户的深度图像以将场景图像中的人物区域提取出来。由于深度图像的获取不易受光照、场景中色彩分布等因素的影响，因此，通过深度图像提取到的人物区域更加准确，尤其可以准确标定出人物区域的边界。进一步地，较为精准的人物区域图像与预定二维背景融合后的合并图像的效果更佳。本专利技术的附加方面和优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本专利技术的实践了解到。附图说明本专利技术上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解，其中：图1是本专利技术某些实施方式的图像处理方法的流程示意图。图2是本专利技术某些实施方式的图像处理装置的示意图。图3是本专利技术某些实施方式的电子装置的结构示意图。图4是本专利技术某些实施方式的图像处理方法的流程示意图。图5是本专利技术某些实施方式的图像处理方法的流程示意图。图6(a)至图6(e)是根据本专利技术一个实施例的结构光测量的场景示意图。图7(a)和图7(b)是根据本专利技术一个实施例的结构光测量的场景示意图。图8是本专利技术某些实施方式的图像处理方法的流程示意图。图9是本专利技术某些实施方式的图像处理方法的流程示意图。图10是本专利技术某些实施方式的图像处理装置的示意图。图11是本专利技术某些实施方式的电子装置的示意图。具体实施方式下面详细描述本专利技术的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，旨在用于解释本专利技术，而不能理解为对本专利技术的限制。请一并参阅图1至2，本专利技术实施方式的图像处理方法用于电子装置1000。图像处理方法包括：01：获取当前用户的场景图像；03：获取当前用户的深度图像；05：处理场景图像和深度图像以提取当前用户在场景图像中的人物区域而获得人物区域图像；和07：将人物区域图像与预定二维背景图像融合以得到合并图像。请参阅图3，本专利技术实施方式的图像处理方法可以由本专利技术实施方式的图像处理装置100实现。本专利技术实施方式的图像处理装置100用于电子装置1000。图像处理装置100包括可见光摄像头11、深度图像采集组件12和处理器20。步骤01可以由可见光摄像头11实现，步骤03可以由深度图像采集组件12实现，步骤05和步骤07可以由处理器20实现。也即是说，可见光摄像头11可用于获取当前用户的场景图像；深度图像采集组件12可用于获取当前用户的深度图像；处理器20可用于处理场景图像和深度图像以提取当前用户在场景图像中的人物区域而获得人物区域图像，以及将人物区域图像与预定二维背景图像融合以得到合并图像。其中，场景图像可以是灰度图像或彩色图像，深度图像表征包含当前用户的场景中各个人或物体的深度信息。场景图像的场景范围与深度图像的场景范围一致，且场景图像中的各个像素均能在深度图像中找到对应该像素的深度信息。本专利技术实施方式的图像处理装置100可以应用于本专利技术实施方式的电子装置1000。也即是说，本专利技术实施方式的电子装置1000包括本专利技术实施方式的图像处理装置100。在某些实施方式中，电子装置1000包括手机、平板电脑、笔记本电脑、智能手环、智能手表、智能头盔、智能眼镜等。现有的分割人物与背景的方法主要根据相邻像素在像素值方面的相似性和不连续性进行人物与背景的分割，但这种分割方法易受外界光照等环境因素的影响。本专利技术实施方式的图像处理方法、图像处理装置100和电子装置1000通过获取当前用户的深度图像以将场景图像中的人物区域提取出来。由于深度图像的获取不易受光照、场景中色彩分布等因素的影响，因此，通过深度图像提取到的人物区域更加准确，尤其可以准确标定出人物区域的边界。进一步地，较为精准的人物区域图像与预定二维背景融合后的合并图像的效果更佳。请参阅图4，在某些实施方式中，步骤03获取当前用户的深度图像的步骤包括：031：向当前用户投射结构光；032：拍摄经当前用户调制的结构光图像；和033：解调结构光图像的各个像素对应的相位信息以得到深度图像。请再参阅图2，在某些实施方式中，深度图像采集组件12包括结构光投射器121和结构光摄像头122。步骤031可以由结构光投射器121实现，步骤032和步骤033可以由结构光摄像头122实现。也即是说，结构光投射器121可用于向当前用户投射结构光；结构光摄像头122可用于拍摄经当前用户调制的结构光图像，以及解调结构光图像的各个像素对应的相位信息以得到深度图像。具体地，结构光投射器121将一定模式的结构光投射到当前用户的面部及躯体上后，在当前用户的面部及躯体的表面会形成由当前用户调制后的结构光图像。结构光摄像头122拍摄经调制后的结构光图像，再对结构光图像进行解调以得到深度图像。其中，结构光的模式可以是激光条纹、格雷码、正弦条纹、非均匀散斑等。请参阅图5，在某些实施方式中，步骤033解调结构光图像的各个像素对应的相位信息以得到深度图像的步骤包括：0331：解调结构光图像中各个像素对应的相位信息；0332：将相位信息转化为深度信息；和0333：根据深度信息生成深度图像。请再参阅图2，在某些实施方式中，步骤0331、步骤0332和步骤0333均可以由结构光摄像头122实现。也即是说，结构光摄像头122可进一步用于解调结构光图像中各个像素对应的相位信息，将相位信息转化为深度信息，以及根据深度信息生成深度图像。具体地，与未经调制的结构光相比，调制后的结构光的相位信息发生了变化，在结构光图像中呈现出的结构光是产生了畸变之后的结构本文档来自技高网...

【技术保护点】
一种图像处理方法，用于电子装置，其特征在于，所述图像处理方法包括：获取当前用户的场景图像；获取所述当前用户的深度图像；处理所述场景图像和所述深度图像以提取所述当前用户在所述场景图像中的人物区域而获得人物区域图像；和将所述人物区域图像与预定二维背景图像融合以得到合并图像。

【技术特征摘要】
1.一种图像处理方法，用于电子装置，其特征在于，所述图像处理方法包括：获取当前用户的场景图像；获取所述当前用户的深度图像；处理所述场景图像和所述深度图像以提取所述当前用户在所述场景图像中的人物区域而获得人物区域图像；和将所述人物区域图像与预定二维背景图像融合以得到合并图像。2.根据权利要求1所述的图像处理方法，其特征在于，所述获取所述当前用户的深度图像的步骤包括：向所述当前用户投射结构光；拍摄经所述当前用户调制的结构光图像；和解调所述结构光图像的各个像素对应的相位信息以得到所述深度图像。3.根据权利要求2所述的图像处理方法，其特征在于，所述解调所述结构光图像的各个像素对应的相位信息以得到所述深度图像的步骤包括：解调所述结构光图像中各个像素对应的相位信息；将所述相位信息转化为深度信息；和根据所述深度信息生成所述深度图像。4.根据权利要求1所述的图像处理方法，其特征在于，所述处理所述场景图像和所述深度图像以提取所述当前用户在所述场景图像中的人物区域而获得人物区域图像的步骤包括：识别所述场景图像中的人脸区域；从所述深度图像中获取与所述人脸区域对应的深度信息；根据所述人脸区域的深度信息确定所述人物区域的深度范围；和根据所述人物区域的深度范围确定与所述人脸区域连接且落入所述深度范围内的人物区域以获得所述人物区域图像。5.根据权利要求4所述的图像处理方法，其特征在于，所述图像处理方法还包括：处理所述场景图像以得到所述场景图像的全场边缘图像；和根据所述全场边缘图像修正所述人物区域图像。6.根据权利要求1所述的图像处理方法，其特征在于，所述预定二维背景图像能够随机选取或由所述当前用户选定。7.一种图像处理装置，用于电子装置，其特征在于，所述图像处理装置包括：可见光摄像头，所述可见光摄像头用于获取当前用户的场景图像；深度图像采集组件，所述深度图像采集组件用于获取所述当前用户的深度图像；和处理器，所述...

【专利技术属性】
技术研发人员：张学勇，
申请(专利权)人：广东欧珀移动通信有限公司，
类型：发明
国别省市：广东,44