图像处理方法和装置制造方法及图纸

本发明专利技术涉及图像处理方法和装置，其中，方法包括：检测当前的场景亮度，若检测到预设的虚拟背景图像的亮度低于场景亮度，则根据两者的亮度差值在虚拟背景图像中添加虚拟光源，使虚拟背景图像的亮度与场景亮度匹配；获取当前用户的场景图像；获取当前用户的深度图像；处理场景图像和深度图像以提取当前用户在场景图像中的人物区域而获得人物区域图像；将人物区域图像与虚拟背景图像融合以得到合并图像。由此，根据虚拟背景和场景亮度的差值对虚拟背景图像进行补光，避免了场景亮度相比于虚拟背景图像亮度差距过大，使得人物区域图像与虚拟背景图像融合较为自然，提高了图像处理的视觉效果。

Image processing methods and devices

The invention relates to an image processing method and device, wherein, methods: to detect the current scene brightness, to detect if the brightness of the background image is lower than the preset virtual scene brightness according to the brightness difference between two add virtual light in virtual background image, the virtual background image brightness, and brightness of the scene; scene image acquisition the current user of the depth of the current user; image processing; scene image and depth image to extract the current user in the scene in the image area and character image characters; characters image and virtual image fusion to get the image with the background. Thus, according to the difference between the background and the virtual scene brightness of light on the virtual background image, avoiding the scene brightness compared to the virtual background image brightness difference is too big, the character image region with virtual background image fusion is more natural, improves the visual effect of image processing.

【技术实现步骤摘要】
图像处理方法和装置
本专利技术涉及图像处理
，尤其涉及一种图像处理方法和装置。
技术介绍
随着互联网技术的发展，越来越多的通信功能得到开发并应用，其中，视频通信功能由于可以实现，异地用户的可视化沟通而得到广泛应用。然而，相关技术中，在用户进行视频聊天时，为了保护用户的隐私，将用户所在的场景信息使用虚拟背景进行屏蔽，然而，在实际应用中，真实场景信息中的亮度通常与虚拟背景的亮度差距较大，导致人物区域图像与虚拟背景图像融合较为突兀，视觉效果不好。
技术实现思路
本专利技术提供一种图像处理方法和装置，以解决现有技术中，场景亮度相比于虚拟背景图像亮度差距过大，使得人物区域图像与虚拟背景图像融合较为突兀的技术问题。本专利技术实施例提供一种图像处理方法，用于电子装置，所述图像处理方法包括：检测当前的场景亮度，若检测到预设的虚拟背景图像的亮度低于所述场景亮度，则根据两者的亮度差值在所述虚拟背景图像中添加虚拟光源，使所述虚拟背景图像的亮度与所述场景亮度匹配；获取当前用户的场景图像；获取所述当前用户的深度图像；处理所述场景图像和所述深度图像以提取所述当前用户在所述场景图像中的人物区域而获得人物区域图像；将所述人物区域图像与所述虚拟背景图像融合以得到合并图像。本专利技术另一实施例提供一种图像处理装置，用于电子装置，包括：可见光摄像头，用于检测当前的场景亮度，若检测到预设的虚拟背景图像的亮度低于所述场景亮度，则根据两者的亮度差值在所述虚拟背景图像中添加虚拟光源，使所述虚拟背景图像的亮度与所述场景亮度匹配；获取当前用户的场景图像；深度图像采集组件，用于获取所述当前用户的深度图像；处理器，用于处理所述场景图像和所述深度图像以提取所述当前用户在所述场景图像中的人物区域而获得人物区域图像；将所述人物区域图像与所述虚拟背景图像融合以得到合并图像。本专利技术又一实施例提供一种电子装置，包括：一个或多个处理器；存储器；和一个或多个程序，其中所述一个或多个程序被存储在所述存储器中，并且被配置成由所述一个或多个处理器执行，所述程序包括用于执行上述实施例所述的图像处理方法。本专利技术还一实施例提供一种计算机可读存储介质，包括与能够摄像的电子装置结合使用的计算机程序，所述计算机程序可被处理器执行以完成上述实施例所述的图像处理方法。本专利技术实施例提供的技术方案可以包括以下有益效果：检测当前的场景亮度，若检测到预设的虚拟背景图像的亮度低于场景亮度，则根据两者的亮度差值在虚拟背景图像中添加虚拟光源，使虚拟背景图像的亮度与场景亮度匹配，获取当前用户的场景图像，获取当前用户的深度图像，处理场景图像和深度图像以提取当前用户在场景图像中的人物区域而获得人物区域图像，将人物区域图像与虚拟背景图像融合以得到合并图像。由此，根据虚拟背景和场景亮度的差值对虚拟背景图像进行补光，避免了场景亮度相比于虚拟背景图像亮度差距过大，使得人物区域图像与虚拟背景图像融合较为自然，提高了图像处理的视觉效果。本专利技术附加的方面和优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本专利技术的实践了解到。附图说明本专利技术上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解，其中：图1是本专利技术某些实施方式的图像处理方法的流程示意图；图2是本专利技术某些实施方式的图像处理方法的流程示意图；图3是本专利技术某些实施方式的图像处理方法的流程示意图；图4是本专利技术某些实施方式的图像处理装置的模块示意图；图5是本专利技术某些实施方式的电子装置的结构示意图；图6是本专利技术某些实施方式的图像处理方法的流程示意图；图7是本专利技术某些实施方式的图像处理方法的流程示意图；图8(a)至图8(e)是根据本专利技术一个实施例的结构光测量的场景示意图；图9(a)和图9(b)根据本专利技术一个实施例的结构光测量的场景示意图；图10是本专利技术某些实施方式的图像处理方法的流程示意图；图11是本专利技术某些实施方式的图像处理方法的流程示意图；图12是本专利技术某些实施方式的电子装置的模块示意图；以及图13是本专利技术某些实施方式的电子装置的模块示意图。具体实施方式下面详细描述本专利技术的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，旨在用于解释本专利技术，而不能理解为对本专利技术的限制。下面参考附图描述本专利技术实施例的图像处理方法和装置。图1是本专利技术某些实施方式的图像处理方法的流程示意图。如图1所示，该方法包括：步骤101，检测当前的场景亮度，若检测到预设的虚拟背景图像的亮度低于场景亮度，则根据两者的亮度差值在虚拟背景图像中添加虚拟光源，使虚拟背景图像的亮度与场景亮度匹配。其中，虚拟背景图像可以是二维虚拟背景图像，或者，三维虚拟背景图像等，其中，如果三维背景图像可以是根据用户所处的真实场景信息建模得到的，在此不作限制，其中，为了进一步提升用户的视频体验，可以按照预设模式随机或者根据当前用户的偏好特征确定虚拟背景图像，比如，该为偏好动漫的用户设置动漫虚拟背景图像，为偏好山水的用户设置山水画虚拟背景图像等，其中，虚拟背景图像可以是二维虚拟背景图像，或者，三维虚拟背景图像，在此不作限制。另外，上述虚拟光源的类型，包括：面光源、射灯、球灯、太阳光中的一种或者多种组合，虚拟光源的工作参数，包括：俯仰角、高度、亮度、颜色、强度中的一种或者多种组合。需要说明的是，根据应用场景的不同，可采用不同的方式检测当前的场景亮度，比如，可以通过亮度传感器检测当前的场景亮度，同样的，根据应用场景的不同，可采用不同的方式获取预设的虚拟背景图像的亮度，比如，可以通过图像处理技术，提取虚拟背景的图像亮度参数，通过图像亮度参数计算出虚拟背景图像的亮度，又比如，可以将预设的虚拟背景图像输入相关测量模型，根据模型的输出确定虚拟背景图像的亮度等。可以理解的是，在实际应用中，当预设的虚拟背景图像的亮度与场景亮度差异较大时，当前用户的面部区域等亮度表征与预设的虚拟背景图像差异较大，此时，为了便于后续使得用户的面部区域等与预设的虚拟背景图像融合较为自然，可以对虚拟背景图像添加虚拟光源进行亮度提升处理。具体而言，作为一种可能的实现方式，检测当前的场景亮度，若检测到预设的虚拟背景图像的亮度低于场景亮度，则根据两者的亮度差值在虚拟背景图像中添加虚拟光源，使虚拟背景图像的亮度与场景亮度匹配。需要说明的是，根据具体应用场景的不同，可采用不同的方式实现根据两者的亮度差值在虚拟背景图像中添加虚拟光源，举例说明如下：作为一种可能的实现方式，参照图2，上述步骤101包括：步骤201，查询与预设的虚拟光源对应的补光信息，获取与亮度差值匹配的光源补偿强度和投射方向。步骤202，根据光源补偿强度和投射方向在虚拟背景图像中添加对应的虚拟光源。可以理解，在本示例中，预先针对每个虚拟光源设置包含与每个亮度差值匹配的光源补偿强度和投射方向的补光信息，举例而言，当虚拟光源为面光源和射灯时，其补光信息中的对应关系如下表1所示：表1进而，在获取上述亮度差值后，查询与预设的虚拟光源对应的补光信息，获取与亮度差值匹配的光源补偿强度和投射方向，进而，根据光源补偿强度和投射方向在虚拟背景图像中添加对应的虚拟光源，从而，使得虚拟背景图像的亮度和本文档来自技高网...

【技术保护点】
一种图像处理方法，用于电子装置，其特征在于，所述图像处理方法包括：检测当前的场景亮度，若检测到预设的虚拟背景图像的亮度低于所述场景亮度，则根据两者的亮度差值在所述虚拟背景图像中添加虚拟光源，使所述虚拟背景图像的亮度与所述场景亮度匹配；获取当前用户的场景图像；获取所述当前用户的深度图像；处理所述场景图像和所述深度图像以提取所述当前用户在所述场景图像中的人物区域而获得人物区域图像；将所述人物区域图像与所述虚拟背景图像融合以得到合并图像。

【技术特征摘要】
1.一种图像处理方法，用于电子装置，其特征在于，所述图像处理方法包括：检测当前的场景亮度，若检测到预设的虚拟背景图像的亮度低于所述场景亮度，则根据两者的亮度差值在所述虚拟背景图像中添加虚拟光源，使所述虚拟背景图像的亮度与所述场景亮度匹配；获取当前用户的场景图像；获取所述当前用户的深度图像；处理所述场景图像和所述深度图像以提取所述当前用户在所述场景图像中的人物区域而获得人物区域图像；将所述人物区域图像与所述虚拟背景图像融合以得到合并图像。2.根据权利要求1所述的方法，其特征在于，所述根据两者的亮度差值在所述虚拟背景图像中添加虚拟光源，包括：查询与预设的虚拟光源对应的补光信息，获取与所述亮度差值匹配的光源补偿强度和投射方向；根据所述光源补偿强度和投射方向在所述虚拟背景图像中添加对应的虚拟光源。3.根据权利要求1所述的方法，其特征在于，所述根据两者的亮度差值在所述虚拟背景图像中添加虚拟光源，包括：在所述虚拟背景图像中设置一种或者多种类型的虚拟光源；根据各类型虚拟光源的位置查询预设的补光调整信息，获取与所述亮度差值对应的目标工作状态数据；根据所述目标工作状态数据调整对应位置虚拟光源的工作参数。4.根据权利要求3所述的方法，其特征在于，所述虚拟光源的类型，包括：面光源、射灯、球灯、太阳光中的一种或者多种组合；所述虚拟光源的工作参数，包括：俯仰角、高度、亮度、颜色、强度中的一种或者多种组合。5.根据权利要求1所述的方法，其特征在于，还包括：按照预设模式随机或者根据当前用户的偏好特征确定所述虚拟背景图像。6.根据权利要求5所述的方法，其特征在于，所述虚拟背景图像的图像类型包括：二维虚拟背景图像，或者，三维虚拟背景图像。7.根据权利要求1所述的方法，其特征在于，所述获取所述当前用户的深度图像，包括：向所述当前用户投射结构光；拍摄经所述当前用户调制的结构光图像；和解调所述结构光图像的各个像素对应的相位信息以得到所述深度图像。8.根据权利要求7所述的方法，其特征在于，所述解调所述结构光图像的各个像素对应的相位信息以得到所述深度图像，包括：解调所述结构光图像中各个像素对应的相位信息；将所述相位信息转化为深度信息；和根据所述深度信息生成所述深度图...

【专利技术属性】
技术研发人员：张学勇，
申请(专利权)人：广东欧珀移动通信有限公司，
类型：发明
国别省市：广东,44