图像处理方法和装置制造方法及图纸

本发明专利技术涉及图像处理方法和装置，其中，方法包括：获取当前用户所在场景的组件元素，根据预设的图像参数对组件元素进行处理生成虚拟背景图像；若检测到虚拟背景图像的亮度低于场景亮度，则模拟开灯声音，同时根据两者的亮度差值在虚拟背景图像中添加虚拟光源，使虚拟背景图像的亮度与场景亮度匹配；获取当前用户的场景图像和深度图像；获得人物区域图像并与虚拟背景图像融合以得到合并图像。由此，根据虚拟背景和场景亮度的差值对虚拟背景图像进行补光，避免了场景亮度相比于虚拟背景图像亮度差距过大，使人物区域图像与虚拟背景图像融合较为自然，提高了图像处理的视觉效果，且在补光时模拟开灯声音，增加了补光的真实感，实现了和用户的交互。

Image processing methods and devices

【技术实现步骤摘要】
图像处理方法和装置
本专利技术涉及图像处理
，尤其涉及一种图像处理方法和装置。
技术介绍
随着互联网技术的发展，越来越多的通信功能得到开发并应用，其中，视频通信功能由于可以实现，异地用户的可视化沟通而得到广泛应用。然而，相关技术中，在用户进行视频聊天时，为了保护用户的隐私，将用户所在的场景信息使用虚拟背景进行屏蔽，然而，在实际应用中，真实场景信息中的亮度通常与虚拟背景的亮度差距较大，导致人物区域图像与虚拟背景图像融合较为突兀，视觉效果不好。
技术实现思路
本专利技术提供一种图像处理方法和装置，以解决现有技术中，场景亮度相比于虚拟背景图像亮度差距过大，使得人物区域图像与虚拟背景图像融合较为突兀的技术问题。本专利技术实施例提供一种图像处理方法，用于电子装置，所述图像处理方法包括：获取当前用户所在场景的组件元素，根据预设的图像处理方式对所述组件元素进行处理生成虚拟背景图像；检测当前的场景亮度，若检测到所述虚拟背景图像的亮度低于所述场景亮度，则模拟开灯声音，同时根据两者的亮度差值在所述虚拟背景图像中添加虚拟光源，使所述虚拟背景图像的亮度与所述场景亮度匹配；获取当前用户的场景图像；获取所述当前用户的深度图像；处理所述场景图像和所述深度图像以提取所述当前用户在所述场景图像中的人物区域而获得人物区域图像；将所述人物区域图像与所述虚拟背景图像融合以得到合并图像。本专利技术另一实施例提供一种图像处理装置，用于电子装置，包括：可见光摄像头，用于获取当前用户所在场景的组件元素，根据预设的图像处理方式对所述组件元素进行处理生成虚拟背景图像；检测当前的场景亮度，若检测到所述虚拟背景图像的亮度低于所述场景亮度，则模拟开灯声音，同时根据两者的亮度差值在所述虚拟背景图像中添加虚拟光源，使所述虚拟背景图像的亮度与所述场景亮度匹配；获取当前用户的场景图像；深度图像采集组件，用于获取所述当前用户的深度图像；处理器，用于处理所述场景图像和所述深度图像以提取所述当前用户在所述场景图像中的人物区域而获得人物区域图像；将所述人物区域图像与所述虚拟背景图像融合以得到合并图像。本专利技术又一实施例提供一种电子装置，包括：一个或多个处理器；存储器；和一个或多个程序，其中所述一个或多个程序被存储在所述存储器中，并且被配置成由所述一个或多个处理器执行，所述程序包括用于执行上述实施例所述的图像处理方法。本专利技术还一实施例提供一种计算机可读存储介质，包括与能够摄像的电子装置结合使用的计算机程序，所述计算机程序可被处理器执行以完成上述实施例所述的图像处理方法。本专利技术实施例提供的技术方案可以包括以下有益效果：获取当前用户所在场景的组件元素，根据预设的图像处理方式对组件元素进行处理生成虚拟背景图像，检测当前的场景亮度，若检测到虚拟背景图像的亮度低于场景亮度，则模拟开灯声音，同时根据两者的亮度差值在虚拟背景图像中添加虚拟光源，使虚拟背景图像的亮度与场景亮度匹配，获取当前用户的场景图像，获取当前用户的深度图像，处理场景图像和深度图像以提取当前用户在场景图像中的人物区域而获得人物区域图像，将人物区域图像与虚拟背景图像融合以得到合并图像。由此，根据虚拟背景和场景亮度的差值对虚拟背景图像进行补光，避免了场景亮度相比于虚拟背景图像亮度差距过大，使人物区域图像与虚拟背景图像融合较为自然，提高了图像处理的视觉效果，且在补光时模拟开灯声音，增加了补光的真实感，实现了和用户的交互。本专利技术附加的方面和优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本专利技术的实践了解到。附图说明本专利技术上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解，其中：图1是本专利技术某些实施方式的图像处理方法的流程示意图；图2是本专利技术某些实施方式的图像处理方法的流程示意图；图3是本专利技术某些实施方式的图像处理方法的流程示意图；图4是本专利技术某些实施方式的图像处理装置的模块示意图；图5是本专利技术某些实施方式的电子装置的结构示意图；图6是本专利技术某些实施方式的图像处理方法的流程示意图；图7是本专利技术某些实施方式的图像处理方法的流程示意图；图8(a)至图8(e)是根据本专利技术一个实施例的结构光测量的场景示意图；图9(a)和图9(b)根据本专利技术一个实施例的结构光测量的场景示意图；图10是本专利技术某些实施方式的图像处理方法的流程示意图；图11是本专利技术某些实施方式的图像处理方法的流程示意图；图12是本专利技术某些实施方式的电子装置的模块示意图；以及图13是本专利技术某些实施方式的电子装置的模块示意图。具体实施方式下面详细描述本专利技术的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，旨在用于解释本专利技术，而不能理解为对本专利技术的限制。下面参考附图描述本专利技术实施例的图像处理方法和装置。图1是本专利技术某些实施方式的图像处理方法的流程示意图。如图1所示，该方法包括：步骤101，获取当前用户所在场景的组件元素，根据预设的图像处理方式对组件元素进行处理生成虚拟背景图像。其中，场景的组件元素包括用户所在真实场景的物品、环境信息等，比如对于一个会议室场景，其对应的组件元素包括会议室的桌椅、办公用品、窗户、窗外的风景等。另外，上述预设的图像处理方式是预先设置的根据用户所在场景中的组件元素，将场景转换为虚拟背景图像的一种转换方式，该转换方式根据具体应用场景的不同而不同，作为一种可能的实现方式，预先设置并保存与每一种场景中的组件元素对应的虚拟图像，该虚拟图像可以为动漫形式，也可以为3D模型形式，从而，在获取当前用户所在场景的组件元素后，查询上述对应关系，获取对应的虚拟图像，并根据虚拟图像生成虚拟背景图像。具体而言，在本专利技术的实施例中，获取当前用户所在场景的组件元素，根据预设的图像参数对组件元素进行处理生成虚拟背景图像。其中，基于以上分析，虚拟背景图像可以是二维虚拟背景图像，或者，三维虚拟背景图像等，其中，如果三维背景图像可以是根据用户所处的真实场景信息建模得到的，在此不作限制，其中，为了进一步提升用户的视频体验，可以按照预设模式随机或者根据当前用户的偏好特征确定虚拟背景图像，比如，该为偏好动漫的用户设置动漫虚拟背景图像，为偏好山水的用户设置山水画虚拟背景图像等，其中，虚拟背景图像可以是二维虚拟背景图像，或者，三维虚拟背景图像，在此不作限制。步骤102，检测当前的场景亮度，若检测到虚拟背景图像的亮度低于场景亮度，则模拟开灯声音，同时根据两者的亮度差值在虚拟背景图像中添加虚拟光源，使虚拟背景图像的亮度与场景亮度匹配。需要说明的是，根据应用场景的不同，可采用不同的方式检测当前的场景亮度，比如，可以通过亮度传感器检测当前的场景亮度，同样的，根据应用场景的不同，可采用不同的方式获取预设的虚拟背景图像的亮度，比如，可以通过图像处理技术，提取虚拟背景的图像亮度参数，通过图像亮度参数计算出虚拟背景图像的亮度，又比如，可以将预设的虚拟背景图像输入相关测量模型，根据模型的输出确定虚拟背景图像的亮度等。可以理解的是，在实际应用中，预设的图像处理方式，可能仅仅基于场景中的组件元素进行转换得到虚拟背景图像，当预设的虚拟背景图像的亮度与场景亮度差异较大时，当前用户的面本文档来自技高网...

【技术保护点】
一种图像处理方法，用于电子装置，其特征在于，所述图像处理方法包括：获取当前用户所在场景的组件元素，根据预设的图像处理方式对所述组件元素进行处理生成虚拟背景图像；检测当前的场景亮度，若检测到所述虚拟背景图像的亮度低于所述场景亮度，则模拟开灯声音，同时根据两者的亮度差值在所述虚拟背景图像中添加虚拟光源，使所述虚拟背景图像的亮度与所述场景亮度匹配；获取当前用户的场景图像；获取所述当前用户的深度图像；处理所述场景图像和所述深度图像以提取所述当前用户在所述场景图像中的人物区域而获得人物区域图像；将所述人物区域图像与所述虚拟背景图像融合以得到合并图像。

【技术特征摘要】
1.一种图像处理方法，用于电子装置，其特征在于，所述图像处理方法包括：获取当前用户所在场景的组件元素，根据预设的图像处理方式对所述组件元素进行处理生成虚拟背景图像；检测当前的场景亮度，若检测到所述虚拟背景图像的亮度低于所述场景亮度，则模拟开灯声音，同时根据两者的亮度差值在所述虚拟背景图像中添加虚拟光源，使所述虚拟背景图像的亮度与所述场景亮度匹配；获取当前用户的场景图像；获取所述当前用户的深度图像；处理所述场景图像和所述深度图像以提取所述当前用户在所述场景图像中的人物区域而获得人物区域图像；将所述人物区域图像与所述虚拟背景图像融合以得到合并图像。2.根据权利要求1所述的方法，其特征在于，所述根据两者的亮度差值在所述虚拟背景图像中添加虚拟光源，包括：查询与预设的虚拟光源对应的补光信息，获取与所述亮度差值匹配的光源补偿强度和投射方向；根据所述光源补偿强度和投射方向在所述虚拟背景图像中添加对应的虚拟光源。3.根据权利要求1所述的方法，其特征在于，所述根据两者的亮度差值在所述虚拟背景图像中添加虚拟光源，包括：在所述虚拟背景图像中设置一种或者多种类型的虚拟光源；根据各类型虚拟光源的位置查询预设的补光调整信息，获取与所述亮度差值对应的目标工作状态数据；根据所述目标工作状态数据调整对应位置虚拟光源的工作参数。4.根据权利要求3所述的方法，其特征在于，所述虚拟光源的类型，包括：面光源、射灯、球灯、太阳光中的一种或者多种组合；所述虚拟光源的工作参数，包括：俯仰角、高度、亮度、颜色、强度中的一种或者多种组合。5.根据权利要求1所述的方法，其特征在于，还包括：按照预设模式随机或者根据当前用户的偏好特征确定所述虚拟背景图像。6.根据权利要求5所述的方法，其特征在于，所述虚拟背景图像的图像类型包括：二维虚拟背景图像，或者，三维虚拟背景图像。7.根据权利要求1所述的方法，其特征在于，所述获取所述当前用户的深度图像，包括：向所述当前用户投射结构光；拍摄经所述当前用户调制的结构光图像；和解调所述结构光图像的各个像素对应的相位信息以得到所述深度图像。8.根据权利要求7所述的方法，其特征在于，所述解调所述结构光图像的各个像素对应的相位信息以得到所述深度图像，包括：解调所述结构光图像中各个像素对应的相位信息；将所述相位信息转化为深度信息；和根据所述深度信息生成所述深度图...

【专利技术属性】
技术研发人员：张学勇，
申请(专利权)人：广东欧珀移动通信有限公司，
类型：发明
国别省市：广东,44