用于直播的图像处理方法和装置制造方法及图纸

本公开提供了一种用于直播的图像处理方法。所述方法包括在所述直播的画面中叠加显示包括主播人物的主播图像，接着读取所述直播中由所述主播人物操控的角色的身体状态，其中，所述身体状态包括一个或多个身体部位的状态，然后基于所述角色的身体状态，处理所述主播图像，以使处理后的所述主播图像中所述主播人物与所述角色呈现相同或相似的身体状态。本公开还提供了一种用于直播的图像处理装置。

【技术实现步骤摘要】
用于直播的图像处理方法和装置
本公开涉及一种用于直播的图像处理方法和一种用于直播的图像处理装置。
技术介绍
网络直播越来越受到大众的广泛追捧和欢迎，例如各种游戏直播、教育直播、或者有奖竞猜直播等。目前的直播场景中，通常要么只显示直播内容的画面，要么在显示直播内容的画面的同时叠加显示主播当前的真实画面。而且，由于有些直播的画面(例如，游戏直播)中往往需要大量图像元素渲染场景，从而导致直播的画面中人物角色很小，人物角色的状态细节并不能够清楚的显示。而且，尽管在一些情况下，可以叠加显示主播的当前真实画面，通常也是主播当前录制的真实状态的重现，看得久了之后难免会产生单一乏味的感觉。可见，现有技术中，观看直播视频时，观看者往往无法直观地欣赏到直播的画面中人物角色的一些状态(例如，开心大笑、打哈欠、受伤、爆头、或中毒)等，会使观看者感觉单一无趣。
技术实现思路
本公开的一个方面提供了一种用于直播的图像处理方法，包括在所述直播的画面中叠加显示包括主播人物的主播图像，接着读取所述直播中由所述主播人物操控的角色的身体状态，其中，所述身体状态包括一个或多个身体部位的状态，然后基于所述角色的身体状态，处理所述主播图像，以使处理后的所述主播图像中所述主播人物与所述角色呈现相同或相似的身体状态。可选地，基于所述角色的身体状态，处理所述主播图像，包括获取用于使所述主播人物的第一身体部位与所述角色的第一身体部位呈现相同或相似的状态的图形元素，以及将所述图形元素叠加显示在所述主播图像中所述主播人物的第一身体部位的对应位置。可选地，基于所述角色的身体状态，处理所述主播图像，包括将所述主播图像中所述主播人物的第一身体部位的图像提取出来作为第一子图像，基于所述角色的第一身体部位的状态，处理所述第一子图像以得到第二子图像，以及以所述第二子图像替代所述主播图像中所述主播人物的第一身体部位的图像。可选地，基于所述角色的身体状态，处理所述主播图像包括提取所述主播图像中所述主播人物的至少一部分身体部位的信息，根据所述至少一部分身体部位的信息，构建与所述主播人物对应的数字人物模型，以所述数字人物模型替代所述主播图像中的所述主播人物；以及通过所述数字人物模型模拟所述角色，以使所述数字人物模型与所述角色呈现相同或相似的身体状态。可选地，所述图像处理方法还包括识别所述主播图像中所述主播人物的身体。可选地，所述直播包括直播游戏，所述身体部位包括头部或面部。在所述身体部位包括头部时，所述角色的身体状态包括头部的特定位置有伤痕、头部有穿戴设备、头部的特定位置被击中、和/或头部的特定位置流血。或者在所述身体部位包括面部时，所述角色的身体状态包括眼睛流泪、鼻子喷血、张口大笑、和/或面部呈特定颜色。本公开的另一个方面提供了一种用于直播的图像处理装置，包括显示模块、读取模块、以及处理模块。显示模块用于在所述直播的画面中叠加显示包括主播人物的主播图像。读取模块用于读取所述直播中由所述主播人物操控的角色的身体状态，其中，所述身体状态包括一个或多个身体部位的状态。处理模块用于基于所述角色的身体状态，处理所述主播图像，以使处理后的所述主播图像中所述主播人物与所述角色呈现相同或相似的身体状态。可选地，所述处理模块可以包括获取子模块和叠加子模块。获取子模块用于获取用于使所述主播人物的第一身体部位与所述角色的第一身体部位呈现相同或相似的状态的图形元素。叠加子模块用于将所述图形元素叠加显示在所述主播图像中所述主播人物的第一身体部位的对应位置。可选地，所述处理模块包括第一提取子模块、第一处理子模块、以及第一替代子模块。第一提取子模块用于将所述主播图像中所述主播人物的第一身体部位的图像提取出来作为第一子图像。第一处理子模块用于基于所述角色的第一身体部位的状态，处理所述第一子图像以得到第二子图像。第一替代子模块用于以所述第二子图像替代所述主播图像中所述主播人物的第一身体部位的图像。可选地，所述处理模块可以包括第二提取子模块、构建子模块、第二替代子模块、以及模拟子模块。第二提取子模块用于提取所述主播图像中所述主播人物的至少一部分身体部位的信息。构建子模块用于根据所述至少一部分身体部位的信息，构建与所述主播人物对应的数字人物模型。第二替代子模块用于以所述数字人物模型替代所述主播图像中的所述主播人物。模拟子模块用于通过所述数字人物模型模拟所述角色，以使所述数字人物模型与所述角色呈现相同或相似的身体状态。可选地，所述图像处理装置还包括识别模块，用于识别所述主播图像中所述主播人物的身体。本公开的另一方面提供了一种用于直播的图像处理系统，包括一个或多个存储装置，以及一个或多个处理器。所述存储装置存储有计算机可执行指令。所述处理器执行所述指令以实现如上所述的方法。本公开的另一方面提供了一种计算机可读存储介质，存储有计算机可执行指令，所述指令在被执行时用于实现如上所述的方法。本公开的另一方面提供了一种计算机程序，所述计算机程序包括计算机可执行指令，所述指令在被执行时用于实现如上所述的方法。附图说明为了更完整地理解本公开及其优势，现在将参考结合附图的以下描述，其中：图1示意性示出了根据本公开实施例的用于直播的图像处理方法和装置的应用场景；图2示意性示出了根据本公开实施例的用于直播的图像处理方法的流程图；图3A示意性示出了根据本公开一实施例的处理主播图像的流程图；图3B示意性示出了根据图3A的流程处理主播图像后获得的直播的画面的一个显示效果实例；图4A示意性示出了根据本公开另一实施例的处理主播图像的流程图；图4B示意性示出了根据图4A的流程处理主播图像后获得的直播的画面的一个显示效果实例；图5示意性示出了根据本公开再一实施例的处理主播图像的流程图；图6示意性示出了根据本公开另一实施例的用于直播的图像处理方法的流程图；图7示意性示出了根据本公开实施例的用于直播的图像处理装置的框图；图8A～8C示意性示出了根据本公开各个实施例的处理模块的框图；以及图9示意性示出了根据本公开实施例的适用于直播的图像处理的计算机系统的框图。具体实施方式以下，将参照附图来描述本公开的实施例。但是应该理解，这些描述只是示例性的，而并非要限制本公开的范围。在下面的详细描述中，为便于解释，阐述了许多具体的细节以提供对本公开实施例的全面理解。然而，明显地，一个或多个实施例在没有这些具体细节的情况下也可以被实施。此外，在以下说明中，省略了对公知结构和技术的描述，以避免不必要地混淆本公开的概念。在此使用的术语仅仅是为了描述具体实施例，而并非意在限制本公开。在此使用的术语“包括”、“包含”等表明了所述特征、步骤、操作和/或部件的存在，但是并不排除存在或添加一个或多个其他特征、步骤、操作或部件。在此使用的所有术语(包括技术和科学术语)具有本领域技术人员通常所理解的含义，除非另外定义。应注意，这里使用的术语应解释为具有与本说明书的上下文相一致的含义，而不应以理想化或过于刻板的方式来解释。在使用类似于“A、B和C等中至少一个”这样的表述的情况下，一般来说应该按照本领域技术人员通常理解该表述的含义来予以解释(例如，“具有A、B和C中至少一个的系统”应包括但不限于单独具有A、单独具有B、单独具有C、具有A和B、具有A和C、具有B和C、和/或具有A、B本文档来自技高网...

【技术保护点】
1.一种用于直播的图像处理方法，包括：在所述直播的画面中叠加显示包括主播人物的主播图像；读取所述直播中由所述主播人物操控的角色的身体状态，其中，所述身体状态包括一个或多个身体部位的状态；基于所述角色的身体状态，处理所述主播图像，以使处理后的所述主播图像中所述主播人物与所述角色呈现相同或相似的身体状态。

【技术特征摘要】
1.一种用于直播的图像处理方法，包括：在所述直播的画面中叠加显示包括主播人物的主播图像；读取所述直播中由所述主播人物操控的角色的身体状态，其中，所述身体状态包括一个或多个身体部位的状态；基于所述角色的身体状态，处理所述主播图像，以使处理后的所述主播图像中所述主播人物与所述角色呈现相同或相似的身体状态。2.根据权利要求1所述的图像处理方法，其中，基于所述角色的身体状态，处理所述主播图像，包括：获取用于使所述主播人物的第一身体部位与所述角色的第一身体部位呈现相同或相似的状态的图形元素；以及将所述图形元素叠加显示在所述主播图像中所述主播人物的第一身体部位的对应位置。3.根据权利要求1所述的图像处理方法，其中，基于所述角色的身体状态，处理所述主播图像，包括：将所述主播图像中所述主播人物的第一身体部位的图像提取出来作为第一子图像；基于所述角色的第一身体部位的状态，处理所述第一子图像以得到第二子图像；以及以所述第二子图像替代所述主播图像中所述主播人物的第一身体部位的图像。4.根据权利要求1所述的图像处理方法，其中，基于所述角色的身体状态，处理所述主播图像，包括：提取所述主播图像中所述主播人物的至少一部分身体部位的信息；根据所述至少一部分身体部位的信息，构建与所述主播人物对应的数字人物模型；以所述数字人物模型替代所述主播图像中的所述主播人物；以及通过所述数字人物模型模拟所述角色，以使所述数字人物模型与所述角色呈现相同或相似的身体状态。5.根据权利要求1～4任意一项所述的图像处理方法，还包括：识别所述主播图像中所述主播人物的身体。6.根据权利要求1～4任意一项所述的图像处理方法，其中，所述直播包括直播游戏，所述身体部位包括头部或面部：在所述身体部位包括头部时，所述角色的身体状态包括头部的特定位置有伤痕、头部有...

【专利技术属性】
技术研发人员：尹殿永，焦阳，
申请(专利权)人：联想北京有限公司，
类型：发明
国别省市：北京,11