虚拟对象的控制方法、装置、设备及存储介质制造方法及图纸

本公开实施例提供了一种虚拟对象的控制方法、装置、设备及存储介质，基于原始图像中的目标对象构建虚拟对象；其中，虚拟对象包括多个虚拟部位，且虚拟部位包括至少一个虚拟元件；获取目标对象的面部动作和/或肢体动作；根据面部动作和/或肢体动作控制虚拟对象中的虚拟部位执行相应的动作。本公开实施例提供的虚拟对象的控制方法，基于目标对象的面部动作和/或肢体动作驱动由多个元件构成的虚拟对象的面部及肢体运动，可以提高对虚拟对象控制的灵活性。灵活性。灵活性。

【技术实现步骤摘要】
虚拟对象的控制方法、装置、设备及存储介质


[0001]本公开实施例涉及图像处理
，尤其涉及一种虚拟对象的控制方法、装置、设备及存储介质。

技术介绍

[0002]有目标人物驱动虚拟人物是一种被用户青睐的特效玩法，驱动主要包括面部和肢体的驱动。目前的虚拟对象或者虚拟模型使用高面数还原面部，使用面部算法将面部动作还原至虚拟对象的面部上。常见的肢体驱动通常采用骨骼蒙皮的方式实现。上述方式对于其他风格(如“积木”风格)的虚拟模型的驱动并不适用，因此探索新的驱动技术对新的风格的虚拟对象的驱动显得尤为重要。

技术实现思路

[0003]本公开实施例提供一种虚拟对象的控制方法、装置、设备及存储介质，可以实现对由多个元件构成的虚拟对象面部及肢体的驱动，提高对虚拟对象控制的灵活性。
[0004]第一方面，本公开实施例提供了一种虚拟对象的控制方法，包括：
[0005]基于原始图像中的目标对象构建虚拟对象；其中，所述虚拟对象包括多个虚拟部位，且所述虚拟部位包括至少一个虚拟元件；所述虚拟元件为虚拟三维多面体；
[0006]获取所述目标对象的面部动作和/或肢体动作；
[0007]根据所述面部动作和/或肢体动作控制所述虚拟对象中的虚拟部位执行相应的动作。
[0008]第二方面，本公开实施例还提供了一种虚拟对象的控制装置，包括：
[0009]虚拟对象构建模块，用于基于原始图像中的目标对象构建虚拟对象；其中，所述虚拟对象包括多个虚拟部位，且所述虚拟部位包括至少一个虚拟元件；所述虚拟元件为虚拟三维多面体；
[0010]动作获取模块，用于获取所述目标对象的面部动作和/或肢体动作；
[0011]虚拟对象控制模块，用于根据所述面部动作和/或肢体动作控制所述虚拟对象中的虚拟部位执行相应的动作。
[0012]第三方面，本公开实施例还提供了一种电子设备，所述电子设备包括：
[0013]一个或多个处理器；
[0014]存储装置，用于存储一个或多个程序，
[0015]当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如本公开实施例所述的虚拟对象的控制方法。
[0016]第四方面，本公开实施例还提供了一种包含计算机可执行指令的存储介质，所述计算机可执行指令在由计算机处理器执行时用于执行如本公开实施例所述的虚拟对象的控制方法。
[0017]本公开实施例公开了一种虚拟对象的控制方法、装置、设备及存储介质，基于原始
图像中的目标对象构建虚拟对象；其中，虚拟对象包括多个虚拟部位，且虚拟部位包括至少一个虚拟元件；获取目标对象的面部动作和/或肢体动作；根据面部动作和/或肢体动作控制虚拟对象中的虚拟部位执行相应的动作。本公开实施例提供的虚拟对象的控制方法，基于目标对象的面部动作和/或肢体动作驱动由多个元件构成的虚拟对象的面部及肢体运动，可以提高对虚拟对象控制的灵活性。
附图说明
[0018]结合附图并参考以下具体实施方式，本公开各实施例的上述和其他特征、优点及方面将变得更加明显。贯穿附图中，相同或相似的附图标记表示相同或相似的元素。应当理解附图是示意性的，原件和元素不一定按照比例绘制。
[0019]图1是本公开实施例所提供的一种虚拟对象的控制方法的流程示意图；
[0020]图2是本公开实施例所提供的一种虚拟对象的示例图；
[0021]图3是本公开实施例所提供的一种父子关系的示例图；
[0022]图4是本公开实施例所提供的一种面部关键点的示例图；
[0023]图5是本公开实施例所提供的一种确定眼睛睁开程度的示例图；
[0024]图6是本公开实施例所提供的一种控制虚拟对象的眼睛运动的示例图
[0025]图7是本公开实施例所提供的一种控制虚拟对象的眼睛运动的示例图；
[0026]图8是本公开实施例所提供的一种确定眉毛运动幅度的示例图；
[0027]图9是本公开实施例所提供的一种控制虚拟对象的眉毛运动的示例图；
[0028]图10是本公开实施例所提供的一种控制虚拟嘴巴运动的示例图；
[0029]图11是本公开实施例所提供的一种虚拟对象的头部运动的示例图；
[0030]图12是本公开实施例所提供的一种肢体骨骼点的示例图；
[0031]图13是本公开实施例所提供的一种虚拟对象的手臂运动的示例图；
[0032]图14是本公开实施例所提供的一种虚拟对象的控制装置结构示意图；
[0033]图15是本公开实施例所提供的一种电子设备的结构示意图。
具体实施方式
[0034]下面将参照附图更详细地描述本公开的实施例。虽然附图中显示了本公开的某些实施例，然而应当理解的是，本公开可以通过各种形式来实现，而且不应该被解释为限于这里阐述的实施例，相反提供这些实施例是为了更加透彻和完整地理解本公开。应当理解的是，本公开的附图及实施例仅用于示例性作用，并非用于限制本公开的保护范围。
[0035]应当理解，本公开的方法实施方式中记载的各个步骤可以按照不同的顺序执行，和/或并行执行。此外，方法实施方式可以包括附加的步骤和/或省略执行示出的步骤。本公开的范围在此方面不受限制。
[0036]本文使用的术语“包括”及其变形是开放性包括，即“包括但不限于”。术语“基于”是“至少部分地基于”。术语“一个实施例”表示“至少一个实施例”；术语“另一实施例”表示“至少一个另外的实施例”；术语“一些实施例”表示“至少一些实施例”。其他术语的相关定义将在下文描述中给出。
[0037]需要注意，本公开中提及的“第一”、“第二”等概念仅用于对不同的装置、模块或单
元进行区分，并非用于限定这些装置、模块或单元所执行的功能的顺序或者相互依存关系。
[0038]需要注意，本公开中提及的“一个”、“多个”的修饰是示意性而非限制性的，本领域技术人员应当理解，除非在上下文另有明确指出，否则应该理解为“一个或多个”。
[0039]本公开实施方式中的多个装置之间所交互的消息或者信息的名称仅用于说明性的目的，而并不是用于对这些消息或信息的范围进行限制。
[0040]可以理解的是，在使用本公开各实施例公开的技术方案之前，均应当依据相关法律法规通过恰当的方式对本公开所涉及个人信息的类型、使用范围、使用场景等告知用户并获得用户的授权。
[0041]例如，在响应于接收到用户的主动请求时，向用户发送提示信息，以明确地提示用户，其请求执行的操作将需要获取和使用到用户的个人信息。从而，使得用户可以根据提示信息来自主地选择是否向执行本公开技术方案的操作的电子设备、应用程序、服务器或存储介质等软件或硬件提供个人信息。
[0042]作为一种可选的但非限定性的实现方式，响应于接收到用户的主动请求，向用户发送提示信息的方式例如可以是弹窗的方式，弹窗中可以以文字的方式呈现提示信息。此外，弹窗中还可以承载供用户选择“同意”或者“不同意”向电本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种虚拟对象的控制方法，其特征在于，包括：基于原始图像中的目标对象构建虚拟对象；其中，所述虚拟对象包括多个虚拟部位，且所述虚拟部位包括至少一个虚拟元件；所述虚拟元件为虚拟三维多面体；获取所述目标对象的面部动作和/或肢体动作；根据所述面部动作和/或肢体动作控制所述虚拟对象中的虚拟部位执行相应的动作。2.根据权利要求1所述的方法，其特征在于，根据所述面部动作和/或肢体动作控制所述虚拟对象中的虚拟部位执行相应的动作，包括：对所述虚拟对象进行部位分组，获得多个虚拟部位；构建所述多个虚拟部位间的父子关系；获取所述面部动作和/或肢体动作中的目标部位动作；根据所述目标部位动作及所述父子关系控制对应的虚拟部位执行相应的动作。3.根据权利要求2所述的方法，其特征在于，所述面部动作由多帧面部关键点信息表征；所述肢体动作由多帧肢体骨骼点信息表征；所述虚拟部位包括虚拟眼睛、虚拟嘴巴、虚拟眉毛、虚拟头部及虚拟上肢；所述父子关系为所述虚拟眼睛、虚拟嘴巴、虚拟眉毛中的至少一项为所述虚拟头部的子部位。4.根据权利要求3所述的方法，其特征在于，对所述虚拟对象进行部位分组，获得多个虚拟部位，包括：遍历构成所述虚拟对象的虚拟元件，获取遍历到的虚拟元件的标识信息、索引信息及所属组件信息中至少一项；若遍历到的虚拟元件的标识信息为眼睛，则将遍历到的虚拟元件分组至虚拟眼睛；其中，所述虚拟眼睛包括虚拟左眼和虚拟右眼；若遍历到的虚拟元件的标识信息为眉毛，则将遍历到的虚拟元件分组至虚拟眉毛；其中，所述虚拟眉毛包括虚拟左眉和虚拟右眉；若遍历到的虚拟元件的索引信息为嘴巴，则将遍历到的虚拟元件分组至虚拟嘴巴；若遍历到的虚拟元件的所属组件信息为上体组件，则将遍历到的虚拟元件分组至虚拟头部；其中，所述虚拟头部包括所述虚拟眼睛、虚拟眉毛及虚拟嘴巴。5.根据权利要求3所述的方法，其特征在于，对所述虚拟对象进行部位分组，获得多个虚拟部位，包括：遍历构成所述虚拟对象的虚拟元件，获取遍历到的虚拟元件的顶点位置信息；根据所述顶点位置信息判断遍历到的虚拟元件是否处于设定包围盒内；若所述虚拟元件处于所述设定包围盒内，则将遍历到的虚拟元件分组至虚拟上肢。6.根据权利要求3所述的方法，其特征在于，若所述虚拟部位为虚拟眼睛、虚拟嘴巴、虚拟眉毛，则根据所述目标部位动作及所述父子关系控制对应的虚拟部位执行相应的动作，包括：对于每一帧，根据当前帧的面部关键点确定目标部位的动作幅度；根据头部的姿态信息确定修正系数；基于所述修正系数对所述动作幅度进行修正，获得初始位姿偏移量；基于历史位姿偏移量对所述初始位姿偏移量进行平滑处理，获得目标位姿偏移量；根据所述目标位姿偏移量对虚拟部位的位姿信息进行调整；位姿信息包括平移信息、
旋转信息及缩放信息中的至少一种，缩放信息包括横向缩放子信息和纵向缩放子信息。7.根据权利要求6所述的方法，其特征在于，对于虚拟眼睛，根据当前帧的面部关键点确定目标部位的动作幅度，包括：根据所述面部关键确定眼睛对应的第一参考信息；根据面部关键点中的眼睛关键点确定眼睛睁开信息；根据所述眼睛睁开信息和所述第一参考信息确定眼睛睁开幅度。8.根据权利要求7所述的方法，其特征在于，根据所述目标位姿偏移量对虚拟部位的位姿信息进行调整，包括：判断所述眼睛睁开幅度是否超过第一设定阈值；若所述眼睛睁开幅度未超过第一设定阈值，则根据所述目标位姿偏移量对虚拟眼睛的纵向缩放子信息进行调整；若所述眼睛睁开幅度超过第一设定阈值，则根据所述目标位姿偏移量对虚拟眼睛的纵向...

【专利技术属性】
技术研发人员：廖昀昊，
申请(专利权)人：北京字跳网络技术有限公司，
类型：发明
国别省市：