一种三维动作的风格迁移方法、介质、装置和计算设备制造方法及图纸

本发明专利技术的实施方式提供了一种三维动作的风格迁移方法、装置、介质和计算设备。该方法包括：提取目标动作的目标动作特征和风格动作的风格动作特征，将目标动作特征与风格动作特征进行融合生成目标风格动作，该目标风格动作是具有目标动作风格的目标三维动作。通过将目标三维动作的动作风格从原始动作风格迁移为目标动作风格，本发明专利技术的方法简化了生成不同动作风格的三维动作的过程，缩短了不同动作风格的三维动作的生成时间，降低了不同动作风格的三维动作的生成难度，解决了三维动作数据与虚拟角色的动作风格之间存在的冲突。本发明专利技术的方法通过提高三维动作数据的复用性，还降低了游戏安装包内三维动作数据量以及游戏的部署成本。

【技术实现步骤摘要】
一种三维动作的风格迁移方法、介质、装置和计算设备
本专利技术的实施方式涉及软件
，更具体地，本专利技术的实施方式涉及一种三维动作的风格迁移方法、介质、装置和计算设备。
技术介绍
本部分旨在为权利要求书中陈述的本专利技术的实施方式提供背景或上下文。此处的描述不因为包括在本部分中就承认是现有技术。目前，三维视觉效果广泛应用于娱乐、体育、医疗、军事、机器视觉以及机器人技术等诸多领域。为了使三维视觉效果中虚拟角色的三维动作更加真实自然，需要根据这些虚拟角色的性格、年龄、社会地位、生活状态、所处场景等因素来为这些虚拟角色生成具有不同动作风格的三维动作，例如根据不同虚拟角色各自的动作风格可以将“走路”这个三维动作分别实现为：大汉醉酒后东倒西歪地走、军人抬头挺胸地走、小孩子蹦蹦跳跳地走、老人家拄着拐杖地走、伤员缓慢虚软地走等。三维动作可以量化表达为三维动作数据，三维动作数据包括动作执行者在运动过程中各个关节点的参数。现有的三维动作数据的获取方式主要包括以下几种：第一种技术方案：根据不同动作风格寻找匹配演员，再通过动作捕捉设备(MotionCapture，Mocap)来获取这些匹配演员所表演的动作的三维动作数据。受限于动作捕捉设备的安装使用条件、人力成本、场地成本等诸多原因，这种技术方案耗费时间长，采集成本高。第二种技术方案：将素材库中一个虚拟角色的三维动作数据复用于其他虚拟角色，从而生成其他虚拟角色的三维动作。但不同虚拟角色的动作风格之间存在差异，因此这种技术方案可能会导致复用的三维动作数据与虚拟角色的动作风格之间存在冲突，使得这些虚拟角色的三维动作生硬，用户体验差。第三种技术方案：由动画绑定师(AnimationRigger)根据素材库中一个虚拟角色的动作风格，对该虚拟角色的三维动作数据进行重新绑定和骨架参数调整，再将该虚拟角色的三维动作数据复用于另一虚拟角色，从而生成另一虚拟角色的三维动作。三维动作数据包括虚拟角色各个关节点的参数，这些关节点的数量庞大，且这些关节点之间的配合复杂，因此该技术方案的实现难度大、耗费时间长、成本高，并且仍可能会导致复用的三维动作数据与虚拟角色的动作风格之间存在冲突。综上，现有的获取三维动作数据的技术方案存在耗费时间长，成本高，操作过程繁琐，实现难度大以及三维动作数据与虚拟角色的动作风格之间存在冲突等问题。
技术实现思路
出于目前的获取三维动作数据的技术方案存在耗费时间长，成本高，操作过程繁琐，实现难度大以及三维动作数据与虚拟角色的动作风格之间存在冲突等问题。因此现有的获取三维动作数据的技术方案均不能较好地实现三维动作的风格迁移。为此，非常需要一种改进的获取三维动作数据的技术方案，以实现三维动作的风格迁移。在本上下文中，本专利技术的实施方式期望提供一种三维动作的风格迁移方法、装置、介质和计算设备。在本专利技术实施方式的第一方面中，提供了一种三维动作的风格迁移方法，包括：提取目标动作的目标动作特征，目标动作是具有原始动作风格的目标三维动作；以及提取风格动作的风格动作特征，风格动作是具有目标动作风格的三维动作；将目标动作特征与风格动作特征进行融合生成目标风格动作，目标风格动作是具有目标动作风格的目标三维动作。在本专利技术的一个实施例中，提取动作特征的方法，包括：输入待提取动作，待提取动作包括目标动作和/或风格动作；通过特征提取网络从待提取动作中提取出待提取动作的动作特征，特征提取网络用于提取待提取动作映射到动作场中对应的动作特征，动作场是用于承载和描述三维动作的动作特征的特征空间，待提取动作的动作特征包括目标动作特征和/或风格动作特征。在本专利技术的一个实施例中，将目标动作特征与风格动作特征进行融合生成目标风格动作，包括：通过特征融合网络将目标动作特征与风格动作特征进行融合得到目标风格动作特征，其中，特征融合网络为具有对动作场中的多个动作特征进行融合的功能的网络结构；基于目标风格动作特征生成目标风格动作。在本专利技术的一个实施例中，通过特征融合网络将目标动作特征与风格动作特征进行融合得到目标风格动作特征，包括：根据原始特征相似度将目标动作特征映射到特征融合网络中，原始特征相似度用于指示目标动作特征在目标风格动作特征中所占的权重；以及根据动作风格相似度将风格动作特征映射到特征融合网络中，动作风格相似度用于指示风格动作特征在目标风格动作特征中所占的权重；通过特征融合网络对映射到特征融合网络中的目标动作特征和风格动作特征进行融合得到目标风格动作特征。相应地，在本专利技术的一个实施例中，特征融合网络中目标动作特征的动作特征维度与风格动作特征的动作特征维度一致，动作特征维度是指用于承载动作特征的特征向量的长度。在本专利技术的一个实施例中，基于目标风格动作特征生成目标风格动作，包括：将目标风格动作特征输入动作生成网络，动作生成网络是用于将动作场中的动作特征映射为三维动作的网络结构；将输入的目标风格动作特征通过动作生成网络转换为目标风格动作。在本专利技术的一个实施例中，将目标动作特征与风格动作特征进行融合生成目标风格动作之后，还包括：判断目标风格动作是否存在异常现象，异常现象包括高频抖动和/或关节异常滑动；若目标风格动作存在异常现象，则触发动作生成网络重新生成目标风格动作；或者若目标风格动作不存在异常现象，则输出目标风格动作。在本专利技术的一个实施例中，判断目标风格动作是否存在异常现象，包括：对目标风格动作进行傅里叶变换得到目标风格动作的频域信息；判断目标风格动作的频域信息中是否存在高于第一阈值的部分，其中高于第一阈值的部分对应目标风格动作的高频抖动。在本专利技术的一个实施例中，判断目标风格动作是否存在异常现象，包括：若目标风格动作包括接触地面的动作，则在执行接触地面的动作的时间段内，统计目标风格动作中关节相对于地面的位移，并将关节相对于地面的位移作为关节滑动分量，关节滑动分量用于指示目标风格动作中特定关节与地面之间的滑动关系；判断关节滑动分量是否高于第二阈值。在本专利技术实施方式的第二方面中，提供了一种三维动作的风格迁移装置，包括提取单元和生成单元。提取单元用于提取目标动作的目标动作特征，目标动作是具有原始动作风格的目标三维动作；以及提取风格动作的风格动作特征，风格动作是具有目标动作风格的三维动作。生成单元用于将目标动作特征与风格动作特征进行融合生成目标风格动作，目标风格动作是具有目标动作风格的目标三维动作。在本专利技术的一个实施例中，提取单元还包括特征提取网络，提取单元具体用于：输入待提取动作，待提取动作包括目标动作和/或风格动作；通过特征提取网络从待提取动作中提取出待提取动作的动作特征，特征提取网络是用于提取待提取动作映射到动作场中对应的动作特征的网络结构，动作场是用于承载和描述三维动作的动作特征的特征空间，待提取动作的动作特征包括目标动作特征和/或风格动作特征。在本专利技术的一个实施例中，生成单元还包括特征融合网络，生成单元具体用于：通过特征融合网络将目标动作特征与风格动作特征进行融合得到目标风格动作特征，其中，特征融合网络为具有对动作场中的多个动作特征进行融合的功能的网络结构；基于目标风格动作特征生成目标风格动作。在本专利技术的一个实施例中，生成单元通过特征融合网络将目标动作特征与风格动作特征进行融合得到目标风格动作特征时，具体用于：根据原始本文档来自技高网...

【技术保护点】
1.一种三维动作的风格迁移方法，其特征在于，包括：提取目标动作的目标动作特征，所述目标动作是具有原始动作风格的目标三维动作；以及提取风格动作的风格动作特征，所述风格动作是具有目标动作风格的三维动作；将所述目标动作特征与所述风格动作特征进行融合生成目标风格动作，所述目标风格动作是具有所述目标动作风格的目标三维动作。

【技术特征摘要】
1.一种三维动作的风格迁移方法，其特征在于，包括：提取目标动作的目标动作特征，所述目标动作是具有原始动作风格的目标三维动作；以及提取风格动作的风格动作特征，所述风格动作是具有目标动作风格的三维动作；将所述目标动作特征与所述风格动作特征进行融合生成目标风格动作，所述目标风格动作是具有所述目标动作风格的目标三维动作。2.如权利要求1所述的方法，其特征在于，提取所述动作特征的方法，包括：输入待提取动作，所述待提取动作包括所述目标动作和/或所述风格动作；通过特征提取网络从所述待提取动作中提取出所述待提取动作的动作特征，所述特征提取网络用于提取所述待提取动作映射到动作场中对应的动作特征，所述动作场是用于承载和描述三维动作的动作特征的特征空间，所述待提取动作的动作特征包括所述目标动作特征和/或所述风格动作特征。3.如权利要求1或2所述的方法，其特征在于，所述将所述目标动作特征与所述风格动作特征进行融合生成目标风格动作，包括：通过特征融合网络将所述目标动作特征与所述风格动作特征进行融合得到所述目标风格动作特征，其中，所述特征融合网络为具有对动作场中的多个动作特征进行融合的功能的网络结构；基于所述目标风格动作特征生成所述目标风格动作。4.如权利要求3所述的方法，其特征在于，所述通过特征融合网络将所述目标动作特征与所述风格动作特征进行融合得到所述目标风格动作特征，包括：根据原始特征相似度将所述目标动作特征映射到所述特征融合网络中，所述原始特征相似度用于指示所述目标动作特征在所述目标风格动作特征中所占的权重；以及根据动作风格相似度将所述风格动作特征映射到所述特征融合网络中，所述动作风格相似度用于指示所述风格动作特征在所述目标风格动作特征中所占的权重；通过所述特征融合网络对映射到所述特征融合网络中的所述目标动作特征和所述风格动作特征进行融合得...

【专利技术属性】
技术研发人员：侯杰，李晓燕，丛林，夏侯佐鑫，温翔，沈旭东，
申请(专利权)人：网易杭州网络有限公司，
类型：发明
国别省市：浙江,33