本申请提出一种重定向方法、装置、电子设备和存储介质，方法包括基于目标对象的特定部位图像进行目标对象的特定部位三维重建，得到第一三维模型，并确定与目标对象对应的虚拟身份信息。其中，虚拟身份信息能够体现与目标对象的特定部位对应的虚拟形象的外形轮廓特征。然后从第一三维模型中提取得到动作信息，该动作信息能够体现目标对象的特定部位图像中的目标对象的特定部位的动作特征。通过对虚拟身份信息和动作信息进行融合，得到携带动作信息的虚拟形象，由于虚拟形象所携带的动作信息是基于目标对象的特定部位的动作特征生成的，能够使虚拟形象执行的动作与目标对象的特定部位的动作一致。位的动作一致。位的动作一致。
【技术实现步骤摘要】
重定向方法、装置、电子设备和存储介质
[0001]本申请涉及虚拟形象
，尤其涉及一种重定向方法、装置、电子设备和存储介质。
技术介绍
[0002]虚拟形象在游戏、影视、动漫等产业的应用越来越广泛，虚拟形象的应用能够极大提升人机交互自然度和体验感。通常情况下，人们希望创建的虚拟形象能够执行与真实形象一致的动作，从而实现真实形象与虚拟形象的同步映射。因此，如何使虚拟形象执行与真实形象一致的动作，是本领域技术人员亟待解决的技术问题。
技术实现思路
[0003]基于上述需求，本申请提出一种重定向方法、装置、电子设备和存储介质，该方法能够使虚拟形象执行与真实形象一致的动作，从而实现真实形象与虚拟形象的同步映射。
[0004]本申请提出的技术方案具体如下：一方面，本申请提供了一种重定向方法，包括：基于目标对象的特定部位图像进行目标对象的特定部位三维重建，得到第一三维模型，并确定与所述目标对象对应的虚拟身份信息；所述虚拟身份信息是体现与所述目标对象的特定部位对应的虚拟形象的外形轮廓特征的信息；从所述第一三维模型中提取得到动作信息；所述动作信息是体现所述目标对象的特定部位图像中的目标对象的特定部位的动作特征的信息；通过对所述虚拟身份信息和所述动作信息进行融合，得到携带所述动作信息的虚拟形象。
[0005]作为一种可选的实现方式，以上所述的方法中，确定与所述目标对象对应的虚拟身份信息，包括：根据目标对象的特定部位图像，生成与所述目标对象的特定部位相对应的第二三维模型；所述第二三维模型是与所述目标对象的特定部位相对应的虚拟形象的三维模型；从所述第二三维模型中提取虚拟形象的外形轮廓特征，得到虚拟身份信息。
[0006]作为一种可选的实现方式，以上所述的方法中，从所述第一三维模型中提取得到动作信息，包括：将所述第一三维模型输入预先训练的第一特征提取网络，得到所述第一特征提取网络从所述第一三维模型中提取得到的目标对象的特定部位的动作信息。
[0007]作为一种可选的实现方式，以上所述的方法中，所述第一特征提取网络包括：第一身份编码器、第一动作编码器、第一编码融合器以及第一解码器；所述第一身份编码器，用于从所述第一三维模型中提取得到目标对象的特定部位的外形轮廓特征，并对所述外形轮廓特征进行编码，得到身份信息；所述第一动作编码器，用于从所述第一三维模型中提取得到目标对象的特定部位
的动作特征，并对所述动作特征进行编码，得到动作信息；所述第一编码融合器，用于融合所述身份信息和所述动作信息，得到第一融合信息；所述第一解码器，用于对所述第一融合信息进行解码处理，得到第三三维模型。
[0008]作为一种可选的实现方式，以上所述的方法中，从所述第二三维模型中提取虚拟形象的外形轮廓特征，得到虚拟身份信息，包括：将所述第二三维模型输入预先训练的第二特征提取网络，得到所述第二特征提取网络从所述第二三维模型中提取得到的目标对象的特定部位对应的虚拟形象的外形轮廓特征。
[0009]作为一种可选的实现方式，以上所述的方法中，所述第二特征提取网络包括：第二身份编码器、第二动作编码器、第二编码融合器以及第二解码器；所述第二身份编码器，用于从所述第二三维模型中提取得到目标对象的特定部位对应的虚拟形象的外形轮廓特征，并对所述外形轮廓特征进行编码，得到虚拟身份信息；所述第二动作编码器，用于从所述第二三维模型中提取得到目标对象的特定部位对应的虚拟形象的动作特征，并对所述动作特征进行编码，得到虚拟动作信息；所述第二编码融合器，用于融合所述虚拟身份信息和所述虚拟动作信息，得到第二融合信息；所述第二解码器，用于对所述第二融合信息进行解码处理，得到第四三维模型。
[0010]作为一种可选的实现方式，以上所述的方法中，通过对所述虚拟身份信息和所述动作信息进行融合，得到携带所述动作信息的虚拟形象，包括：对所述虚拟身份信息和所述动作信息进行编码融合，得到融合信息；对所述融合信息进行解码处理，得到携带所述动作信息的虚拟形象。
[0011]作为一种可选的实现方式，以上所述的方法中，通过对所述虚拟身份信息和所述动作信息进行融合，得到携带所述动作信息的虚拟形象，包括：利用所述第二特征提取网络的第二编码融合器对所述虚拟身份信息和所述动作信息进行融合，得到融合信息；利用所述第二特征提取网络的第二解码器对所述融合信息进行解码，得到携带所述动作信息的虚拟形象。
[0012]作为一种可选的实现方式，以上所述的方法中，还包括：将动作信息转换到与虚拟身份信息相同的特征空间。
[0013]作为一种可选的实现方式，以上所述的方法中，从所述第二三维模型中提取虚拟形象的外形轮廓特征，得到虚拟身份信息；从所述第一三维模型中提取得到动作信息；通过对所述虚拟身份信息和所述动作信息进行融合，得到携带所述动作信息的虚拟形象，包括：将第一三维模型和第二三维模型分别输入重定向网络，得到携带所述动作信息的虚拟形象；所述重定向网络包括：第一特征提取网络、第二特征提取网络、特征变换网络、编码融合网络以及解码网络；所述第一特征提取网络，用于从所述第一三维模型中提取得到的目标对象的特定部位的动作信息；
所述第二特征提取网络，用于从所述第二三维模型中提取虚拟形象的外形轮廓特征，得到虚拟身份信息；所述特征变换网络，用于将动作信息转换到与虚拟身份信息相同的特征空间；所述编码融合网络，用于对所述虚拟身份信息和进行转换后的动作信息进行编码融合，得到融合信息；所述解码网络，用于对所述融合信息进行解码处理，得到携带所述动作信息的虚拟形象。
[0014]作为一种可选的实现方式，以上所述的方法中，所述特定部位包括面部，所述动作信息包括面部表情信息。
[0015]另一方面，本申请还提供了一种重定向装置，包括：重建模块，用于基于目标对象的特定部位图像进行目标对象的特定部位三维重建，得到第一三维模型，并确定与所述目标对象对应的虚拟身份信息；所述虚拟身份信息是体现与所述目标对象的特定部位对应的虚拟形象的外形轮廓特征的信息；提取模块，用于从所述第一三维模型中提取得到动作信息；所述动作信息是体现所述目标对象的特定部位图像中的目标对象的特定部位的动作特征的信息；融合模块，用于通过对所述虚拟身份信息和所述动作信息进行融合，得到携带所述动作信息的虚拟形象。
[0016]另一方面，本申请还提供了一种电子设备，包括：存储器和处理器；其中，所述存储器用于存储程序；所述处理器，用于通过运行所述存储器中的程序，实现以上任意一项所述的重定向方法。
[0017]另一方面，本申请还提供了一种存储介质，包括：所述存储介质上存储有计算机程序，所述计算机程序被处理器执行时，实现以上任意一项所述的重定向方法的各个步骤。
[0018]本申请提出的重定向方法，基于目标对象的特定部位图像进行目标对象的特定部位三维重建，得到第一三维模型，并确定与目标对象对应的虚拟身份信息。其中，虚拟身份信息能够体现与目标对象的特定部位对应的虚拟形象的外形轮廓特征。然后从第一三维模型中提取得到动作信息，该动本文档来自技高网...
【技术保护点】
【技术特征摘要】
1.一种重定向方法，其特征在于，包括：基于目标对象的特定部位图像进行目标对象的特定部位三维重建，得到第一三维模型，并确定与所述目标对象对应的虚拟身份信息；所述虚拟身份信息是体现与所述目标对象的特定部位对应的虚拟形象的外形轮廓特征的信息；从所述第一三维模型中提取得到动作信息；所述动作信息是体现所述目标对象的特定部位图像中的目标对象的特定部位的动作特征的信息；通过对所述虚拟身份信息和所述动作信息进行融合，得到携带所述动作信息的虚拟形象。2.根据权利要求1所述的方法，其特征在于，确定与所述目标对象对应的虚拟身份信息，包括：根据目标对象的特定部位图像，生成与所述目标对象的特定部位相对应的第二三维模型；所述第二三维模型是与所述目标对象的特定部位相对应的虚拟形象的三维模型；从所述第二三维模型中提取虚拟形象的外形轮廓特征，得到虚拟身份信息。3.根据权利要求1所述的方法，其特征在于，从所述第一三维模型中提取得到动作信息，包括：将所述第一三维模型输入预先训练的第一特征提取网络，得到所述第一特征提取网络从所述第一三维模型中提取得到的目标对象的特定部位的动作信息。4.根据权利要求3所述的方法，其特征在于，所述第一特征提取网络包括：第一身份编码器、第一动作编码器、第一编码融合器以及第一解码器；所述第一身份编码器，用于从所述第一三维模型中提取得到目标对象的特定部位的外形轮廓特征，并对所述外形轮廓特征进行编码，得到身份信息；所述第一动作编码器，用于从所述第一三维模型中提取得到目标对象的特定部位的动作特征，并对所述动作特征进行编码，得到动作信息；所述第一编码融合器，用于融合所述身份信息和所述动作信息，得到第一融合信息；所述第一解码器，用于对所述第一融合信息进行解码处理，得到第三三维模型。5.根据权利要求2所述的方法，其特征在于，从所述第二三维模型中提取虚拟形象的外形轮廓特征，得到虚拟身份信息，包括：将所述第二三维模型输入预先训练的第二特征提取网络，得到所述第二特征提取网络从所述第二三维模型中提取得到的目标对象的特定部位对应的虚拟形象的外形轮廓特征。6.根据权利要求5所述的方法，其特征在于，所述第二特征提取网络包括：第二身份编码器、第二动作编码器、第二编码融合器以及第二解码器；所述第二身份编码器，用于从所述第二三维模型中提取得到目标对象的特定部位对应的虚拟形象的外形轮廓特征，并对所述外形轮廓特征进行编码，得到虚拟身份信息；所述第二动作编码器，用于从所述第二三维模型中提取得到目标对象的特定部位对应的虚拟形象的动作特征，并对所述动作特征进行编码，得到虚拟动作信息；所述第二编码融合器，用于融合所述虚拟身份信息和所述虚拟动作信息，得到第二融合信息；所述第二解码器，用于对所述第二融合信息进行解码处理，得到第四三维模型。7.根据权利要求1所述的方法，其特征在于，通过对所述虚拟身...
【专利技术属性】
技术研发人员：杨硕，何山，殷兵，刘聪，周良，胡金水，
申请(专利权)人：科大讯飞股份有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。