虚拟对象的骨骼绑定迁移方法、装置、设备及存储介质制造方法及图纸

本公开提供了一种虚拟对象的骨骼绑定迁移方法、装置、设备及存储介质，涉及计算机视觉技术领域，尤其涉及虚拟数字人、增强现实、虚拟现实、混合现实、扩展现实、元宇宙等技术领域。具体实现方案为：根据第一虚拟对象在初始姿势下的第一骨骼初始位置，确定第二虚拟对象在所述初始姿势下的第二骨骼初始位置；根据所述第一骨骼初始位置和所述第二骨骼初始位置，将所述第一虚拟对象在目标姿势下的骨骼绑定信息迁移至所述第二虚拟对象，得到所述第二虚拟对象在所述目标姿势下的骨骼绑定信息；其中，所述第一虚拟对象和所述第二虚拟对象具有相同的网格拓扑结构。能够低成本且高效的完成虚拟对象的骨骼绑定迁移，为虚拟对象的骨骼绑定迁移提供了一种新的解决方案。移提供了一种新的解决方案。移提供了一种新的解决方案。

【技术实现步骤摘要】
虚拟对象的骨骼绑定迁移方法、装置、设备及存储介质


[0001]本公开涉及计算机视觉
，尤其涉及虚拟数字人、增强现实、虚拟现实、混合现实、扩展现实、元宇宙等
，具体涉及一种虚拟对象的骨骼绑定迁移方法、装置、设备及存储介质。

技术介绍

[0002]随着人工智能技术的不断发展，计算机视觉技术应运而生。可以通过计算机视觉中的增强现实技术，基于虚拟对象(如虚拟数字人)绑定的骨骼蒙皮信息对虚拟对象进行驱动，来模拟真实姿势等，增加了用户的使用乐趣。然而，如何低成本且高效的完成对虚拟对象骨骼绑定迁移，对精准驱动虚拟对象而言至关重要。

技术实现思路

[0003]本公开提供了一种虚拟对象的骨骼绑定迁移方法、装置、设备及存储介质。
[0004]根据本公开的一方面，提供了一种虚拟对象的骨骼绑定迁移方法，包括：
[0005]根据第一虚拟对象在初始姿势下的第一骨骼初始位置，确定第二虚拟对象在所述初始姿势下的第二骨骼初始位置；
[0006]根据所述第一骨骼初始位置和所述第二骨骼初始位置，将所述第一虚拟对象在目标姿势下的骨骼绑定信息迁移至所述第二虚拟对象，得到所述第二虚拟对象在所述目标姿势下的骨骼绑定信息；
[0007]其中，所述第一虚拟对象和所述第二虚拟对象具有相同的网格拓扑结构。
[0008]根据本公开的另一方面，提供了一种电子设备，该电子设备包括：
[0009]至少一个处理器；以及
[0010]与至少一个处理器通信连接的存储器；其中，
[0011]存储器存储有可被至少一个处理器执行的指令，指令被至少一个处理器执行，以使至少一个处理器能够执行本公开任一实施例的虚拟对象的骨骼绑定迁移方法。
[0012]根据本公开的另一方面，提供了一种存储有计算机指令的非瞬时计算机可读存储介质，其中，计算机指令用于使计算机执行本公开任一实施例的虚拟对象的骨骼绑定迁移方法。
[0013]本方案能够低成本且高效率的完成虚拟对象的骨骼绑定迁移，为虚拟对象的骨骼绑定迁移提供了一种新的解决方案。
[0014]应当理解，本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征，也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。
附图说明
[0015]附图用于更好地理解本方案，不构成对本公开的限定。其中：
[0016]图1A是根据本公开实施例提供的一种虚拟对象的骨骼绑定迁移方法的流程图；
[0017]图1B是本公开实施例提供的骨骼重定位效果图；
[0018]图1C是本公开实施例提供的骨骼绑定迁移效果图；
[0019]图2是根据本公开实施例提供的一种虚拟对象的骨骼绑定迁移方法的流程图；
[0020]图3是根据本公开实施例提供的一种虚拟对象的骨骼绑定迁移方法的流程图；
[0021]图4是根据本公开实施例提供的一种虚拟对象的骨骼绑定迁移方法的流程图；
[0022]图5A是根据本公开实施例提供的一种虚拟对象的骨骼绑定迁移方法的流程图；
[0023]图5B是根据本公开实施例提供的一种虚拟对象的骨骼绑定迁移方法的原理框图；
[0024]图6是根据本公开实施例提供的一种虚拟对象的骨骼绑定迁移方法的流程图；
[0025]图7是根据本公开实施例提供的一种虚拟对象的骨骼绑定迁移装置的结构示意图；
[0026]图8是用来实现本公开实施例的虚拟对象的骨骼绑定迁移方法的电子设备的框图。
具体实施方式
[0027]以下结合附图对本公开的示范性实施例做出说明，其中包括本公开实施例的各种细节以助于理解，应当将它们认为仅仅是示范性的。因此，本领域普通技术人员应当认识到，可以对这里描述的实施例做出各种改变和修改，而不会背离本公开的范围和精神。同样，为了清楚和简明，以下的描述中省略了对公知功能和结构的描述。
[0028]图1A是根据本公开实施例提供的一种虚拟对象的骨骼绑定迁移方法的流程图，图1B是本公开实施例提供的骨骼重定位效果图；图1C是本公开实施例提供的骨骼绑定迁移效果图。本公开实施例适用于在第一虚拟对象和第二虚拟对象的网格拓扑结果相同的情况下，将第一虚拟对象携带的骨骼绑定信息迁移到第二虚拟对象的情况。该方法可以由虚拟对象的骨骼绑定迁移装置来执行，该装置可以采用软件和/或硬件的方式实现。具体可以集成于具有虚拟对象的骨骼绑定迁移功能的电子设备中。如图1A
‑
1C所示，本方案包括如下步骤：
[0029]S101，根据第一虚拟对象在初始姿势下的第一骨骼初始位置，确定第二虚拟对象在初始姿势下的第二骨骼初始位置。
[0030]其中，虚拟对象即为活动在三维虚拟空间中的对象，比如，三维虚拟数字人。本实施例的虚拟对象优选为三维虚拟人物的面部。进一步的，虚拟对象可以通过三维网格模型来表征。
[0031]本实施例中的第一虚拟对象和第二虚拟对象是类型相同的两个虚拟对象，例如，两者都是三维虚拟人物的面部。除此之外，还需要第一虚拟对象和第二虚拟对象具有相同的网格拓扑结构，其中，具有相同的网格拓扑结构是指构成第一虚拟对象和第二虚拟对象的三维网格模型的网格数量和布线方式相同。虽然第一虚拟对象和第二虚拟对象的网格拓扑结构相同，但是第一虚拟对象携带有骨骼绑定信息，第二虚拟对象未携带骨骼绑定信息。本实施例的目的就是将第一虚拟对象所携带的骨骼绑定信息，迁移到第二虚拟对象中，以使第二虚拟对象也携带骨骼绑定信息。需要说明的是，虚拟对象的三维网格模型中的网格面可以看作蒙在虚拟对象表面的皮肤，即蒙皮。其与虚拟对象的骨骼点(即对象骨骼点)是独立的，为了实现驱动虚拟对象展示不同的姿势，需要将虚拟对象的三维网格模型的各网
格顶点(即蒙皮顶点)与一个或多个对象骨骼点绑定，以实现网格顶点被其关联的对象骨骼点所控制。本实施例中虚拟对象的骨骼绑定信息即为记录虚拟对象的骨骼点与三维网格模型的网格顶点之间的绑定关系的相关信息。
[0032]本实施例的初始姿势可以是指虚拟对象的三维网格模型中的各网格顶点未经对象骨骼点驱动前所展示的姿势，即三维网格模型构建完成后所呈现的姿势。例如，若虚拟对象为三维虚拟人物的面部，则其对应的初始姿势可以是无表情的面部姿势。
[0033]本实施例的骨骼初始位置可以是各对象骨骼点在虚拟对象的初始姿势下对应的位置，即各对象骨骼点为被驱动前的位置。由于为虚拟对象确定骨骼绑定信息时，需要使用到虚拟对象的骨骼初始位置，所以对于已经携带有骨骼绑定信息的第一虚拟对象，其对应的第一骨骼初始位置是已知的，对于未携带骨骼绑定信息的第二虚拟对象，对应的第二骨骼初始位置是未知的，需要基于第一虚拟对象的第一骨骼初始位置来推算。可选的，第一骨骼初始位置可以是由经验丰富的绑定师根据经验预先设置好的。
[0034]可选的，本实施例根据第一虚拟对象的第一骨骼初始位置，确定第二虚拟对象的第二骨骼初始位置的过程即为对第二虚拟对象中的各对象骨骼点进行重定位的过程，该过程的具体实本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种虚拟对象的骨骼绑定迁移方法，包括：根据第一虚拟对象在初始姿势下的第一骨骼初始位置，确定第二虚拟对象在所述初始姿势下的第二骨骼初始位置；根据所述第一骨骼初始位置和所述第二骨骼初始位置，将所述第一虚拟对象在目标姿势下的骨骼绑定信息迁移至所述第二虚拟对象，得到所述第二虚拟对象在所述目标姿势下的骨骼绑定信息；其中，所述第一虚拟对象和所述第二虚拟对象具有相同的网格拓扑结构。2.根据权利要求1所述的方法，其中，所述根据第一虚拟对象在初始姿势下的第一骨骼初始位置，确定第二虚拟对象在所述初始姿势下的第二骨骼初始位置，包括：确定对象骨骼点在第一虚拟对象的初始姿势下的网格拓扑结构中对应的第一网格点簇集；确定所述对象骨骼点在第二虚拟对象的初始姿势下的网格拓扑结构中对应的第二网格点簇集；根据所述第一网格点簇集和所述第一虚拟对象在初始姿势下的第一骨骼初始位置，确定骨骼定位系数；根据所述第二网格点簇集和所述骨骼定位系数，确定所述第二虚拟对象在所述初始姿势下的第二骨骼初始位置。3.根据权利要求1所述的方法，其中，所述骨骼绑定信息包括：骨骼位置变化信息和蒙皮权重信息；所述根据所述第一骨骼初始位置和所述第二骨骼初始位置，将所述第一虚拟对象在目标姿势下的骨骼绑定信息迁移至所述第二虚拟对象，得到所述第二虚拟对象在所述目标姿势下的骨骼绑定信息，包括：根据所述第一虚拟对象和所述第二虚拟对象的网格拓扑结构，将对象骨骼点划分为至少两个骨骼点簇，并确定所述至少两个骨骼点簇之间的信息迁移顺序；按照所述信息迁移顺序，针对每一骨骼点簇，根据所述骨骼点簇关联的第一骨骼初始位置和所述第二骨骼初始位置，将所述第一虚拟对象在目标姿势下对应的所述骨骼点簇的骨骼位置变化信息迁移至所述第二虚拟对象，得到所述第二虚拟对象在所述目标姿势下对应的所述骨骼点簇的骨骼位置变化信息；将所述第一虚拟对象中所述骨骼点簇在所述目标姿势下的蒙皮权重信息，作为所述第二虚拟对象中所述骨骼点簇在所述目标姿势下的蒙皮权重信息。4.根据权利要求3所述的方法，其中，所述根据所述骨骼点簇关联的第一骨骼初始位置和所述第二骨骼初始位置，将所述第一虚拟对象在目标姿势下对应的所述骨骼点簇的骨骼位置变化信息迁移至所述第二虚拟对象，得到所述第二虚拟对象在所述目标姿势下对应的所述骨骼点簇的骨骼位置变化信息，包括：将所述第一虚拟对象在目标姿势下对应的所述骨骼点簇的第一中心位置迁移至所述第二虚拟对象，得到所述第二虚拟对象在所述目标姿势下对应的所述骨骼点簇的第二中心位置；根据第一中心位置、所述第二中心位置、所述第一虚拟对象在初始姿势下对应的所述骨骼点簇的第三中心位置、所述第二虚拟对象在初始姿势下对应的所述骨骼点簇的第四中心位置、以及所述骨骼点簇关联的第一骨骼初始位置和所述第二骨骼初始位置，将所述第
一虚拟对象在所述目标姿势下对应的所述骨骼点簇的骨骼位置变化信息迁移至所述第二虚拟对象，得到所述第二虚拟对象在所述目标姿势下对应的所述骨骼点簇的骨骼位置变化信息。5.根据权利要求1
‑
4中任一项所述的方法，还包括：获取所述第一虚拟对象在所述目标姿势下的拓扑网格点；根据所述拓扑网格点和所述第一虚拟对象在所述初始姿势下的第一骨骼初始位置，确定所述第一虚拟对象在所述目标姿势下的骨骼绑定信息。6.根据权利要求5所述的方法，其中，所述获取所述第一虚拟对象在所述目标姿势下的拓扑网格点，包括：获取所述第一虚拟对象在所述目标姿势下的初始的拓扑网格点；根据预设修正点对所述初始的拓扑网格点进行修正，得到所述第一虚拟对象在所述目标姿势下的最终的拓扑网格点。7.根据权利要求1
‑
6中任一项所述的方法，还包括：构建所述第二虚拟对象在所述目标姿势下的骨骼绑定信息与所述目标姿势的描述信息之间映射关系；其中，所述映射关系用于确定所述目标姿势的描述信息对应的骨骼绑定信息，并基于所述描述信息对应的骨骼绑定信息，驱动所述第二虚拟对象，展示所述目标姿势。8.一种虚拟对象的骨骼绑定迁移装置，包括：初始位置确定模块，用于根据第一虚拟对象在初始姿势下的第一骨骼初始位置，确定第二虚拟对象在所述初始姿势下的第二骨骼初始位置；绑定信息迁移模块，用于根据...

【专利技术属性】
技术研发人员：张世昌，赵亚飞，郭紫垣，范锡睿，
申请(专利权)人：北京百度网讯科技有限公司，
类型：发明
国别省市：