用于虚拟形象的数据生成方法、装置、电子设备、介质制造方法及图纸

技术编号:39006741 阅读:8 留言:0更新日期:2023-10-07 10:38
本公开提供了一种用于虚拟形象的数据生成方法、装置、电子设备和介质,涉及人工智能技术领域,具体为计算机视觉、增强现实、虚拟现实、深度学习等技术领域。方法可以包括:获得针对目标人体的位姿数据;基于所述位姿数据获得人体关节模型,所述人体关节模型包括与人体关节分别对应的两个或更多个几何体;响应于确定所述人体关节模型中的至少两个几何体之间存在碰撞,确定碰撞的所述至少两个几何体的相应的标识、运动方向以及碰撞位置;以及基于所述相应的标识、运动方向以及碰撞位置获得经更新的位姿数据,所述经更新的位姿数据用于生成针对所述目标人体的虚拟形象。对所述目标人体的虚拟形象。对所述目标人体的虚拟形象。

【技术实现步骤摘要】
用于虚拟形象的数据生成方法、装置、电子设备、介质


[0001]本公开涉及人工智能
,具体为计算机视觉、增强现实、虚拟现实、深度学习等
,可应用于元宇宙、数字人等场景,具体涉及一种用于虚拟形象的数据生成方法、装置、电子设备、计算机可读存储介质和计算机程序产品。

技术介绍

[0002]在计算机视觉、增强现实、虚拟现实、元宇宙、数字人等场景中,经常会出现生成虚拟形象,尤其是根据人体位姿实时生成虚拟形象。对于虚拟形象而言,自碰撞问题或者穿模问题是非常常见的现象。
[0003]在此部分中描述的方法不一定是之前已经设想到或采用的方法。除非另有指明,否则不应假定此部分中描述的任何方法仅因其包括在此部分中就被认为是现有技术。类似地,除非另有指明,否则此部分中提及的问题不应认为在任何现有技术中已被公认。

技术实现思路

[0004]本公开提供了一种用于虚拟形象的数据生成方法、装置、电子设备、计算机可读存储介质和计算机程序产品。
[0005]根据本公开的一方面,提供了一种用于虚拟形象的数据生成的方法,包括:获得针对目标人体的位姿数据;基于所述位姿数据获得人体关节模型,所述人体关节模型包括与人体关节分别对应的两个或更多个几何体;响应于确定所述人体关节模型中的至少两个几何体之间存在碰撞,确定碰撞的所述至少两个几何体的相应的标识、运动方向以及碰撞位置;以及基于所述相应的标识、运动方向以及碰撞位置获得经更新的位姿数据,所述经更新的位姿数据用于生成针对所述目标人体的虚拟形象。
[0006]根据本公开的另一方面,提供了一种用于虚拟形象的数据生成的装置,包括:位姿获得单元,用于获得针对目标人体的位姿数据;模型获得单元,用于基于所述位姿数据获得人体关节模型,所述人体关节模型包括与人体关节分别对应的两个或更多个几何体;碰撞确定单元,用于响应于确定所述人体关节模型中的至少两个几何体之间存在碰撞,确定碰撞的所述至少两个几何体的相应的标识、运动方向以及碰撞位置;以及位姿更新单元,用于基于所述相应的标识、运动方向以及碰撞位置获得经更新的位姿数据所述经更新的位姿数据用于生成针对所述目标人体的虚拟形象。
[0007]根据本公开的另一方面,提供了一种电子设备,包括:至少一个处理器;以及与所述至少一个处理器通信连接的存储器;其中所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行根据本公开的一个或多个实施例的用于虚拟形象的数据生成方法。
[0008]根据本公开的另一方面,提供了一种存储有计算机指令的非瞬时计算机可读存储介质,其中,所述计算机指令用于使所述计算机执行根据本公开的一个或多个实施例的用于虚拟形象的数据生成方法。
[0009]根据本公开的另一方面,提供了一种计算机程序产品,包括计算机程序,其中,所述计算机程序在被处理器执行时实现根据本公开的一个或多个实施例的用于虚拟形象的数据生成方法。
[0010]根据本公开的一个或多个实施例,可以有效地消除虚拟形象中的自碰撞。
[0011]应当理解,本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征,也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。
附图说明
[0012]附图示例性地示出了实施例并且构成说明书的一部分,与说明书的文字描述一起用于讲解实施例的示例性实施方式。所示出的实施例仅出于例示的目的,并不限制权利要求的范围。在所有附图中,相同的附图标记指代类似但不一定相同的要素。
[0013]图1示出了根据本公开的实施例的可以在其中实施本文描述的各种方法的示例性系统的示意图;
[0014]图2示出了根据本公开的实施例的用于虚拟形象的数据生成方法的流程图;
[0015]图3示出了根据本公开的另一实施例的基于碰撞检测及逆运动学解决动作捕捉自接触的方法的流程图;
[0016]图4示出了根据本公开的示例性实施例的自碰撞优化方法的流程图;
[0017]图5示出了根据本公开的实施例的数据流示意图;
[0018]图6示出了根据本公开的实施例的用于虚拟形象的数据生成装置的结构框图;
[0019]图7示出了能够用于实现本公开的实施例的示例性电子设备的结构框图。
具体实施方式
[0020]以下结合附图对本公开的示范性实施例做出说明,其中包括本公开实施例的各种细节以助于理解,应当将它们认为仅仅是示范性的。因此,本领域普通技术人员应当认识到,可以对这里描述的实施例做出各种改变和修改,而不会背离本公开的范围。同样,为了清楚和简明,以下的描述中省略了对公知功能和结构的描述。
[0021]在本公开中,除非另有说明,否则使用术语“第一”、“第二”等来描述各种要素不意图限定这些要素的位置关系、时序关系或重要性关系,这种术语只是用于将一个元件与另一元件区分开。在一些示例中,第一要素和第二要素可以指向该要素的同一实例,而在某些情况下,基于上下文的描述,它们也可以指代不同实例。
[0022]在本公开中对各种所述示例的描述中所使用的术语只是为了描述特定示例的目的,而并非旨在进行限制。除非上下文另外明确地表明,如果不特意限定要素的数量,则该要素可以是一个也可以是多个。此外,本公开中所使用的术语“和/或”涵盖所列出的项目中的任何一个以及全部可能的组合方式。
[0023]下面将结合附图详细描述本公开的实施例。
[0024]图1示出了根据本公开的实施例可以将本文描述的各种方法和装置在其中实施的示例性系统100的示意图。参考图1,该系统100包括一个或多个客户端设备101、102、103、104、105和106、服务器120以及将一个或多个客户端设备耦接到服务器120的一个或多个通信网络110。客户端设备101、102、103、104、105和106可以被配置为执行一个或多个应用程
序。
[0025]在本公开的实施例中,服务器120可以运行使得能够执行根据本公开的用于虚拟形象的数据生成方法的一个或多个服务或软件应用。
[0026]在某些实施例中,服务器120还可以提供其他服务或软件应用,这些服务或软件应用可以包括非虚拟环境和虚拟环境。在某些实施例中,这些服务可以作为基于web的服务或云服务提供,例如在软件即服务(SaaS)模型下提供给客户端设备101、102、103、104、105和/或106的用户。
[0027]在图1所示的配置中,服务器120可以包括实现由服务器120执行的功能的一个或多个组件。这些组件可以包括可由一个或多个处理器执行的软件组件、硬件组件或其组合。操作客户端设备101、102、103、104、105和/或106的用户可以依次利用一个或多个客户端应用程序来与服务器120进行交互以利用这些组件提供的服务。应当理解,各种不同的系统配置是可能的,其可以与系统100不同。因此,图1是用于实施本文所描述的各种方法的系统的一个示例,并且不旨在进行限制。
[0本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种用于虚拟形象的数据生成的方法,包括:获得针对目标人体的位姿数据;基于所述位姿数据获得人体关节模型,所述人体关节模型包括与人体关节分别对应的两个或更多个几何体;响应于确定所述人体关节模型中的至少两个几何体之间存在碰撞,确定碰撞的所述至少两个几何体的相应的标识、运动方向以及碰撞位置;以及基于所述相应的标识、运动方向以及碰撞位置获得经更新的位姿数据,所述经更新的位姿数据用于生成针对所述目标人体的虚拟形象。2.根据权利要求1所述的方法,其中,基于所述相应的标识、运动方向以及碰撞位置获得经更新的位姿数据包括:基于所述至少两个几何体的标识、运动方向以及碰撞位置获得经更新的人体关节模型;以及响应于确定所述经更新的人体关节模型中的几何体之间不存在碰撞,基于所述经更新的人体关节模型获得所述经更新的位姿数据。3.根据权利要求2所述的方法,其中,基于所述至少两个几何体的标识、运动方向以及碰撞位置获得经更新的人体关节模型包括至少一次执行以下操作:基于所述运动方向获得所述人体关节模型相应的人体关节的更新的关节位置;基于所述更新的关节位置获得更新的关节旋转角度;以及基于所述更新的关节位置和所述更新的关节旋转角度进行碰撞检测。4.根据权利要求3所述的方法,其中,基于所述更新的关节位置获得更新的关节旋转角度包括:基于所述更新的关节位置,通过逆运动学,获得所述更新的关节旋转角度。5.根据权利要求3或4所述的方法,其中,基于所述运动方向获得所述人体关节模型相应的人体关节的相应的更新的关节位置包括:获得更新步长;以及通过将所述人体关节模型相应的人体关节的当前关节位置向所述运动方向的反方向移动所述更新步长,获得所述更新的关节位置。6.根据权利要求1

5中任一项所述的方法,其中,获得位姿数据包括基于采集的图像或者视频获得感知的关节位姿数据。7.根据权利要求1

6中任一项所述的方法,其中,基于所述位姿数据获得人体关节模型包括使用所述位姿数据驱动预定的初始人体关节模型。8.根据权利要求7所述的方法,其中,所述预定的初始人体关节模型是通过以下方式构建的:获得与所述位姿数据的感知模型相对应的关节参数;以及基于所述关节参数和预定的几何体池搭建所述初始人体关节模型,使得所述初始人体关节模型的关节数与所述感知模型的关节数一致,其中,所述几何体池包括以下各项中的至少一项:胶囊形、球体、椭球体、圆柱体、六面体。9.根据权利要求1

8中任一项所述的方法,还包括,在基于所述至少两个几何体的标识、运动方向以及碰撞位置更新所述位姿数据以消除碰撞之后,使用经更新的位姿数据驱动渲染模型,以生成经渲染的虚拟形象。
10.一种用于虚拟形象的数据生成的装置,包括:位姿获得单元,用于获得针对目标人体的位姿数据;模型获得单元,用于基于所述位姿数据获得人体关节模型,所述人体关节模型包括与人体关节分别对应的两...

【专利技术属性】
技术研发人员:刘豪杰李丰果冯志强陈睿智赵晨
申请(专利权)人:北京百度网讯科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1