System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 一种渲染手部模型的方法、装置、设备和可读存储介质制造方法及图纸_技高网

一种渲染手部模型的方法、装置、设备和可读存储介质制造方法及图纸

技术编号:40349319 阅读:5 留言:0更新日期:2024-02-09 14:33
本申请提供一种渲染手部模型的方法、装置、设备和可读存储介质,该方法包括,捕捉时空复用照明模式下用户的手部表现,得到光照信息;将光照信息和预设的可重照明手部模型进行匹配,获取光照信息对应的手部信息;根据手部信息,渲染用户的手部模型。通过该方法可以达到准确渲染手部模型的过程的效果。

【技术实现步骤摘要】

本申请涉及模型渲染的领域,具体而言,涉及一种渲染手部模型的方法、装置、设备和可读存储介质


技术介绍

1、目前,过去的研究表明,神经渲染方法可以通过对人类皮肤上的光传输进行建模,重建真实图像并再现物理效应,如亚表面散射。

2、然而,尽管神经重照明取得了成功,但将这种方法扩展到可动画化手部模型带来了一个独特的挑战:跨关节的泛化。与人脸不同,手存在一系列的关节,单个关节的状态会影响所有子关节。导致无法进行准确的渲染。

3、因此,如何准确渲染手部模型的过程,是一个需要解决的技术问题。


技术实现思路

1、本申请实施例的目的在于提供一种渲染手部模型的方法,通过本申请的实施例的技术方案可以达到准确渲染手部模型的过程的效果。

2、第一方面,本申请实施例提供了一种渲染手部模型的方法,包括,捕捉时空复用照明模式下用户的手部表现,得到光照信息;将光照信息和预设的可重照明手部模型进行匹配,获取光照信息对应的手部信息;根据手部信息,渲染用户的手部模型。

3、本申请在上述实施例中,通过捕捉时空复用照明模式下手部的表现,追踪手部几何结构和姿势的当前状态,通过在当前场景下得到的光照信息和设置的可重照明手部模型进行匹配,可以准确的获取手部姿态,进而可以根据手部姿态等相关手部信息,准确渲染手部模型。

4、在一些实施例中,在捕捉时空复用照明模式下用户的手部表现,得到光照信息之前,还包括:获取时空复用照明模式下用户的手部处于不同姿态下各个位置的手部表现以及对应的光照特征;通过各个位置的手部表现以及对应的光照特征,构建可重照明手部模型,其中,可重照明手部模型包括手部各个位置的光照信息和手部信息,手部信息包括手部的结构、关节和姿态中的至少一个。

5、本申请在上述实施例中,在时空复用照明模式下可以获取手部全方位的表现状态以及光照特征,进而构建可重照明手部模型,在后续渲染手部模型时,可以根据构建的可重照明手部模型匹配对应的手部信息,进而达到准确渲染手部模型的效果。

6、在一些实施例中,捕捉时空复用照明模式下用户的手部表现,得到光照信息,包括:在时空复用照明模式下通过照明捕捉技术,追踪当前手部的结构、关节和姿态,并获取当前手部的结构、关节和姿态对应的光照信息。

7、本申请在上述实施例中,通过照明捕捉技术可以在时空复用照明模式下准确的捕捉到用户的相关手部信息。

8、在一些实施例中,将光照信息和预设的可重照明手部模型进行匹配,获取光照信息对应的手部信息,包括:通过可重照明手部模型对光照信息进行分析处理,获取光照信息对应的手部信息。

9、本申请在上述实施例中,可以将光照信息输入可重照明手部模型,匹配到准确的手部信息。

10、在一些实施例中,根据手部信息,渲染用户的手部模型,包括:基于手部信息,通过神经重照明方法渲染手部模型。

11、本申请在上述实施例中,可以通过神经重照明方法准确的渲染手部模型。

12、在一些实施例中,在根据手部信息,渲染用户的手部模型之后,还包括:识别手部模型的姿态,得到手势信息;根据手势信息,控制目标领域内应用,其中,目标领域包括虚拟现实、增强现实或者游戏开发。

13、本申请在上述实施例中,可以在不同的领域根据手部模型实现不同的应用,达到虚拟控制现实场景应用的效果。

14、在一些实施例中,光照信息,包括:光照频率、光照强度、光照相位、光照偏振和光照角动量中的至少一个。

15、本申请在上述实施例中,上述光照信息为多个,根据根据不同的光照信息的特征记录手部的表现。

16、第二方面,本申请实施例提供了一种渲染手部模型的装置,包括:

17、捕捉模块,用于捕捉时空复用照明模式下用户的手部表现,得到光照信息;

18、匹配模块,用于将光照信息和预设的可重照明手部模型进行匹配,获取光照信息对应的手部信息;

19、渲染模块,用于根据手部信息,渲染用户的手部模型。

20、可选的,所述装置还包括:

21、构建模块,用于所述捕捉模块在捕捉时空复用照明模式下用户的手部表现,得到光照信息之前,获取时空复用照明模式下用户的手部处于不同姿态下各个位置的手部表现以及对应的光照特征;通过各个位置的手部表现以及对应的光照特征,构建可重照明手部模型,其中,可重照明手部模型包括手部各个位置的光照信息和手部信息,手部信息包括手部的结构、关节和姿态中的至少一个。

22、可选的,捕捉模块具体用于:

23、在时空复用照明模式下通过照明捕捉技术,追踪当前手部的结构、关节和姿态,并获取当前手部的结构、关节和姿态对应的光照信息。

24、可选的,匹配模块具体用于:

25、通过可重照明手部模型对光照信息进行分析处理,获取光照信息对应的手部信息。

26、可选的,渲染模块具体用于:

27、基于手部信息,通过神经重照明方法渲染手部模型。

28、可选的,所述装置还包括:

29、控制模块,用于所述渲染模块在根据手部信息,渲染用户的手部模型之后,识别手部模型的姿态,得到手势信息;

30、根据手势信息,控制目标领域内应用,其中,目标领域包括虚拟现实、增强现实或者游戏开发。

31、可选的,光照信息,包括:

32、光照频率、光照强度、光照相位、光照偏振和光照角动量中的至少一个。

33、第三方面,本申请实施例提供一种电子设备,包括处理器以及存储器,所述存储器存储有计算机可读取指令,当所述计算机可读取指令由所述处理器执行时,运行如上述第一方面提供的所述方法中的步骤。

34、第四方面,本申请实施例提供一种可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时运行如上述第一方面提供的所述方法中的步骤。

35、本申请的其他特征和优点将在随后的说明书阐述,并且,部分地从说明书中变得显而易见,或者通过实施本申请实施例了解。本申请的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。

本文档来自技高网...

【技术保护点】

1.一种渲染手部模型的方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,在所述捕捉时空复用照明模式下用户的手部表现,得到光照信息之前,所述方法还包括:

3.根据权利要求1或2所述的方法,其特征在于,所述捕捉时空复用照明模式下用户的手部表现,得到光照信息,包括:

4.根据权利要求1或2所述的方法,其特征在于,所述将所述光照信息和预设的可重照明手部模型进行匹配,获取所述光照信息对应的手部信息,包括:

5.根据权利要求1或2所述的方法,其特征在于,所述根据所述手部信息,渲染所述用户的手部模型,包括:

6.根据权利要求5所述的方法,其特征在于,在所述根据所述手部信息,渲染所述用户的手部模型之后,所述方法还包括:

7.根据权利要求1或2所述的方法,其特征在于,所述光照信息,包括:

8.一种渲染手部模型的装置,其特征在于,包括:

9.一种电子设备,其特征在于,包括:

10.一种计算机可读存储介质,其特征在于,包括:

【技术特征摘要】

1.一种渲染手部模型的方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,在所述捕捉时空复用照明模式下用户的手部表现,得到光照信息之前,所述方法还包括:

3.根据权利要求1或2所述的方法,其特征在于,所述捕捉时空复用照明模式下用户的手部表现,得到光照信息,包括:

4.根据权利要求1或2所述的方法,其特征在于,所述将所述光照信息和预设的可重照明手部模型进行匹配,获取所述光照信息对应的手部信息,包括:

5....

【专利技术属性】
技术研发人员:张吉松夏勇峰
申请(专利权)人:北京蜂巢世纪科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1