当前位置: 首页 > 专利查询>浙江大学专利>正文

一种面向生成式数字人的人体模型重光照方法技术

技术编号:44866812 阅读:15 留言:0更新日期:2025-04-08 00:09
本发明专利技术公开了一种面向生成式数字人的人体模型重光照方法,属于数字人重光照渲染技术领域,包括以下步骤:采用显式三角网格和隐式纹理材质场相结合的混合表示方式重建任意姿态的数字人的人体模型,使得人体模型包含带有高频纹理细节信息的三角网格、粗糙度贴图、法线贴图、以及漫反射反照率贴图;结合调整的任意环境光照信息、相机视角、以及通过人体分部位预测的阴影信息,对人体模型进行重光照,得到任意姿态和任意光照条件下的数字人渲染图像。这样能够实现不同姿态和不同光照条件下人体模型的重光照,获得高真实感数字人视频。

【技术实现步骤摘要】

本专利技术属于数字人重光照渲染,具体涉及一种面向生成式数字人的人体模型重光照方法


技术介绍

1、当下,数字人技术蓬勃发展,在智能客服、虚拟主播、在线教育、游戏娱乐等诸多领域广泛渗透,成为行业发展新动力。

2、然而,数字人技术在光照渲染方面存在较为显著的短板。传统图形学渲染往往依赖高端设备,这不仅致使成本居高不下,而且普适性欠佳;逆光照渲染会受到单视角或多视角的局限,当面临复杂光照以及动态场景时,难以精准还原物体及光照相关信息。神经网络渲染虽取得了一定进展,但因其计算成本颇高且存在诸多假设条件,在实时性与通用性方面的表现不尽如人意,例如神经辐射场方法在实时场景中的应用便受到诸多限制。

3、在数字人模型构建与渲染环节,同样暴露出诸多突出问题。几何建模时,人体关节处的精度较低,容易出现伪影现象,像基于符号距离场方法处理关节弯曲情况时,会产生表面不平整、纹理扭曲等问题,进而致使动作呈现出不自然的状态;材质重建过程中的阴影估计依赖光线追踪技术,其效率较低且效果欠佳,无法适应材质的动态变化,对视觉质感产生了不良影响;此外,模型与光照之间难以实本文档来自技高网...

【技术保护点】

1.一种面向生成式数字人的人体模型重光照方法,其特征在于,包括以下步骤:

2.根据权利要求1所述的面向生成式数字人的人体模型重光照方法,其特征在于,采用显式三角网格和隐式纹理材质场相结合的混合表示方式重建任意姿态的数字人的人体模型,包括:

3.根据权利要求2所述的面向生成式数字人的人体模型重光照方法,其特征在于,任意姿态参数来自于SMPL-H姿态参数。

4.根据权利要求2所述的面向生成式数字人的人体模型重光照方法,其特征在于,所述网格提取模块采用FlexiCubes算法进行人物三角网格的提取,所述特征提取模块采用UNet提取每面顶点的偏移映射。

...

【技术特征摘要】

1.一种面向生成式数字人的人体模型重光照方法,其特征在于,包括以下步骤:

2.根据权利要求1所述的面向生成式数字人的人体模型重光照方法,其特征在于,采用显式三角网格和隐式纹理材质场相结合的混合表示方式重建任意姿态的数字人的人体模型,包括:

3.根据权利要求2所述的面向生成式数字人的人体模型重光照方法,其特征在于,任意姿态参数来自于smpl-h姿态参数。

4.根据权利要求2所述的面向生成式数字人的人体模型重光照方法,其特征在于,所述网格提取模块采用flexicubes算法进行人物三角网格的提取,所述特征提取模块采用unet提取每面顶点的偏移映射。

5.根据权利要求2所述的面向生成式数字人的人体模型重光照方法,其特征在于,符号距离函数场的...

【专利技术属性】
技术研发人员:耿卫东吴高源厉向东
申请(专利权)人:浙江大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1