一种神经辐射场的数字化人体重建方法及装置制造方法及图纸

技术编号:46621609 阅读:0 留言:0更新日期:2025-10-14 21:16
本文提供了一种神经辐射场的数字化人体重建方法及装置,通过骨架驱动的刚性变形得到粗略变形,并利用多层神经网络学习非刚性变形细节偏移,以将目标对象视频由观察空间映射到规范空间;利用非局部注意力模块对目标对象视频的对象参数进行多尺度特征提取,并利用残差学习模块对所述多尺度特征进行融合处理,得到融合特征向量;利用通道注意力模块和空间注意力模块对非刚性形变进行精确感知建模;利用多损失函数联合训练,对神经辐射场进行训练处理;将观察空间到规范空间之间的坐标变换矩阵以及目标对象视频输入到训练完成的神经辐射场中,渲染得到人体任意角度的重建效果画图,提高了渲染的准确性和可靠性。

【技术实现步骤摘要】

本文属于计算机图形学和深度学习的,尤其涉及一种神经辐射场的数字化人体重建方法及装置


技术介绍

1、在计算机视觉与图形学的蓬勃发展下,三维重建数字化人体成为可能,数字化人体这一新兴技术在我们生活中有巨大的应用前景。数字人在医疗、教学教育、影视娱乐、商务主播等领域都展现出了丰富的发展潜力。在医疗领域,数字人帮助医生进行医疗诊断,可以提升医生诊断的精确概率;在教学教育领域,数字人教师以灵活仿真的姿态,提高学生线上学习的兴趣与动力;在影视娱乐领域,数字人将现实人物数字化,展现更多艺术创作的可能性;在商务主播领域,直播平台采用数字人的形式进行直播,大大节省了直播成本。

2、近年来,发展出许多重建数字化人体的解决方法,从基于结构化网格的方法,到后续基于点云、体素、立方体等几何表示方法,虽取得显著进步,但这些方法普遍依赖手动操作、复杂算法,且需特定设备生成相关数据,限制了其广泛应用。


技术实现思路

1、针对现有技术的上述问题,本文的目的在于,提供一种神经辐射场的数字化人体重建方法及装置,能提高单目视频下数字化本文档来自技高网...

【技术保护点】

1.一种神经辐射场的数字化人体重建方法,其特征在于,所述方法包括:

2.根据权利要求1所述的神经辐射场的数字化人体重建方法,其特征在于,

3.根据权利要求2所述的神经辐射场的数字化人体重建方法,其特征在于,基于骨骼驱动的刚性变形为通过标准蒙皮驱动的粗略变形。

4.根据权利要求1所述的神经辐射场的数字化人体重建方法,其特征在于,利用神经辐射场中非局部注意力模块对目标对象视频的对象参数进行多尺度特征提取,并利用残差学习模块对所述多尺度特征进行融合处理,得到融合特征向量,包括:

5.根据权利要求4所述的神经辐射场的数字化人体重建方法,其特征在于,...

【技术特征摘要】

1.一种神经辐射场的数字化人体重建方法,其特征在于,所述方法包括:

2.根据权利要求1所述的神经辐射场的数字化人体重建方法,其特征在于,

3.根据权利要求2所述的神经辐射场的数字化人体重建方法,其特征在于,基于骨骼驱动的刚性变形为通过标准蒙皮驱动的粗略变形。

4.根据权利要求1所述的神经辐射场的数字化人体重建方法,其特征在于,利用神经辐射场中非局部注意力模块对目标对象视频的对象参数进行多尺度特征提取,并利用残差学习模块对所述多尺度特征进行融合处理,得到融合特征向量,包括:

5.根据权利要求4所述的神经辐射场的数字化人体重建方法,其特征在于,在获得融合特征向量之后,还包括:

6.根据...

【专利技术属性】
技术研发人员:李天行王紫涵刘晓瑜
申请(专利权)人:北京工业大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1