基于Mip-NeRF和蒙皮模型的人体三维重建系统及方法技术方案

本发明专利技术公开一种基于Mip‑NeRF和蒙皮模型的人体三维重建系统及方法，涉及人体模型重建技术领域。一种基于Mip‑NeRF和蒙皮模型的人体三维重建系统及方法只需要单个相机或者手机收集人体的四周的图像信息，利用收集的人体的四周的图像信息和上述方法可以重建人体三维模型，不仅可以减弱人体非刚性变化带来的影响，而且重建后的人体三维模型具有衣服、头发等纹理细节；对重建后的人体三维模型可以进行编辑操作，利用3D运动数据驱动重建后的人体三维模型生成具有高度真实感的人体动画，完成目标人体本身无法完成的特定动作，用于虚拟试衣、特效电影等领域。

【技术实现步骤摘要】

本专利技术属于人体模型重建，尤其涉及基于mip-nerf和蒙皮模型的人体三维重建系统及方法。

技术介绍

1、人体模型重建亦称人体数字化，其包含对某一特定人物进行几何重建与纹理估计，使得能够在计算机中重现该人物真实的数字形象。将视频中的目标人物的人体动作数字化的技术在人机交互、社交人工智能和机器人技术在内的各种应用中具有巨大的潜力，和多种技术相结合，可以广泛应用于远程办公、线上交流、虚拟主播、虚拟试衣等领域。

2、近年来，研究者对于人体重建方法不断创新，通过收集人的多角度视频进行人体重建是现如今最重要的研究方向之一。

3、1)、得益于深度感知技术的不断提升，利用视觉设备或者扫描设备对人体进行重建，比如：bodynet、hybridfusion等方法，上述类型的有些方法基于高精度设备进行实时扫描融合，有些方法基于几何的自由表达形式，有些方法则使用机器学习、深度学习等基于学习的方法对给定的图像进行估计等，虽然高精度的实时扫描设备通过使用深度传感器或者精密扫描仪等仪器可以直接采集详细的3d人体数据构建出完整模型，然而这类方法代价高昂，这对于本文档来自技高网...

【技术保护点】

1.一种基于Mip-NeRF和蒙皮模型的人体三维重建系统，其特征在于，包括人体四周视频信息收集单元、人体图像处理单元、人体蒙皮模型生成单元、融合Mip-NeRF和人体蒙皮模型的人体重建单元和人体动画驱动单元；

2.根据权利要求1所述的基于Mip-NeRF和蒙皮模型的人体三维重建系统，其特征在于，所述人体四周视频信息收集单元为一个单目相机。

3.根据权利要求1所述的基于Mip-NeRF和蒙皮模型的人体三维重建系统，其特征在于，所述人体图像处理单元包括视频图像抽帧处理单元、图像大小重新设置处理单元和人体图像分割单元；

4.根据权利要求1所述的基于Mip-N...

【技术特征摘要】

1.一种基于mip-nerf和蒙皮模型的人体三维重建系统，其特征在于，包括人体四周视频信息收集单元、人体图像处理单元、人体蒙皮模型生成单元、融合mip-nerf和人体蒙皮模型的人体重建单元和人体动画驱动单元；

2.根据权利要求1所述的基于mip-nerf和蒙皮模型的人体三维重建系统，其特征在于，所述人体四周视频信息收集单元为一个单目相机。

3.根据权利要求1所述的基于mip-nerf和蒙皮模型的人体三维重建系统，其特征在于，所述人体图像处理单元包括视频图像抽帧处理单元、图像大小重新设置处理单元和人体图像分割单元；

4.根据权利要求1所述的基于mip-nerf和蒙皮模型的人体三维重建系统，其特征在于，所述人体蒙皮模型生成单元包括目标人物蒙皮模型预测单元和目标人物蒙皮模型保存单元；

5.根据权利要求1所述的基于mip-nerf和蒙皮模型的人体三维重建系统，其特征在于，所述融合mip-nerf和人体蒙皮模型的人体重建单...

【专利技术属性】
技术研发人员：丁其川，窦一龙，郑天璐，刘东旭，童晨宇，杨博，
申请(专利权)人：东北大学，
类型：发明
国别省市：