三维人体重建的方法、装置、电子设备及存储介质制造方法及图纸

本发明专利技术公开了三维人体重建的方法、装置、电子设备及存储介质，包括：获取人体图像；将人体图像输入至训练好的三维人体重建模型，得到人体图像的三维重建结果；其中，训练好的三维人体重建模型为利用扫描人体后的人体扫描模型渲染到不同背景图像中生成的图像进行训练后得到。本发明专利技术通过提取点云的全局特征和局部特征为点云提供了语义信息与强约束，使得三维人体重建模型能够学习到全局的姿态信息以及局部的细节信息，通过参数化人体模型获取三维语义特征，为模型提供了强约束，提高三维人体重建模型的细节的准确度真实度，同时提高了对人体姿态的鲁棒性。人体姿态的鲁棒性。人体姿态的鲁棒性。

【技术实现步骤摘要】
三维人体重建的方法、装置、电子设备及存储介质


[0001]本专利技术涉及计算机
，具体涉及三维人体重建的方法、装置、电子设备及存储介质。

技术介绍

[0002]目前，三维人体重建广泛应用于虚拟现实、游戏体验、虚拟试穿等领域。
[0003]在三维人体重建模型中，基于像素对齐的隐式表达方法占主导地位，该方法将三维人体隐式地表示为三维空间中的占据场，将三维空间中采样的点与二维图像进行对齐判断其是否在人体占据场内部，一方面，该方法忽略了点之间的空间几何依赖关系，导致局部重建细节比如衣服褶皱，面部皱纹等不够真实。另一方面，由于场景多样性、人体姿态的复杂性等因素，现有方法对人体姿态的鲁棒性较差。
[0004]综上，目前亟需一种三维人体重建的技术，用于解决上述现有技术存在的问题。

技术实现思路

[0005]由于现有方法存在上述问题，本专利技术提出三维人体重建的方法、装置、电子设备及存储介质。
[0006]第一方面，本专利技术提供了一种三维人体重建的方法，包括：
[0007]获取人体图像；
[000本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种三维人体重建的方法，其特征在于，包括：获取人体图像；将所述人体图像输入至训练好的三维人体重建模型，得到所述人体图像的三维重建结果；其中，所述训练好的三维人体重建模型为利用扫描人体后的人体扫描模型渲染到不同背景图像中生成的图像进行训练后得到。2.根据权利要求1所述的三维人体重建的方法，其特征在于，在所述将所述人体图像输入至训练好的三维人体重建模型，得到所述人体图像的三维重建结果之前，还包括：获取背景图像、人体扫描模型以及所述人体扫描模型对应的相机投影参数；根据所述人体扫描模型、所述相机投影参数以及所述背景图像生成图像训练集、剪影图、深度图和法向量图；所述图像训练集由所述人体扫描模型渲染到所述背景图像中得到；在所述人体扫描模型所处的三维空间中采样得到点云并生成所述点云中各个点对应的标签；所述标签用于指示所述点云中各个点与所述人体扫描模型的空间关系；提取所述点云对应的图像特征、全局特征以及局部特征；根据所述图像特征、所述全局特征以及所述局部特征确定所述点云在人体内部的概率集合；根据所述点云在人体内部的概率集合确定第一损失以及第二损失；将所述第一损失和所述第二损失进行加权计算后更新所述三维人体重建模型的参数，得到训练好的三维人体重建模型。3.根据权利要求2所述的三维人体重建的方法，其特征在于，所述在所述人体扫描模型所处的三维空间中采样得到点云并生成所述点云中各个点对应的标签，包括：在所述人体扫描模型上采样N个点并给每个点的坐标增加噪声；在所述人体扫描模型所处的三维空间中采样M个点；将所述N个点和所述M个点的集合作为点云；其中，N、M均为正整数，N大于M。4.根据权利要求2所述的三维人体重建的方法，其特征在于，所述提取所述点云对应的图像特征、全局特征以及局部特征，包括：根据所述图像训练集确定所述人体扫描模型的姿态信息、形体信息；根据所述姿态信息、所述形体信息得到参数化人体模型；根据所述参数化人体模型确定所述点云的全局特征；根据所述参数化人体模型以及所述点云确定所...

【专利技术属性】
技术研发人员：雷震，朱翔昱，廖婷婷，
申请(专利权)人：中国科学院自动化研究所，
类型：发明
国别省市：