一种基于深度学习的人体三维重建方法与系统技术方案

技术编号:43428687 阅读:25 留言:0更新日期:2024-11-27 12:39
本申请涉及一种基于深度学习的人体三维重建方法与系统,其属于三维重建技术领域,该方法包括:接收目标图像,目标图像为包含待重建人体的图像;采用人体特征提取模型处理目标图像得到目标人体特征,目标人体特征用于反映目标图像中的待重建人体;采用人体三维重建模型处理目标人体特征得到初始人体三维模型;采用纹理获取模型处理目标图像得到二维的人体纹理;采用纹理贴图模型组合初始人体三维模型和人体纹理得到目标人体三维模型,目标人体三维模型为带纹理的人体三维模型。本申请提前设置有多种模型,通过多种模型互相配合能够接收非人体正面和背景复杂的目标图像,并基于目标图像生成带纹理的人体三维模型,提高所得的人体三维模型的质量。

【技术实现步骤摘要】

本申请涉及三维重建,尤其是涉及一种基于深度学习的人体三维重建方法与系统


技术介绍

1、人体三维重建技术是一种利用计算机视觉和图像处理技术,通过从二维图像或视频中提取的信息来重建人体的三维几何形状和表面纹理的技术,其广泛应用于计算机图形学、人机交互、虚拟现实、增强现实、医学影像学、虚拟数字人和人体舒适性分析等领域中。

2、当前,人体三维重建技术主要包括:

3、1、预先构建人体位姿估计与三维重建网络,通过目标检测与分割网络从训练图片中裁剪包含人体的子图,并确定子图相对于该训练图片的全局位置参数,再通过位置参数预测网络对子图中人体的位姿相关参数进行预测。然后,通过人体模型构建网络基于预测的位姿相关参数构建三维人体模型,再利用二维投影模型对构建的三维人体模型进行二维投影。最后,基于得到的二维投影结果及构建的三维人体模型,对参数预测网络、人体模型构建网络和二维投影模型进行训练。这种技术的缺点是,对训练图片的背景要求较高,背景复杂需要繁琐的人体识别过程,且无法保证人体识别的准确性;

4、2、针对人体构建基于顶点偏移建模人体的数字人本文档来自技高网...

【技术保护点】

1.一种基于深度学习的人体三维重建方法,其特征在于,包括:

2.根据权利要求1所述的基于深度学习的人体三维重建方法,其特征在于,所述采用人体特征提取模型处理所述目标图像得到目标人体特征之前,所述方法包括:训练人体特征提取模型;

3.根据权利要求2所述的基于深度学习的人体三维重建方法,其特征在于,所述计算每一张训练图像集的训练特征,包括:

4.根据权利要求3所述的基于深度学习的人体三维重建方法,其特征在于,所述感知模型包括卷积层、激活函数层和注意力层;

5.根据权利要求2所述的基于深度学习的人体三维重建方法,其特征在于,所述获取人体图像集,包...

【技术特征摘要】

1.一种基于深度学习的人体三维重建方法,其特征在于,包括:

2.根据权利要求1所述的基于深度学习的人体三维重建方法,其特征在于,所述采用人体特征提取模型处理所述目标图像得到目标人体特征之前,所述方法包括:训练人体特征提取模型;

3.根据权利要求2所述的基于深度学习的人体三维重建方法,其特征在于,所述计算每一张训练图像集的训练特征,包括:

4.根据权利要求3所述的基于深度学习的人体三维重建方法,其特征在于,所述感知模型包括卷积层、激活函数层和注意力层;

5.根据权利要求2所述的基于深度学习的人体三维重建方法,其特征在于,所述获取人体图像集,包括:

<...

【专利技术属性】
技术研发人员:王智伟周凡于洪志陈小燕
申请(专利权)人:中邮时代电讯科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1