当前位置: 首页 > 专利查询>南京大学专利>正文

一种人体三维重建方法、系统、设备、介质及产品技术方案

技术编号:44945712 阅读:23 留言:0更新日期:2025-04-12 01:20
本申请公开了一种人体三维重建方法、系统、设备、介质及产品,涉及计算机视觉和稀疏视角三维重建技术领域,该方法包括:获取待拍摄人体的多视角RGB图像;对所述多视角RGB图像进行预处理,得到预处理后的多视角RGB图像;将预处理后的多视角RGB图像输入至多视角人体深度图预测模型中,得到主视角人体深度预测图;将多幅主视角人体深度预测图进行融合,得到融合后的主视角人体深度预测图;基于融合后的主视角人体深度预测图,采用三维重建方法进行人体三维重建,得到人体三维重建结果;所述人体三维重建结果为人体表面网格。本申请提高了人体三维重建结果的表面平滑度。

【技术实现步骤摘要】

本申请涉及计算机视觉和稀疏视角三维重建,特别是涉及一种人体三维重建方法、系统、设备、介质及产品


技术介绍

1、伴随着具有高质量图像采集能力的可移动计算设备的普及以及虚拟现实技术的快速发展,人们对创建3d内容具有前所未有的高强度需求,但是如何快速便捷的创建高精度3d内容仍是尚未解决的难题。对于3d内容创建的普及,设备廉价化、操作简单化是一个必然的要求。但是现有方法,如3d扫描、多视图立体算法,虽可对实物进行高精度的测量重建,但是受限于价格高昂的捕获设备以及依赖具有严格环境限制(例如受控的光照)的复杂捕获系统,非专业人士难以使用,高昂的使用成本也令人望而却步,极大的限制了物体三维重建的应用范围。

2、高精度的人体三维重建是3d内容创建中的一个重要研究课题,是医学成像、游戏和vr等应用领域的关键技术之一,现代的电影拍摄与游戏制作已经越来越离不开这项技术。为了获得真正的沉浸式体验,动画师需要花费大量精力手工绘制虚拟人物,或者使用昂贵的捕获系统,增加了使用成本,也严格限制了使用范围。人体三维重建技术如果能利用移动设备的高质量图像传感器,像用手机拍照一样本文档来自技高网...

【技术保护点】

1.一种人体三维重建方法,其特征在于,所述人体三维重建方法包括:

2.根据权利要求1所述的人体三维重建方法,其特征在于,获取待拍摄人体的多视角RGB图像,具体包括:

3.根据权利要求1所述的人体三维重建方法,其特征在于,对所述多视角RGB图像进行预处理,得到预处理后的多视角RGB图像,具体包括:

4.根据权利要求1所述的人体三维重建方法,其特征在于,基于CNN的深度学习网络包括依次连接的带自注意力的多层级图像特征编码器、带局部语义特征的损失空间构建层以及稀疏卷积模块。

5.根据权利要求1所述的人体三维重建方法,其特征在于,所述多视角人体深度...

【技术特征摘要】

1.一种人体三维重建方法,其特征在于,所述人体三维重建方法包括:

2.根据权利要求1所述的人体三维重建方法,其特征在于,获取待拍摄人体的多视角rgb图像,具体包括:

3.根据权利要求1所述的人体三维重建方法,其特征在于,对所述多视角rgb图像进行预处理,得到预处理后的多视角rgb图像,具体包括:

4.根据权利要求1所述的人体三维重建方法,其特征在于,基于cnn的深度学习网络包括依次连接的带自注意力的多层级图像特征编码器、带局部语义特征的损失空间构建层以及稀疏卷积模块。

5.根据权利要求1所述的人体三维重建方法,其特征在于,所述多视角人体深度图预测模型的训练过程,具体包括:

6.根据权利要求1所述的人体三维重建方法,...

【专利技术属性】
技术研发人员:于耀赵云飞周余
申请(专利权)人:南京大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1