三维重建方法和系统技术方案

技术编号:45745708 阅读:20 留言:0更新日期:2025-07-08 21:36
本说明书实施例提供一种三维重建方法和系统。在该三维重建方法中,三维重建系统可以获得从多个视角对目标场景进行拍摄得到的图像集合,并获得包括多个高斯椭球的待训练的三维模型,再利用所述图像集合对所述三维模型进行训练,并在训练过程中基于所述目标场景在所述图像集合的各图像中的深度信息对所述三维模型中高斯椭球的密度进行调整,以提升所述三维模型对所述目标场景的表征能力,以及将训练后的三维模型作为所述目标场景对应的重建模型。

【技术实现步骤摘要】

本说明书涉及三维图形学和计算机视觉领域,尤其涉及一种三维重建方法和系统


技术介绍

1、随着科技的快速发展,人们对于对场景的高质量三维重建和实时渲染体验提出了更高的要求。三维重建技术可以从二维的数据中恢复出物体或场景的三维几何形状和外观信息。

2、例如,3d高斯溅射(3dimensional gaussian splatting,3dgs)算法通过采集一段场景视频或图像,结合场景隐式的离散高斯点云的表征方式,可以实现低成本高质量的场景重建。已经有大量研究将该算法用在各种3d重建场景中,例如高精度人脸重建、城市级三维重建等。然而,现有的3dgs算法在重建某些场景时经常出现模糊区域,使得重建效果不佳。

3、因此,需要提供一种能够实现更优质的重建效果的三维重建方法。

4、
技术介绍
部分的内容仅仅是专利技术人个人所知晓的信息,并不代表上述信息在本公开申请日之前已经进入公共领域,也不代表其可以成为本公开的现有技术。


技术实现思路

1、本说明书提供一种三维重建方法和系统。在该方法中,通过本文档来自技高网...

【技术保护点】

1.一种三维重建方法,包括:

2.根据权利要求1所述的方法,其中,针对所述图像集合中任意的目标图像,基于所述目标场景在所述目标图像中的深度信息对所述三维模型中高斯椭球的密度进行调整,包括:

3.根据权利要求2所述的方法,其中,所述确定所述目标特征点在预测图像中的预测深度,包括:

4.根据权利要求3所述的方法,其中,所述基于所述第一椭球集合中各高斯椭球在所述预测图像中的深度,确定所述目标特征点在所述预测图像中的预测深度,包括:

5.根据权利要求3所述的方法,其中,所述方法还包括:

6.根据权利要求2所述的方法,其中,所述确定所述目...

【技术特征摘要】

1.一种三维重建方法,包括:

2.根据权利要求1所述的方法,其中,针对所述图像集合中任意的目标图像,基于所述目标场景在所述目标图像中的深度信息对所述三维模型中高斯椭球的密度进行调整,包括:

3.根据权利要求2所述的方法,其中,所述确定所述目标特征点在预测图像中的预测深度,包括:

4.根据权利要求3所述的方法,其中,所述基于所述第一椭球集合中各高斯椭球在所述预测图像中的深度,确定所述目标特征点在所述预测图像中的预测深度,包括:

5.根据权利要求3所述的方法,其中,所述方法还包括:

6.根据权利要求2所述的方法,其中,所述确定所述目标特征点在所述目标图像中的实际深度,包括:

7.根据权利要求6所述的方法,其中,所述获得所述目标场景对应的稀疏重建数据,包括:

8.根据权利要求2所述的方法,其中,所述目标图像中的各像素对应有深度...

【专利技术属性】
技术研发人员:陆潇杨明晖
申请(专利权)人:支付宝杭州信息技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1