耦合DUSt3R和U-Net语义分割的文物三维建模方法技术

技术编号:43965204 阅读:27 留言:0更新日期:2025-01-07 21:51
本发明专利技术提供一种耦合DUSt3R和U‑Net语义分割的文物三维建模方法,其中,方法包括:实时获取游客拍摄的目标文物的少量原始图像;对目标文物的少量原始图像进行预处理,得到目标文物的少量图像;将目标文物的少量图像输入至预先构建的三维重建模型,得到三维重建模型输出的目标文物的少量图像对应的目标文物三维模型;其中,三维重建模型是基于样本文物的样本图像,以及样本文物的样本图像对应的样本文物三维模型标签进行训练得到的。本发明专利技术能够简化三维重建的流程,降低计算的复杂度,提高三维重建的效率和实时性,提升游客体验。

【技术实现步骤摘要】

本专利技术涉及图像处理,尤其涉及一种耦合dust3r和u-net语义分割的文物三维建模方法。


技术介绍

1、随着三维重建技术的快速发展,其在文物保护领域的应用也越来越广泛。博物馆通常会提供虚拟现实的文物三维模型,以供游客参观,然而这种方式虽然提供了便利,但游客的参与感较差。在游客拍照场景下,如何利用游客拍摄的文物照片实时地生成文物三维模型,提升游客欣赏文物、保护文物的参与感,是亟待解决的关键问题。

2、目前,现有技术采用三维激光扫描和多视角摄影相结合的技术,对文物图像进行三维重建,不仅需要采集多个投影视角的文物图像,还需要对相机参数进行标定,复杂度较高,三维重建效率低,难以利用游客拍摄的有限数量的文物照片,实时地生成文物三维模型,影响游客体验。


技术实现思路

1、本专利技术提供一种耦合dust3r和u-net语义分割的文物三维建模方法,用以解决现有技术中采用三维激光扫描和多视角摄影相结合的技术,对文物图像进行三维重建,不仅需要采集多个投影视角的文物图像,还需要对相机参数进行标定,复杂度较高,三维重本文档来自技高网...

【技术保护点】

1.一种耦合DUSt3R和U-Net语义分割的文物三维建模方法,其特征在于,包括:

2.根据权利要求1所述的耦合DUSt3R和U-Net语义分割的文物三维建模方法,其特征在于,所述三维重建模型包括语义分割层和三维重建层,所述语义分割层包括U-Net网络,所述三维重建层包括密集无约束立体三维重建DUSt3R模型。

3.根据权利要求2所述的耦合DUSt3R和U-Net语义分割的文物三维建模方法,其特征在于,所述将所述目标文物的少量图像输入至预先构建的三维重建模型,得到所述三维重建模型输出的所述目标文物的少量图像对应的目标文物三维模型,包括:

4.根据权利要...

【技术特征摘要】

1.一种耦合dust3r和u-net语义分割的文物三维建模方法,其特征在于,包括:

2.根据权利要求1所述的耦合dust3r和u-net语义分割的文物三维建模方法,其特征在于,所述三维重建模型包括语义分割层和三维重建层,所述语义分割层包括u-net网络,所述三维重建层包括密集无约束立体三维重建dust3r模型。

3.根据权利要求2所述的耦合dust3r和u-net语义分割的文物三维建模方法,其特征在于,所述将所述目标文物的少量图像输入至预先构建的三维重建模型,得到所述三维重建模型输出的所述目标文物的少量图像对应的目标文物三维模型,包括:

4.根据权利要求3所述的耦合dust3r和u-net语义分割的文物三维建模方法,其特征在于,所述将所述目标文物的少量图像输入至所述语义分割层,得到所述语义分割层输出的所述目标文物的少量分割图,包括:

5.根据权利要求3所述的耦合dust3r和u-net语义分割的文物三维建模方法,其特征在于,所述将所述目标文物的少量分割图输入至所述三维重建层,得到所述三维重建层输出的所述目标文...

【专利技术属性】
技术研发人员:高培超林小涵刘钊李海洋宋长青叶思菁
申请(专利权)人:北京师范大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1