一种结构感知的纹理三维模型单目重建方法及系统技术方案

本发明专利技术提出一种结构感知的纹理三维模型单目重建方法和系统，包括：获取待重建的单目图像，从单目图像中提取三维网格，得到初始三维模型；通过对齐初始三维模型和数据库中的模型，得到数据库中与初始重建三维模型相对应的至少一个三维模型部件作为检索结果，组合所有检索结果，得到组合三维模型；将单目图像进行本征分解，并将其纹理信息通过反投影为组合三维模型中三维模型部件填充纹理，得到部分纹理缺失三维模型；通过纹理补全网络，补全部分纹理缺失三维模型的纹理信息，得到单目图像的纹理三维模型重建结果。本发明专利技术的检索和组装过程可以改变重建三维模型的拓扑，且每个组件都拥有一个独立的纹理图以表达更加精细的纹理，本发明专利技术可以从单目彩色图像中重建出灵活拓扑和精细纹理的三维模型。

【技术实现步骤摘要】

本专利技术涉及计算机图形学和计算机视觉领域，特别设计一种结构感知的纹理三维模型单目重建方法。

技术介绍

1、纹理三维模型是一种常用的三维表示，其由三维网格、纹理映射和纹理贴图组成，纹理三维模型的单目重建是从单张彩色图像中恢复三维物体的几何和纹理信息。从单张彩色图像中恢复纹理三维模型是一个重要的问题，现有的纹理三维模型单目重建方法主要分为两种，第一类现有技术是利用单个可变形的三维网格模板的顶点形变逼近输入图像中物体的几何，并预先定义好三维网格模板到纹理图像纹理映射，再利用一个纹理预测网络推测纹理图像；第二类现有技术是基于隐式场几何表示，将输入图像作为网络的条件输入，预测空间中采样点的到几何表面的距离符号值和采样点的纹理颜色，并采用行军立方体算法得到显式的带纹理网格。但基于变形模板的方法，无法表达非零亏格的物体，存在几何拓扑不够灵活的问题；此外，两类方法都只能预测低分辨率的纹理贴图或者离散的顶点颜色，存在纹理信息模糊、无法表达细节纹理的问题。

2、具体来说第一类现有技术，利用单个可变形的三维网格模板逼近输入图像中的物体几何，利用网络学习三维网格模板本文档来自技高网...

【技术保护点】

1.一种结构感知的纹理三维模型单目重建方法，其特征在于，包括：

2.如权利要求1所述的结构感知的纹理三维模型单目重建方法，其特征在于，该步骤S2包括：

3.如权利要求2所述的结构感知的纹理三维模型单目重建方法，其特征在于，该步骤S3包括：

4.如权利要求3所述的结构感知的纹理三维模型单目重建方法，其特征在于，该步骤4包括：

5.一种结构感知的纹理三维模型单目重建系统，其特征在于，包括：

6.如权利要求5所述的结构感知的纹理三维模型单目重建系统，其特征在于，该模块S2包括：

7.如权利要求6所述的结构感知的纹理三维模型...

【技术特征摘要】

1.一种结构感知的纹理三维模型单目重建方法，其特征在于，包括：

2.如权利要求1所述的结构感知的纹理三维模型单目重建方法，其特征在于，该步骤s2包括：

3.如权利要求2所述的结构感知的纹理三维模型单目重建方法，其特征在于，该步骤s3包括：

4.如权利要求3所述的结构感知的纹理三维模型单目重建方法，其特征在于，该步骤4包括：

5.一种结构感知的纹理三维模型单目重建系统，其特征在于，包括：

6.如权利要求5所述的结构感...

【专利技术属性】
技术研发人员：高林，吴桐，张凌霄，
申请(专利权)人：中国科学院计算技术研究所，
类型：发明
国别省市：