三维重建与模型优化方法、设备、存储介质及程序产品技术

本申请实施例提供一种三维重建与模型优化方法、设备、存储介质及程序产品。在本实施例中，获取目标对象的初始网格模型，或者基于目标对象的原始图像进行三维重建得到初始网格模型；在初始网格模型的基础上引入可微网格重建技术，对初始网格模型进行可微网格重建，以得到能够表达初始网格模型且具有可微属性的目标重建模型；在此基础上，引入可微渲染技术，以原始图像与对目标重建模型进行可微渲染得到的渲染图像之间的损失函数为优化目标，对目标重建模型进行优化，得到目标网格模型。通过这种方式，基于可微网格重建以及基于可微渲染技术的优化，让三维模型的几何结构精度更高，拓扑结构更加规整，从而提升三维模型的整体质量。

【技术实现步骤摘要】

本申请涉及模型处理，尤其涉及一种三维重建与模型优化方法、设备、存储介质及程序产品。

技术介绍

1、三维重建是指运用计算机视觉和图形学技术，对真实的三维物体在计算机上进行数字化的还原，得到适合计算机表示和处理的数字化模型，具有较为广泛的应用。例如，在电商领域中，通过创建商品的三维数字化模型，能够极大地丰富消费者在线购物的体验。例如，在医学领域，通过对人体支气管的三维重建，可以更加准确地进行疾病研究和教学分析。

2、随着三维重建技术的发展，出现了越来越多的三维重建方案，例如基于结构光的三维重建，基于激光扫描法的三维重建，基于立体视觉法的三维重建，以及基于深度学习方法的三维重建等。这些三维重建方法能够重建出物体的三维模型，但是重建出的三维模型可能存在质量不理想的问题，例如几何结构精度较差，或者拓扑结构不规整，不能满足应用场景对模型精度的要求。

技术实现思路

1、本申请的多个方面提供一种三维重建与模型优化方法、设备、存储介质及程序产品，用以提高三维模型的几何结构的精度和拓扑结构的规整性，从整体上提高模型质本文档来自技高网...

【技术保护点】

1.一种模型优化方法，其特征在于，包括：

2.根据权利要求1所述的方法，其特征在于，对所述初始网格模型进行可微网格重建，以得到能够表示所述初始网格模型且具有可微属性的目标重建模型，包括：

3.根据权利要求2所述的方法，其特征在于，根据所述初始可微分参数和所述目标立体单元对所述初始网格模型进行拟合，以得到所述目标重建模型，包括：

4.根据权利要求3所述的方法，其特征在于，以所述初始网格模型与所述初始重建模型的相似误差为优化目标，采用梯度下降算法对所述初始重建模型的可微分参数进行迭代优化，以得到所述目标重建模型，包括：

5.根据权利要求1-4任...

【技术特征摘要】

1.一种模型优化方法，其特征在于，包括：

2.根据权利要求1所述的方法，其特征在于，对所述初始网格模型进行可微网格重建，以得到能够表示所述初始网格模型且具有可微属性的目标重建模型，包括：

3.根据权利要求2所述的方法，其特征在于，根据所述初始可微分参数和所述目标立体单元对所述初始网格模型进行拟合，以得到所述目标重建模型，包括：

4.根据权利要求3所述的方法，其特征在于，以所述初始网格模型与所述初始重建模型的相似误差为优化目标，采用梯度下降算法对所述初始重建模型的可微分参数进行迭代优化，以得到所述目标重建模型，包括：

5.根据权利要求1-4任一项所述的方法，其特征在于，以所述原始图像与对所述目标重建模型进行可微渲染得到的渲染图像之间的损失函数为优化目标，对所述目标重建模型进行优化，以得到目标网格模型，包括：

6.根据权利要求5所述的方法，其特征在于，在将所述目标重建模型及其对应的纹理信息和相机位姿输入可微渲染器中进行可微渲染之前，还包括：

7.根据权利要求6所述的方法，其特征在于，根据所述第一渲染图像与所述原始图像之间的第一损失函数，至少对所述目标重建模型的拓扑结构进行优化，以得到第一优化模型及其对应的纹理信息和相机位姿，包括：

<...

【专利技术属性】
技术研发人员：盘博文，吕江靖，吕承飞，
申请(专利权)人：淘宝中国软件有限公司，
类型：发明
国别省市：