三维纹理图像的生成方法、装置、计算机设备和存储介质制造方法及图纸

本申请涉及一种三维纹理图像的生成方法、装置、计算机设备、存储介质和计算机程序产品。所述方法可应用于人工智能领域，该方法包括：获取三维物体模型和纹理描述文本；在不同视角下对三维物体模型进行渲染，得到各视角下的第一模型渲染图像和用于表示三维物体模型在各视角下的第一深度图像；针对各视角下的第一模型渲染图像，通过纹理场对第一模型渲染图像进行纹理处理，得到二维的参考纹理；将参考纹理作为噪声数据添加至去噪过程图像，得到加噪图像；根据加噪图像、纹理描述文本和第一深度图像进行图像生成，获得各视角下的纹理图像；拼接各视角下的纹理图像，得到三维纹理图像。采用本方法能够有效提高三维纹理图像的纹理一致性和图像质量。致性和图像质量。致性和图像质量。

【技术实现步骤摘要】
三维纹理图像的生成方法、装置、计算机设备和存储介质


[0001]本申请涉及图像处理
，特别是涉及一种三维纹理图像的生成方法、装置、计算机设备、存储介质和计算机程序产品。

技术介绍

[0002]目前的二维扩散模型，在文本驱动的图像生成上取得了巨大突破，可以合成较高质量且符合文本描述的纹理图像，即利用二维扩散模型生成多个视角的二维纹理图像，然后将这些二维纹理图像拼接成三维纹理图像。这种通过用二维纹理图像来拼接合成三维纹理图像的方式，以不需要额外训练的方式迁移到三维纹理图像的生成任务上，这对缺乏大规模三维数据集的三维纹理图像生成领域是十分有意义的。
[0003]然而，由于生成过程的随机性和二维扩散模型的视角一致性较差，导致所获得的三维纹理图像的纹理一致性和图像质量较差。

技术实现思路

[0004]基于此，有必要针对上述技术问题，提供一种三维纹理图像的生成方法、装置、计算机设备、计算机可读存储介质和计算机程序产品，能够有效提高三维纹理图像的纹理一致性和图像质量。
[0005]第一方面，本申请提供了一种三维纹理图像的本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种三维纹理图像的生成方法，其特征在于，所述方法包括：获取三维物体模型和纹理描述文本；分别在不同视角下对所述三维物体模型进行渲染，得到各所述视角下的第一模型渲染图像和用于表示所述三维物体模型在各所述视角下的第一深度图像；针对各所述视角下的第一模型渲染图像，通过纹理场对所述第一模型渲染图像进行纹理处理，得到二维的参考纹理；将所述参考纹理作为噪声数据添加至去噪过程图像，得到加噪图像；根据所述加噪图像、所述纹理描述文本和所述第一深度图像进行图像生成，获得各所述视角下的纹理图像；拼接各所述视角下的所述纹理图像，得到所述三维物体模型对应的三维纹理图像。2.根据权利要求1所述的方法，其特征在于，所述获取三维物体模型和纹理描述文本包括：接收目标应用发送的用于生成所述三维纹理图像的请求信息；从所述请求信息中读取三维物体模型和纹理描述文本；或者，从所述请求信息读取所述纹理描述文本，并根据所述纹理描述文本生成所述三维物体模型。3.根据权利要求2所述的方法，其特征在于，所述分别在不同视角下对所述三维物体模型进行渲染，得到各所述视角下的第一模型渲染图像和用于表示所述三维物体模型在各所述视角下的第一深度图像包括：依次在所述三维物体模型的至少两个视角进行随机视角选取；分别在每次选取到的所述视角下对所述三维物体模型进行渲染，得到渲染图像序列和深度图像序列；其中，每次选取到的所述视角互不相同；所述渲染图像序列包括各所述视角下的第一模型渲染图像；所述深度图像序列包括用于表示所述三维物体模型在各所述视角下的第一深度图像。4.根据权利要求3所述的方法，其特征在于，所述方法还包括：确定所述三维物体模型在各所述视角下的正对面积；根据所述正对面积确定视角数量；所述依次在所述三维物体模型的至少两个视角进行随机视角选取包括：依次在所述三维物体模型的且个数所述视角数量的视角进行随机视角选取。5.根据权利要求3所述的方法，其特征在于，所述方法还包括：当基于第一视角下的参考纹理生成所述第一视角下的所述纹理图像之后，将所述第一视角下的第一模型渲染图像从所述渲染图像序列中移除，得到更新渲染图像序列；所述第一视角是所述至少两个视角中的一个视角；所述通过纹理场对所述第一模型渲染图像进行纹理处理，得到二维的参考纹理包括：通过纹理场依次对所述更新渲染图像序列中的第一模型渲染图像进行纹理处理，得到二维的其它各所述视角下的参考纹理；其中，其它各所述视角是除所述第一视角之外的各视角。6.根据权利要求3所述的方法，其特征在于，所述纹理图像是扩散模型在目标时间步生成的图像；所述将所述参考纹理作为噪声数据添加至去噪过程图像，得到加噪图像包括：
将所述参考纹理渲染至所述三维物体模型，得到包含所述参考纹理的图像；将包含所述参考纹理的图像作为噪声数据添加至去噪过程图像，得到加噪图像；其中，所述去噪过程图像为添加高斯噪声的图像，或在所述目标时间步的上一时间步生成的纹理图像。7.根据权利要求1所述的方法，其特征在于，所述方法还包括：获取与各所述视角下的第一模型渲染图像对应的掩码图像；将所述掩码图像与所述加噪图像进行融合，得到融合图像；所述根据所述加噪图像、所述纹理描述文本和所述第一深度图像进行图像生成，获得各所述视角下的纹理图像包括：依据所述纹理描述文本和所述第一深度图像对所述融合图像进行去噪处理，得到与所述参考纹理匹配的纹理图像。8.根据权利要求7所述的方法，其特征在于，所述将所述掩码图像与所述加噪图像进行融合，得到融合图像包括：将所述掩码图像、所述...

【专利技术属性】
技术研发人员：樊艳波，李柯涵，伍洋，孙钟前，杨巍，
申请(专利权)人：腾讯科技深圳有限公司，
类型：发明
国别省市：