纹理图像重建方法、装置、计算机设备和存储介质制造方法及图纸

本申请涉及一种纹理图像重建方法、装置、计算机设备、存储介质和计算机程序产品。方法包括：分别对目标纹理图像和其对应的纹理图像集进行频率分解，得到目标纹理图像对应的第一目标纹理图像和第二目标纹理图像、纹理图像集对应的第一纹理图像集和第二纹理图像集；第一纹理图像集对应的频率小于第二纹理图像集对应的频率，第一目标纹理图像对应的频率小于第二目标纹理图像对应的频率；基于第一纹理图像集对第一目标纹理图像进行图像增强得到第一增强纹理图像；基于第二纹理图像集对第二目标纹理图像进行图像增强得到第二增强纹理图像；融合第一增强纹理图像和第二增强纹理图像得到目标纹理图像对应的重建纹理图像，从而提高纹理图像重建的质量。纹理图像重建的质量。纹理图像重建的质量。

【技术实现步骤摘要】
纹理图像重建方法、装置、计算机设备和存储介质


[0001]本申请涉及图像处理
，特别是涉及一种纹理图像重建方法、装置、计算机设备、存储介质和计算机程序产品。

技术介绍

[0002]随着计算机技术的发展，人们的工作和生活都带来了非常大的变化。例如，原来的动画制作或游戏制作等通常都是基于平面对象进行的，而现在随着科技的发展，出现了越来越多支持三维对象的场景，相应的，对纹理图像的质量要求也越来越高。
[0003]传统技术中，需要收集大量的纹理图像样本来训练用于优化纹理图像的机器学习模型。然而，模型的训练效果和训练样本息息相关，纹理图像的个体差异性较大，难以训练得到表征优异的模型，难以训练得到通用的模型，存在纹理图像重建质量不佳的问题。

技术实现思路

[0004]基于此，有必要针对上述技术问题，提供一种能够提高纹理图像的重建质量的纹理图像重建方法、装置、计算机设备、计算机可读存储介质和计算机程序产品。
[0005]本申请提供了一种纹理图像重建方法。所述方法包括：获取目标纹理图像和所述目标纹理图像对应的纹理图像集；所述纹理图像集中的纹理图像所呈现的纹理和所述目标纹理图像所呈现的纹理是相互匹配的，所述纹理图像集是基于不同分辨率的纹理图像得到的；分别对所述纹理图像集和所述目标纹理图像进行频率分解，得到所述纹理图像集对应的第一纹理图像集和第二纹理图像集、所述目标纹理图像对应的第一目标纹理图像和第二目标纹理图像；所述第一纹理图像集对应的频率小于所述第二纹理图像集对应的频率，所述第一目标纹理图像对应的频率小于所述第二目标纹理图像对应的频率；基于所述第一纹理图像集对所述第一目标纹理图像进行图像增强，得到所述第一目标纹理图像对应的第一增强纹理图像；基于所述第二纹理图像集对所述第二目标纹理图像进行图像增强，得到所述第二目标纹理图像对应的第二增强纹理图像；融合所述第一增强纹理图像和所述第二增强纹理图像，得到所述目标纹理图像对应的重建纹理图像。
[0006]本申请还提供了一种纹理图像重建装置。所述装置包括：纹理图像获取模块，用于获取目标纹理图像和所述目标纹理图像对应的纹理图像集；所述纹理图像集中的纹理图像所呈现的纹理和所述目标纹理图像所呈现的纹理是相互匹配的，所述纹理图像集是基于不同分辨率的纹理图像得到的；图像分解模块，用于分别对所述纹理图像集和所述目标纹理图像进行频率分解，得到所述纹理图像集对应的第一纹理图像集和第二纹理图像集、所述目标纹理图像对应的第一目标纹理图像和第二目标纹理图像；所述第一纹理图像集对应的频率小于所述第二纹
理图像集对应的频率，所述第一目标纹理图像对应的频率小于所述第二目标纹理图像对应的频率；第一图像增强模块，用于基于所述第一纹理图像集对所述第一目标纹理图像进行图像增强，得到所述第一目标纹理图像对应的第一增强纹理图像；第二图像增强模块，用于基于所述第二纹理图像集对所述第二目标纹理图像进行图像增强，得到所述第二目标纹理图像对应的第二增强纹理图像；图像融合模块，用于融合所述第一增强纹理图像和所述第二增强纹理图像，得到所述目标纹理图像对应的重建纹理图像。
[0007]一种计算机设备，包括存储器和处理器，所述存储器存储有计算机程序，所述处理器执行所述计算机程序时实现上述纹理图像重建方法所述的步骤。
[0008]一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现上述纹理图像重建方法所述的步骤。
[0009]一种计算机程序产品，包括计算机程序，所述计算机程序被处理器执行时实现上述纹理图像重建方法所述的步骤。
[0010]上述纹理图像重建方法、装置、计算机设备、存储介质和计算机程序产品，获取目标纹理图像和目标纹理图像对应的纹理图像集，纹理图像集中的纹理图像所呈现的纹理和目标纹理图像所呈现的纹理是相互匹配的，纹理图像集是基于不同分辨率的纹理图像得到的，借助纹理图像集来对目标纹理图像进行纹理重建。分别对纹理图像集和目标纹理图像进行频率分解，得到纹理图像集对应的第一纹理图像集和第二纹理图像集、目标纹理图像对应的第一目标纹理图像和第二目标纹理图像，通过频率分解可以将纹理图像集分解为表示图像低频分量的第一纹理图像集和表示图像高频分量的第二纹理图像集，将第一目标纹理图像分解为表示图像低频分量的第一目标纹理图像和表示图像高频分量的第二目标纹理图像。基于第一纹理图像集对第一目标纹理图像进行图像增强，可以得到第一目标纹理图像对应的第一增强纹理图像，相当于增强了目标纹理图像中的低频分量，例如增强了光照。基于第二纹理图像集对第二目标纹理图像进行图像增强，可以得到第二目标纹理图像对应的第二增强纹理图像，相当于增强了目标纹理图像中的高频分量，例如增强了纹理细节。融合第一增强纹理图像和第二增强纹理图像，得到目标纹理图像对应的重建纹理图像。这样，可以将低质量的目标纹理图像转化为清晰度高且细节信息丰富的重建纹理图像，确保生成的重建纹理图像在保留原有纹理信息的同时，加强了清晰度，加强了更多纹理细节，大大提高了纹理图像的重建质量。
附图说明
[0011]图1为一个实施例中纹理图像重建方法的应用环境图；图2为一个实施例中纹理图像重建方法的流程示意图；图3为一个实施例中基于第一纹理图像集对第一目标纹理图像进行图像增强的流程示意图；图4为一个实施例中基于第一纹理图像集和第一目标纹理图像得到中间纹理特征图的流程示意图；图5为一个实施例中对中间纹理特征图进行注意力处理得到目标纹理特征图的流
程示意图；图6为一个实施例中基于第二纹理图像集对第二目标纹理图像进行图像增强的流程示意图；图7为另一个实施例中纹理图像重建方法的流程示意图；图8为一个实施例中纹理重建模型的结构示意图；图9为一个实施例中纹理图像重建装置的结构框图；图10为一个实施例中计算机设备的内部结构图；图11为另一个实施例中计算机设备的内部结构图。
具体实施方式
[0012]为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本申请进行进一步详细说明。应当理解，此处描述的具体实施例仅仅用以解释本申请，并不用于限定本申请。
[0013]本申请实施例提供的纹理图像重建方法，可以应用于如图1所示的应用环境中。其中，终端102通过网络与服务器104进行通信。数据存储系统可以存储服务器104需要处理的数据。数据存储系统可以集成在服务器104上，也可以放在云上或其他服务器上。其中，终端102可以但不限于是各种台式计算机、笔记本电脑、智能手机、平板电脑、物联网设备和便携式可穿戴设备，物联网设备可为智能音箱、智能电视、智能空调、智能车载设备等。便携式可穿戴设备可为智能手表、智能手环、头戴设备等。服务器104可以用独立的服务器或者是多个服务器组成的服务器集群或者云服务器来实现。
[0014]终端和服务器均可单独用于执行本申请实施例中提供的纹理图像重建方法。
[0015]例如，服务器获取目标纹理图像和目标纹理图像对应的纹理图像集，其中，纹理图像集中的纹理图像所呈现的纹理和目标纹理图像本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种纹理图像重建方法，其特征在于，所述方法包括：获取目标纹理图像和所述目标纹理图像对应的纹理图像集；所述纹理图像集中的纹理图像所呈现的纹理和所述目标纹理图像所呈现的纹理是相互匹配的，所述纹理图像集是基于不同分辨率的纹理图像得到的；分别对所述纹理图像集和所述目标纹理图像进行频率分解，得到所述纹理图像集对应的第一纹理图像集和第二纹理图像集、所述目标纹理图像对应的第一目标纹理图像和第二目标纹理图像；所述第一纹理图像集对应的频率小于所述第二纹理图像集对应的频率，所述第一目标纹理图像对应的频率小于所述第二目标纹理图像对应的频率；基于所述第一纹理图像集对所述第一目标纹理图像进行图像增强，得到所述第一目标纹理图像对应的第一增强纹理图像；基于所述第二纹理图像集对所述第二目标纹理图像进行图像增强，得到所述第二目标纹理图像对应的第二增强纹理图像；融合所述第一增强纹理图像和所述第二增强纹理图像，得到所述目标纹理图像对应的重建纹理图像。2.根据权利要求1所述的方法，其特征在于，所述分别对所述纹理图像集和所述目标纹理图像进行频率分解，得到所述纹理图像集对应的第一纹理图像集和第二纹理图像集、所述目标纹理图像对应的第一目标纹理图像和第二目标纹理图像，包括：对所述纹理图像集进行高斯分解，得到所述纹理图像集对应的第一纹理图像集和第二纹理图像集；对所述目标纹理图像进行高斯分解，得到所述目标纹理图像对应的第一目标纹理图像和第二目标纹理图像。3.根据权利要求1所述的方法，其特征在于，所述基于所述第一纹理图像集对所述第一目标纹理图像进行图像增强，得到所述第一目标纹理图像对应的第一增强纹理图像，包括：分别对所述第一纹理图像集和所述第一目标纹理图像进行卷积处理，得到所述第一纹理图像集和所述第一目标纹理图像分别对应的初始纹理特征图；将所述第一纹理图像集和所述第一目标纹理图像分别对应的初始纹理特征图进行拼接处理，得到中间纹理特征图；对所述中间纹理特征图进行注意力处理，得到目标纹理特征图；基于所述目标纹理特征图和所述第一目标纹理图像，得到所述目标纹理图像对应的第一增强纹理图像。4.根据权利要求3所述的方法，其特征在于，所述分别对所述第一纹理图像集和所述第一目标纹理图像进行卷积处理，得到所述第一纹理图像集和所述第一目标纹理图像分别对应的初始纹理特征图，包括：基于至少两个第一卷积核，对所述第一纹理图像集进行卷积处理，得到至少两个第一卷积特征图，拼接所述至少两个第一卷积特征图得到所述第一纹理图像集对应的初始纹理特征图；所述至少两个第一卷积核包括至少两个尺寸的第一卷积核；基于至少两个第二卷积核，对所述第一目标纹理图像进行卷积处理，得到至少两个第二卷积特征图，拼接所述至少两个第二卷积特征图得到所述第一目标纹理图像对应的初始纹理特征图；所述至少两个第二卷积核包括至少两个尺寸的第二卷积核。
5.根据权利要求3所述的方法，其特征在于，所述将所述第一纹理图像集和所述第一目标纹理图像分别对应的初始纹理特征图进行拼接处理，得到中间纹理特征图，包括：拼接所述第一纹理图像集和所述第一目标纹理图像分别对应的初始纹理特征图，得到第一纹理特征图，对所述第一纹理特征图进行整流处理，得到第二纹理特征图；对所述第二纹理特征图进行卷积处理，得到第三纹理特征图，对所述第三纹理特征图进行上采样处理，得到第四纹理特征图，对所述第四纹理特征图进行整流处理，得到中间纹理特征图。6.根据权利要求3所述的方法，其特征在于，所述对所述中间纹理特征图进行注意力处理，得到目标纹理特征图，包括：对所述中间纹理特征图依次进行至少两次有序的注意力处理，得到至少两个有序的注意力纹理特征图；拼接所述至少两个有序的注意力纹理特征图，得到第一拼接纹理特征图，对所述第一拼接纹理特征图进行卷积处理，得到卷积纹理特征图；从所述至少两个有序的注意力纹理特征图中获取结尾注意力纹理特征图，融合所述结尾注意力纹理特征图和所述卷积纹理特征图，得到融合纹理特征图；拼接所述至少两个有序的注意力纹理特征图和所述融合纹理特征图，得到第二拼接纹理特征图，对所述第二拼接纹理特征图进行卷积处理，得到目标纹理特征图。7.根据权利要求3所述的方法，其特征在于，所述基于所述目标纹理特征图和所述第一目标纹理图像，得到所述目标纹理图像对应的第一增强纹理图像，包括：对所述目标纹理特征图进行卷积处理，得到补充纹理特征图；融合所述补充纹理特征图和所述第一目标纹理图像，得到所述目标纹理图像对应的第一增强纹理图像。8.根据权利要求1所述的方...

【专利技术属性】
技术研发人员：徐东，
申请(专利权)人：腾讯科技深圳有限公司，
类型：发明
国别省市：