一种图像处理方法、装置及终端设备制造方法及图纸

本发明专利技术适用于图像处理技术领域，提供了一种图像处理方法、装置及终端设备，通过获取待处理图像，再对所述待处理图像的数据维度进行预设变换，并对经预设变换后的图像数据进行归一化处理，然后对经归一化处理后的图像数据进行特征提取，得到提取后的特征图像，按预设方式对所述特征图像进行尺度超分处理，并将经尺度超分处理后的所述特征图像输入至卷积层进行处理，经所述卷积层输出所需尺度的目标图像，从而使得仅需提取一次特征图像即可对同一待处理图像进行任意尺度的超分，有效满足了人们对非整数倍的图像超分的需求，并有效提高了任意尺度图像超分的效率，而且经卷积层对超分后的图像进行重建，使得图像超分效果更好。使得图像超分效果更好。使得图像超分效果更好。

【技术实现步骤摘要】
一种图像处理方法、装置及终端设备


[0001]本专利技术属于图像处理
，尤其涉及一种图像处理方法、装置及终端 设备。

技术介绍

[0002]超分辨率图像重建是计算机视觉和图像处理领域的一个重要研究方向，在 大量的电子图像应用领域，人们经常期望得到任意尺度的高分辨率图像。高分 辨率意味着图像中的像素密度高，能够提供更多的细节，而这些细节在许多实 际应用中不可或缺。
[0003]随着深度学习方法的快速发展，进一步促进了超分辨率图像重建方法的进 步，基于深度学习的图像超分辨率技术取得了前所未有的突破，如EDSR、 ESRGAN等超分技术。然而这些超分方法均存在一个约束：图像超分尺度需要 事先设定且只能进行整数倍超分(如2、3、4以及8倍超分)，而对于非1.5倍、 2.5倍这种非整数倍超分则无法满足。而在实际应用中，任意倍数的图像超分往 往具有更多的应用。

技术实现思路

[0004]有鉴于此，本专利技术实施例提供了一种图像处理方法、装置及终端设备，以 解决现有利用图像超分过程无法满足人们对非整数倍的图像超分的需求的问题。
[0005]本专利技术实施例的第一方面提供了一种图像处理方法，包括：
[0006]获取待处理图像；
[0007]对所述待处理图像的数据维度进行预设变换，并对经预设变换后的图像数 据进行归一化处理；
[0008]对经归一化处理后的图像数据进行特征提取，得到提取后的特征图像；
[0009]按预设方式对所述特征图像进行尺度超分处理，并将经尺度超分处理后的 所述特征图像输入至卷积层进行处理，经所述卷积层输出所需尺度的目标图像。
[0010]本专利技术实施例的第二方面提供了一种图像处理装置，包括：
[0011]图像获取单元，用于获取待处理图像；
[0012]图像数据处理单元，用于对所述待处理图像的数据维度进行预设变换，并 对经预设变换后的图像数据进行归一化处理；
[0013]图像特征提取单元，用于对经归一化处理后的图像数据进行特征提取，得 到提取后的特征图像；
[0014]图像超分处理单元，用于按预设方式对所述特征图像进行尺度超分处理， 并将经尺度超分处理后的所述特征图像输入至卷积层进行处理，经所述卷积层 输出所需尺度的目标图像。
[0015]本专利技术实施例的第三方面提供了一种终端设备，包括：
[0016]存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算 机程序，其中，所述处理器执行所述计算机程序时实现本专利技术实施例的第一方 面提供的图像处理方法的步骤。
[0017]其中，所述计算机程序包括：
[0018]图像获取单元，用于获取待处理图像；
[0019]图像数据处理单元，用于对所述待处理图像的数据维度进行预设变换，并 对经预设变换后的图像数据进行归一化处理；
[0020]图像特征提取单元，用于对经归一化处理后的图像数据进行特征提取，得 到提取后的特征图像；
[0021]图像超分处理单元，用于按预设方式对所述特征图像进行尺度超分处理， 并将经尺度超分处理后的所述特征图像输入至卷积层进行处理，经所述卷积层 输出所需尺度的目标图像。
[0022]本专利技术实施例的第四方面提供了一种计算机可读存储介质，所述计算机可 读存储介质存储有计算机程序，其中，所述计算机程序被处理器执行时实现本 专利技术实施例的第一方面提供的图像处理方法的步骤。
[0023]其中，所述计算机程序包括：
[0024]图像获取单元，用于获取待处理图像；
[0025]图像数据处理单元，用于对所述待处理图像的数据维度进行预设变换，并 对经预设变换后的图像数据进行归一化处理；
[0026]图像特征提取单元，用于对经归一化处理后的图像数据进行特征提取，得 到提取后的特征图像；
[0027]图像超分处理单元，用于按预设方式对所述特征图像进行尺度超分处理， 并将经尺度超分处理后的所述特征图像输入至卷积层进行处理，经所述卷积层 输出所需尺度的目标图像。
[0028]本专利技术实施例与现有技术相比存在的有益效果是：通过获取待处理图像， 再对所述待处理图像的数据维度进行预设变换，并对经预设变换后的图像数据 进行归一化处理，然后对经归一化处理后的图像数据进行特征提取，得到提取 后的特征图像，按预设方式对所述特征图像进行尺度超分处理，并将经尺度超 分处理后的所述特征图像输入至卷积层进行处理，经所述卷积层输出所需尺度 的目标图像，从而使得仅需提取一次特征图像即可对同一待处理图像进行任意 尺度的超分，有效满足了人们对非整数倍的图像超分的需求，并有效提高了任 意尺度图像超分的效率，而且经卷积层对超分后的图像进行重建，使得图像超 分效果更好。
附图说明
[0029]为了更清楚地说明本专利技术实施例中的技术方案，下面将对实施例或现有技 术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅 仅是本专利技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳 动性的前提下，还可以根据这些附图获得其他的附图。
[0030]图1是本专利技术实施例提供的一种图像处理方法的实现流程图；
[0031]图2是本专利技术实施例提供的一种对原始图像进行预处理的方法的具体实现 流程图；
[0032]图3是本专利技术实施例提供的一种按预设方式对所述特征图像进行尺度超分 处理，
并将经尺度超分处理后的所述特征图像输入至卷积层进行处理，经所述 卷积层输出所需尺度的目标图像的方法的具体实现流程图；
[0033]图4是本专利技术实施例提供的一种权值不共享方式的示意图；
[0034]图5是本专利技术实施例提供的另一种按预设方式对所述特征图像进行尺度超 分处理，并将经尺度超分处理后的所述特征图像输入至卷积层进行处理，经所 述卷积层输出所需尺度的目标图像的方法的具体实现流程图；
[0035]图6是本专利技术实施例提供的一种权值共享方式的示意图；
[0036]图7是本专利技术实施例提供的一种图像处理装置的示意图；
[0037]图8是本专利技术实施例提供的一种终端设备的示意图。
具体实施方式
[0038]以下描述中，为了说明而不是为了限定，提出了诸如特定系统结构、技术 之类的具体细节，以便透彻理解本专利技术实施例。然而，本领域的技术人员应当 清楚，在没有这些具体细节的其它实施例中也可以实现本专利技术。在其它情况中， 省略对众所周知的系统、系统、电路以及方法的详细说明，以免不必要的细节 妨碍本专利技术的描述。
[0039]为了说明本专利技术所述的技术方案，下面通过具体实施例来进行说明。请参 考图1，图1示出了本专利技术实施例提供的一种图像处理方法的实现流程，详述 如下：
[0040]在步骤S101中，获取待处理图像。
[0041]在本专利技术实施例中，预定文件格式为RAW文件格式，也即上述待处理图 像为未经处理的RAW图像，亦为未经去马赛克、去噪等导致部分信息丢失的 无损图像本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种图像处理方法，其特征在于，所述方法包括：获取待处理图像；对所述待处理图像的数据维度进行预设变换，并对经预设变换后的图像数据进行归一化处理；对经归一化处理后的图像数据进行特征提取，得到提取后的特征图像；按预设方式对所述特征图像进行尺度超分处理，并将经尺度超分处理后的所述特征图像输入至卷积层进行处理，经所述卷积层输出所需尺度的目标图像。2.如权利要求1所述的方法，其特征在于，所述对所述待处理图像的数据维度进行预设变换的步骤，包括：将所述待处理图像的数据的维度H
×
W
×
1变换为其中，H为所述待处理图像的高度，W为所述待处理图像的宽度。3.如权利要求1所述的方法，其特征在于，所述按预设方式对所述特征图像进行尺度超分处理，并将经尺度超分处理后的所述特征图像输入至卷积层进行处理，经所述卷积层输出所需尺度的目标图像的步骤，包括：基于双线性插值或双三次插值算法，构建所述目标图像与所述特征图像中各个像素的位置关系；根据所述位置关系，通过所述目标图像的像素的第一坐标确定所述特征图像对应像素的第二坐标；从所述特征图像中，选择以所述第二坐标为中心的局部区域I；根据权值参数V，构建所述目标图像的输出像素O与所述局部区域I的权值关系；将所述权值关系和所述局部区域I输入至卷积层进行图像重建以得到所需尺度的目标图像。4.如权利要求3所述的方法，其特征在于，在所述根据权值参数V，构建所述目标图像的输出像素O与所述局部区域I的权值关系的步骤之后，还包括：构建像素输入与输出对，采用随机梯度下降法，训练学习每个像素的权值参数V。5.如权利要求1所述的方法，其特征在于，所述按预设方式对所述特征图像进行尺...

【专利技术属性】
技术研发人员：王树朋，
申请(专利权)人：武汉TCL集团工业研究院有限公司，
类型：发明
国别省市：