图像数据处理方法及装置制造方法及图纸

本申请实施例提供一种图像数据处理方法及装置，图像数据处理方法包括：至少以第一图像在第一分辨率下的图像数据和第二图像在第二分辨率下的图像数据为超分辨率网络模型的输入，获得超分辨率网络模型输出的第一图像在第三分辨率下的图像数据；第二图像是第一图像的上一帧图像，第一分辨率小于第三分辨率，第二图像在第二分辨率下的图像数据中像素总数和第一图像在第三分辨率下的图像数据的像素总数相同。总数相同。总数相同。

【技术实现步骤摘要】
图像数据处理方法及装置


[0001]本申请涉及图像处理
，尤其涉及一种图像数据处理方法及装置。

技术介绍

[0002]随着显示技术的发展，图像的分辨率向更高分辨率发展，如图像的分辨率从720P发展到1080P，又从1080P发展到2k，其中P表示像素总行数，如720P表示有720行像素；k表示像素总列数，如2k表示有2000列像素。电子设备在渲染高分辨率图像过程中，保证高分辨率图像的图像质量是一个亟需解决的问题。

技术实现思路

[0003]本申请提供了一种图像数据处理方法，目的在于解决图像质量的问题。为了实现上述目的，本申请提供了以下技术方案：
[0004]第一方面，本申请提供一种图像数据处理方法，图像数据处理方法包括：至少以第一图像在第一分辨率下的图像数据和第二图像在第二分辨率下的图像数据为超分辨率网络模型的输入，获得超分辨率网络模型输出的第一图像在第三分辨率下的图像数据；第二图像是第一图像的上一帧图像，第一分辨率小于第三分辨率，第二图像在第二分辨率下的图像数据中像素总数和第一图像在第三分辨率下的图像数据的像素总本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种图像数据处理方法，其特征在于，所述方法包括：至少以第一图像在第一分辨率下的图像数据和第二图像在第二分辨率下的图像数据为超分辨率网络模型的输入，获得所述超分辨率网络模型输出的所述第一图像在第三分辨率下的图像数据；所述第二图像是所述第一图像的上一帧图像，所述第一分辨率小于所述第三分辨率，所述第二图像在第二分辨率下的图像数据中像素总数和所述第一图像在第三分辨率下的图像数据的像素总数相同。2.根据权利要求1所述的方法，其特征在于，所述超分辨率网络模型的输入还包括所述第一图像在所述第一分辨率下的运动向量，所述第一图像在所述第一分辨率下的运动向量和所述第二图像在所述第二分辨率下的图像数据用于生成第一图像数据，所述第一图像数据中像素运动情况与所述第一图像在所述第一分辨率下的图像数据中像素运动情况相同，所述像素运动情况是相对所述第二图像在所述第二分辨率下的图像数据中的像素的。3.根据权利要求2所述的方法，其特征在于，所述超分辨率网络模型的输入还包括所述第一图像在所述第一分辨率下的动静分离数据，所述第一图像在所述第一分辨率下的动静分离数据用于调整所述第一图像数据中像素的取值。4.根据权利要求1至3中任意一项所述的方法，其特征在于，所述第一图像在所述第一分辨率下的运动向量和所述第二图像在所述第二分辨率下的图像数据用于生成第一图像数据包括：基于所述第一图像在所述第一分辨率下的运动向量，确定所述第二图像在所述第二分辨率下的图像数据中像素在所述第一图像中的位置，将所述像素的取值赋值给位于所述位置的像素；在基于所述第一图像在所述第一分辨率下的运动向量遍历完所有像素并完成所有像素的赋值后，得到所述第一图像数据。5.根据权利要求3所述的方法，其特征在于，所述第一图像在所述第一分辨率下的动静分离数据用于调整所述第一图像数据中像素的取值包括：如果所述第一图像数据中第一像素的动静属性与所述第一图像数据中第二像素的动静属性相同，维持所述第一像素的取值不变，所述第一像素的取值是由所述第二像素赋值得到；如果所述第一像素的动静属性与所述第二像素的动静属性不同，调整所述第一像素的取值为默认值。6.根据权利要求1至5中任意一项所述的方法，其特征在于，所述第二分辨率和所述第一分辨率相同，所述第二图像在所述第二分辨率下的图像数据和所述第一图像在第三分辨率下的图像数据满足关系，(w/r)(h/r)(c*r*r)＝w*h*c，w是所述第一图像在所述第三分辨率下的宽度，h是所述第一图像在所述第三分辨率下的高度，c是所述第一图像在所述第三分辨率下的通道数，r是所述第一分辨率和所述第三分辨率之间的倍数关系。7.根据权利要求1至6中任意一项所述的方法，其特征在于，所述超分辨率网络模型的输入还包括所述第一图像在所述第一分辨率下的运动向量和所述第一图像在所述第一分辨率下的动静分离数据；所述获得所述超分辨率网络模型输出的所述第一图像在第三分辨率下的图像数据包括：
以所述第一图像在所述第一分辨率下的运动向量和所述第二图像在所述第二分辨率下的图像数据为所述超分辨率网络模型中对齐层的输入，获得所述对齐层输出的图像数据，所述对齐层输出的图像数据中像素运动情况与所述第一图像在所述第一分辨率下的图像数据中像素运动情况相同，所述像素运动情况是相对所述第二图像在所述第二分辨率下的图像数据中的像素的；以所述对齐层输出的图像数据和所述第一图像在所述第一分辨率下的动静分离数据为所述超分辨率网络模型中去重影层的输入，获得所述去重影层输出的图像数据；以所述去重影层输出的图像数据和所述第一图像在所述第一分辨率下的图像数据为所述超分辨率网络模型中拼接层的输入，获得所述拼接层输出的图像数据；以所述拼接层输出的图像数据为所述超分辨率网络模型中网络层的输入，获得所述网络层输出的图像数据；以所述网络层输出的图像数据为所述超分辨率网络模型中D
‑
S转换层的输入，获得所述D
‑
S转换层输出的所述第一图像在所述第三分辨率下的图像数据。8.根据权利要求1至6中任意一项所述的方法，其特征在于，所述第二分辨率小于所述第一分辨率，所述第二图像在所述第二分辨率下的图像数据和所述第一图像在第三分辨率下的图像数据满足关系，(w/(r*t))(h/(r*t))(c*r*r*t*t)＝w*h*c，w是所述第一图像在所述第三分辨率下的宽度，h是所述第一图像在所述第三分辨率下的高度，c是所述第一图像在所述第三分辨率下的通道数，r是所述第一分辨率和所述第三分辨率之间的倍数关系，t是如果所述第一图像在第一分辨率下的图像数据进行S
‑
D转换时的倍数。9.根据权利要求1至6、8中任意一项所述的方法，其特征在于，所述超分辨率网络模型的输入还包括所述第一图像在所述第一分辨率下的运动向量和所述第一图像在所述第一分辨率下的动静分离数据；所述获得所述超分辨率网络模型输出的所述第一图像在第三分辨率下的图像数据包括：以所述第一图像在所述第一分辨率下的运动向量和所述第二图像在所述第二分辨率下的图像数据为所述超分辨率网络模型中对齐层的输入，获得所述对齐层输出的图像数据，所述对齐层输出的图像数据中像素运动情况与所述第一图像在所述第一分辨率下的图像数据中像素运动情况相同，所述像素运动情况是相对所述第二图像在所述第二分辨率下的图像数据中的像素的；以所述对齐层输出的图像数据和所述第一图像在所述第一分辨率下的动静分离数据为所述超分辨率网络模型中去重影层的输入，获得所述去重影层输出的图像数据；以所述去重影层输出的图像数据为所述超分辨率网络模型中第一S
‑
D转换层的输入，获得所述第一S
‑
D转换层输出的图像数据；以所述第一图像在所述第一分辨率下的图像数据为所述超分辨率网络模型中第二S
‑
D转换层的输入，获得所述第二S
‑
D转换层输出的图像数据；以所述第一S
‑
D转换层输出的图像数据和所述第二S
‑
D转换层输出的图像数据为所述超分辨率网络模...

【专利技术属性】
技术研发人员：秦园，匡洋铸，
申请(专利权)人：荣耀终端有限公司，
类型：发明
国别省市：