一种图像处理方法、图像处理装置和电子设备制造方法及图纸

技术编号:27414474 阅读:24 留言:0更新日期:2021-02-21 14:30
本申请公开了一种图像处理方法、图像处理装置和电子设备,属于图像处理技术领域。其中,图像处理方法包括:获取相同对象的第一图像和第二图像,其中,第二图像的清晰度高于第一图像的清晰度;获取流动矩阵;通过流动矩阵,对第二图像的像素点进行位置偏移,得到第三图像,其中,第三图像是与第一图像相对齐的图像;将第三图像和第一图像进行图像融合,生成第四图像,其中,第四图像的清晰度高于第一图像。本申请实施例通过流动矩阵,将高清人脸图像中的细节信息准确的还原到模糊人脸图像中,保证高清处理后的照片与原照片拍摄主体的原有细节保持一致,在有效提高照片清晰度的同时保证照片主体的原有细节不变。主体的原有细节不变。主体的原有细节不变。

【技术实现步骤摘要】
一种图像处理方法、图像处理装置和电子设备


[0001]本申请属于图像处理
,具体涉及一种图像处理方法、一种图像处理装置和一种电子设备。

技术介绍

[0002]在相关技术中,由于拍摄设备限制、网络限制、图像压缩或其他原因,导致照片的清晰度低,影响照片观感。目前,基于图像处理技术可以在一定程度上提高照片的分辨率,但照片细节的补充需要依靠于网络的“凭空想象”。
[0003]对于人脸等高辨识度的照片,网络“凭空想象”的细节与照片主体原有的细节不同,会导致人脸身份细节被改变。如何解决在提高照片清晰度的同时保证照片主体的原有细节不变,是目前亟待解决的技术问题。

技术实现思路

[0004]本申请实施例的目的是提供一种图像处理方法、装置、电子设备和可读存储介质,能够解决如何在提高照片清晰度的同时保证照片主体的原有细节不变的问题。
[0005]为了解决上述技术问题,本申请是这样实现的:
[0006]第一方面,本申请实施例提供了一种图像处理方法,该方法包括:
[0007]获取相同对象的第一图像和第二图像,其中,第二图像的清晰度高于第一图像的清晰度;
[0008]获取流动矩阵;
[0009]通过流动矩阵,对第二图像的像素点进行位置偏移,得到第三图像,其中,第三图像是与与第一图像相对齐的图像;
[0010]将第三图像和第一图像进行图像融合,生成第四图像,其中,第四图像的清晰度高于第一图像。
[0011]第二方面,本申请实施例提供了一种图像处理装置,包括:<br/>[0012]获取模块,用于获取相同对象的第一图像和第二图像,其中,第二图像的清晰度高于第一图像的清晰度;
[0013]处理模块,用于获取流动矩阵,通过流动矩阵对第二图像的像素点进行位置偏移,得到第三图像,其中,第三图像是与第一图像相对齐的图像;以及
[0014]对第三图像和第一图像进行图像融合,生成第四图像,其中,第四图像的清晰度高于第一图像。
[0015]第三方面,本申请实施例提供了一种电子设备,该电子设备包括处理器、存储器及存储在存储器上并可在处理器上运行的程序或指令,程序或指令被处理器执行时实现如第一方面提供的图像处理方法的步骤。
[0016]第四方面,本申请实施例提供了一种可读存储介质,该可读存储介质上存储程序或指令,该程序或指令被处理器执行时实现如第一方面提供的图像处理方法的步骤。
[0017]第五方面,本申请实施例提供了一种芯片,芯片包括处理器和通信接口,通信接口和处理器耦合,处理器用于运行程序或指令,实现如第一方面提供的图像处理方法的步骤。
[0018]在本申请实施例中,在对第清晰度的第一图像进行高清化处理时,通过流动矩阵,将拍摄主体为同一对象的,且清晰度高于第一图像的第二图像的像素点进行偏移,通过像素偏移的方式,将第二图像处理成与第一图像相对齐的第三图像。
[0019]具体地,假设第一图像和第二图像均为人脸图像,则对第二图像进行像素偏移后,得到人脸部分与第一图像的人脸部分相对齐的人脸图像,即上述第三图像。其中,“对齐”指的是人脸的轮廓重合,或眼睛、鼻子、嘴等关键五官的位置重合。
[0020]在得到与第一图像对齐,且由于清晰度更高而保留了更多细节的第三图像之后,对第一图像和第三图像进行融合。从而一方面提高第一图像的清晰度,同时将第三图像上的人脸细节,如皱纹、痣、酒窝等细节叠加补充到第一图像上,从而使得在第一图像上补充的细节为同一个人物的面部细节,有效地保证了提高清晰度后的照片细节,与照片拍摄主体的原有细节保持一致,从而有效地解决了如何在提高照片清晰度的同时保证照片主体的原有细节不变的技术问题,能够显著提高图片高清化处理的处理效果。
附图说明
[0021]图1示出了根据本申请实施例的图像处理方法的流程图之一;
[0022]图2示出了根据本申请实施例的图像处理方法的流程图之二;
[0023]图3示出了根据本申请实施例的图像处理方法的流程图之三;
[0024]图4示出了根据本申请实施例的图像处理方法的流程图之四;
[0025]图5示出了流动矩阵中单通道点流动方向的示意图;
[0026]图6示出了根据本申请实施例的图像处理方法的流程图之五;
[0027]图7示出了根据本申请实施例的图像处理方法的流程图之六;
[0028]图8示出了根据本申请实施例的图像处理方法的流程图之七;
[0029]图9示出了根据本申请实施例的图像处理方法的流程图之八;
[0030]图10示出了根据本申请实施例的图像处理方法的流程图之九;
[0031]图11示出了根据本申请实施例的图像处理装置的结构框图;
[0032]图12示出了根据申请实施例的电子设备的硬件结构示意图。
具体实施方式
[0033]下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
[0034]本申请的说明书和权利要求书中的术语“第一”、“第二”等是用于区别类似的对象,而不用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,说明书以及权利要求中“和/或”表示所连接对象的至少其中之一,字符“/”,一般表示前后关联对象是一种“或”的关系。
[0035]下面结合附图,通过具体的实施例及其应用场景对本申请实施例提供的图像处理方法、图像处理装置和电子设备进行详细地说明。
[0036]在本申请的一些实施例中,提供了一种图像处理方法,图1示出了根据本申请实施例的图像处理方法的流程图之一,具体地,该图像处理方法可以包括以下步骤:
[0037]步骤102,获取相同对象的第一图像和第二图像;
[0038]在步骤102中,第二图像的清晰度高于第一图像的清晰度。
[0039]步骤104,获取流动矩阵;
[0040]步骤106,通过流动矩阵对第二图像的像素点进行位置偏移,得到第三图像;
[0041]在步骤106中,第三图像是与第一图像相对齐的图像。
[0042]步骤108,将第三图像和第一图像进行图像融合,生成第四图像。
[0043]在步骤108中,第四图像的清晰度高于第一图像。
[0044]在本申请实施例中,在对低清晰度的第一图像进行高清化处理时,通过获取相同对象的第二图像,该第二图像的清晰度高于第一图像,因此第二图像上相较于第一图像保留有更多的细节信息。且同时,第二图像与第一图像中的主体为相同对象,比如第一图像和第二图像为人脸图像时,第二图像和第一图像中的“人脸”属于同一个人物,但可以是不同时间、不同姿势、不同表情下的人脸图像。
[004本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种图像处理方法,其特征在于,包括:获取相同对象的第一图像和第二图像,其中,所述第二图像的清晰度高于所述第一图像的清晰度;获取流动矩阵;通过所述流动矩阵,对所述第二图像的像素点进行位置偏移,得到第三图像,其中,所述第三图像是与所述第一图像相对齐的图像;将所述第三图像和所述第一图像进行图像融合,生成第四图像,其中,所述第四图像的清晰度高于所述第一图像。2.根据权利要求1所述的图像处理方法,其特征在于,所述通过所述流动矩阵,对所述第二图像的像素点进行位置偏移,得到第三图像,包括:确定第一关键点坐标集合和第二关键点坐标集合,所述第一关键点坐标集合包括所述第一图像中至少一个第一关键点的坐标,所述第二关键点坐标集合包括所述第二图像中至少一个第二关键点的坐标;通过所述流动矩阵,对所述第二坐标集合进行坐标转换,得到位置偏移后的第三关键点坐标集合,其中,所述第三关键点坐标集合包括至少一个与所述第一关键点集合重合的关键点的坐标;确定所述第三关键点坐标集合相对与所述第二关键点坐标集合的第一偏移量;根据所述第一偏移量,通过双线性插值法,确定所述第二图像中的其余像素点坐标集合对应的第二偏移量;根据所述第二偏移量,对所述第二图像中的其余像素点坐标进行位置偏移,得到所述第三图像。3.根据权利要求1所述的图像处理方法,其特征在于,所述获取相同对象的第一图像和第二图像,包括:获取第一原始图像和第二原始图像;在所述第一原始图像中,抠取所述对象的所述第一图像,并在所述第二原始图像中,抠取所述对象的所述第二图像。4.根据权利要求2所述的图像处理方法,其特征在于,所述获取流动矩阵,包括:获取预设的目标编码-解码模型,所述目标编码-解码模型包括编码神经网络和解码神经网络,其中,所述解码神经网络包括转置卷积网络和普通卷积网络;按照自然三原色通道,合并所述第一图像和所述第二图像,得到合并图像;通过所述编码神经网络,对所述合并图像进行卷积,并对卷积后的所述合并图像进行归一化处理,得到所述编码神经网络输出的编码数据;通过所述解码神经网络,对所述编码数据进行转置卷积,对转至卷积后的所述编码数据进行归一化处理,并对归一化处理后的所述编码数据进行普通卷积,得到所述解码神...

【专利技术属性】
技术研发人员:石小周
申请(专利权)人:维沃移动通信有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1