图像的生成方法、装置、电子设备及存储介质制造方法及图纸

技术编号:38367907 阅读:21 留言:0更新日期:2023-08-05 17:33
本申请提出了一种图像的生成方法、装置、电子设备及存储介质,其中,方法包括:获取人脸图像的待编辑区域的关键点;基于待编辑区域的关键点,获取待编辑区域的定向语义编辑空间;基于定向语义编辑空间对待编辑区域进行编辑,生成人脸图像对应的目标人脸图像。本申请中,通过定向语义编辑空间可以对人脸图像的不同区域进行定向处理,解耦程度高,使得人脸图像可以实现可控制可解释的语义编辑,进而实现人脸图像的不同程度的语义编辑,优化了人脸图像的语义编辑效果。的语义编辑效果。的语义编辑效果。

【技术实现步骤摘要】
图像的生成方法、装置、电子设备及存储介质


[0001]本申请涉及图像处理领域,尤其涉及一种图像的生成方法、装置、电子设备及存储介质。

技术介绍

[0002]随着生成对抗网络的发展,对于生成器生成的样本质量的需求日渐提高,相关技术中,生成器对进行编辑从而生成样本图像的过程中,生成编辑效果差,解耦程度较低。

技术实现思路

[0003]本申请旨在至少在一定程度上解决相关技术中的技术问题之一。
[0004]为此,本申请第一方面提出一种图像的生成方法。
[0005]本申请第二方面还提出一种图像的生成装置。
[0006]本申请第三方面提出一种电子设备。
[0007]本申请第四方面提出一种计算机可读存储介质。
[0008]本申请第五方面提出一种计算机程序产品。
[0009]本申请第一方面提出一种图像的生成方法,包括:获取人脸图像的待编辑区域的关键点;基于待编辑区域的关键点,获取待编辑区域的定向语义编辑空间;基于定向语义编辑空间对待编辑区域进行编辑,生成人脸图像对应的目标人脸图像。
[00本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种图像的生成方法,其特征在于,包括:获取人脸图像的待编辑区域的关键点;基于所述待编辑区域的关键点,获取所述待编辑区域的定向语义编辑空间;基于所述定向语义编辑空间对所述待编辑区域进行编辑,生成所述人脸图像对应的目标人脸图像。2.根据权利要求1所述的方法,其特征在于,所述基于所述待编辑区域的关键点,获取所述待编辑区域的定向语义编辑空间,包括:基于所述待编辑区域的关键点,获取所述待编辑区域的第一雅克比矩阵;基于所述第一雅克比矩阵,生成所述定向语义编辑空间。3.根据权利要求1所述的方法,其特征在于,所述基于所述待编辑区域的关键点,获取所述待编辑区域的定向语义编辑空间,包括:基于所述待编辑区域的关键点,获取所述待编辑区域的第一雅克比矩阵和第二雅克比矩阵;基于所述第一雅克比矩阵和第二雅克比矩阵,生成所述定向语义编辑空间。4.根据权利要求3所述的方法,其特征在于,所述基于所述第一雅克比矩阵和第二雅克比矩阵,生成所述定向语义编辑空间,包括:基于所述第一雅克比矩阵,获取关键点的语义编辑空间;基于所述第二雅克比矩阵,获取关键点的语义抑制空间;获取所述语义编辑空间与所述语义抑制空间的交集,作为所述定向语义编辑空间。5.根据权利要求4所述的方法,其特征在于,所述基于所述第一雅克比矩阵,获取关键点的语义编辑空间,包括:获取所述第一雅克比矩阵的第一转置雅克比矩阵,并根据所述第一雅克比矩阵和所述第一转置雅克比矩阵,获取第一矩阵;对所述第一矩阵进行特征值和特征向量求解,获取所述第一矩阵中满足第一设定条件的第一特征值所对应的第一特征向量,以构成所述关键点的语义编辑空间。6.根据权利要求5所述的方法,其特征在于,所述获取所述第一矩阵中满足第一设定条件的第一特征值所对应的特征向量,以构成所述关键点的语义编辑空间,包括:获取大于或者等于设定阈值的第一特征值所对应的第一特征向量,以构成所述关键点的语义编辑空间;或者,根据所述第一特征值由高至低对所述第一特征向量进行排序,顺序获取第一设定数量的所述第一特征向量,以构成所述关键点的语义编辑空间。7.根据权利要求4所述的方法,其特征在于,所述基于所述第二雅克比矩阵,获取关键点的语义抑制空间,包括:获取所述第二雅克比矩阵的第二转置雅克比矩阵,并根据所述第二雅克比矩阵和所述第二转置雅克比矩阵,获取第二矩阵;对所述第二矩阵进行特征值和特征向量求解,获取所述第二矩阵中第二设定条件的第二特征值所对应的第二特征向量,以构成所述关键点的语义抑制空间。8.根据权利要求7所述的方法,其特征在于,所述获取所述第二矩阵中第二设定条件的第二特征值所对应的特征向量,以构成所述关键点的语义抑制空间,包括:
获取等于零的第二特征值所对应的第二特征向量,构成所述关键点的语义抑制空间;或者,根据所述第二特征值由低至高对所述第二特征向量进行排序,顺序获取第二设定数量的所述第二特征向量,构成所述关键点的语义抑制空间。9.根据权利要求1

8任一项所述的方法,其特征在于,所述基于所述定向语义编辑空间对所述待编辑区域进行编辑,生成所述人脸图像对应的目标人脸图像,包括:根据所述定向语义编辑空间和偏移参数,获取所述关键点的偏移向量;基于所述偏移向量对所述待编辑区域的关键点进行编辑,以生成所述目标人脸图像。10.根据权利要求1

8任一项所述的方法,其特征在于,所述生成所述人脸图像对应的目标人脸图像之后,还包括:将所述目标人脸图像输入人脸属性分类器中进行分类识别,以获取所述目标人脸图像的多属性的分类标签和所述分类标签下的分类概率;根据所述多属性的分类标签和所述分类标签下的所述分类概率,生成所述目标人脸图像的属性分类解释信息。11.根据权利要求1

8任一项所述的方法,其特征在于,所述获取人脸图像的待编辑区域的关键点之前,还包括:获取正态分布噪声向量,并对所述噪声向量进行仿射变换,生成风格空间的风格向量;将所述风格向量输入图像生成器中,获取所述人脸图像。12.根据权利要求3所述的方法,其特征在于,所述方法还包括:针对所述第一雅克比矩阵和所述第二雅克比矩阵中任一雅克比矩阵,对所述关键点的特征向量进行反向梯度求导,以生成所述任一雅克比矩阵。13.一种图像的生成装置,其特征在于,包括:检测模块,用于获取人脸图像的待编辑区域的关...

【专利技术属性】
技术研发人员:王秋霖李博裴积全
申请(专利权)人:京东科技信息技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1