System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 人脸属性编辑方法、装置、存储介质及电子设备制造方法及图纸_技高网

人脸属性编辑方法、装置、存储介质及电子设备制造方法及图纸

技术编号:40578838 阅读:7 留言:0更新日期:2024-03-06 17:21
本发明专利技术公开了一种人脸属性编辑方法、装置、存储介质及电子设备。其中,该方法包括:获取目标人脸图像,以及需要在目标人脸图像中进行编辑的目标属性;对目标人脸图像进行处理,得到第一人脸特征;获取目标属性的目标属性样式;采用目标属性样式,对第一人脸特征进行迁移处理,得到具有目标属性样式的第二人脸特征;基于目标属性,对第一人脸特征进行过滤,得到过滤人脸特征;基于第二人脸特征和过滤人脸特征,生成重构人脸图像。本发明专利技术解决了相关技术中存在人脸属性编辑后的重构图像质量不理想的技术问题。

【技术实现步骤摘要】

本专利技术涉及图像处理领域,具体而言,涉及一种人脸属性编辑方法、装置、存储介质及电子设备


技术介绍

1、人脸属性编辑是指将人脸图像作为输入,并生成具有指定属性的人脸图像的过程,目标是编辑一个或者多个属性所在区域的同时,保证其他区域的信息不发生变化。相关技术中在基于编码器和解码器架构的人脸属性编辑模型中,编码器深度的增大虽然能够让模型对图像充分理解,并得到完整表达目标属性的特征表示,但在维度被高度压缩的过程中会损失大量原始信息,导致重构的图像质量低下。此外在编辑全局属性例如微笑时,可能会涉及到嘴唇、眼睛、眉毛甚至脸部肌肉,由于卷积核的感受野有限,很难捕捉图片中长距离区域像素之间的关系,导致全局属性的编辑效果不能满足预期。

2、针对上述的问题,目前尚未提出有效的解决方案。


技术实现思路

1、本专利技术实施例提供了一种人脸属性编辑方法、装置、存储介质及电子设备,以至少解决相关技术中存在人脸属性编辑后的重构图像质量不理想的技术问题。

2、根据本专利技术实施例的一个方面,提供了一种人脸属性编辑方法,包括:获取目标人脸图像,以及需要在所述目标人脸图像中进行编辑的目标属性;对所述目标人脸图像进行处理,得到第一人脸特征;获取所述目标属性的目标属性样式;采用所述目标属性样式,对所述第一人脸特征进行迁移处理,得到具有所述目标属性样式的第二人脸特征;基于所述目标属性,对所述第一人脸特征进行过滤,得到过滤人脸特征;基于所述第二人脸特征和所述过滤人脸特征,生成重构人脸图像。

3、可选地,所述对所述目标人脸图像进行处理,得到第一人脸特征,包括:将所述目标人脸图像输入编码器中的下采样模块进行处理,生成特征图;采用所述编码器中的自注意力模块,对所述特征图进行处理,得到所述第一人脸特征。

4、可选地,所述获取所述目标属性的目标属性样式,包括:获取包括所述目标属性的参考图像;对所述参考图像进行提取,确定所述目标属性样式;或是,获取预定的随机向量;通过映射所述随机向量中的向量元素至所述目标属性,生成所述目标属性样式。

5、可选地,所述采用所述目标属性样式,对所述第一人脸特征进行迁移处理,得到具有所述目标属性样式的第二人脸特征,包括:确定所述第一人脸特征的第一均值和第一方差,以及所述目标属性样式的第二均值和第二方差;采用所述第一均值和所述第一方差,对所述第一人脸特征进行去风格化处理,得到去风格化的第一人脸特征;采用所述第二均值和所述第二方差,对所述去风格化的第一人脸特征进行迁移处理,得到所述第二人脸特征。

6、可选地,所述基于所述目标属性,对所述第一人脸特征进行过滤,得到过滤人脸特征,包括:对所述第一人脸特征中与所述目标属性关联的特征进行过滤,得到与所述目标属性无关的所述过滤人脸特征。

7、可选地,所述基于所述第二人脸特征和所述过滤人脸特征,生成重构人脸图像,包括:基于所述第二人脸特征和所述过滤人脸特征进行拼接,得到重构人脸特征;将所述重构人脸特征输入解码器中的上采样模块进行处理,得到所述重构人脸图像。

8、可选地,所述对所述目标人脸图像进行处理,得到第一人脸特征,包括:将所述目标人脸图像输入编码器进行处理,得到所述第一人脸特征;所述基于所述第二人脸特征和所述过滤人脸特征进行拼接,得到重构人脸特征,包括:确定所述第二人脸特征的第一权重值和所述过滤人脸特征的第二权重值;采用所述第一权重值和所述第二权重值,确定所述第二人脸特征和所述过滤人脸特征之间的相似度;基于所述相似度,对所述第二人脸特征和所述过滤人脸特征进行拼接,得到所述重构人脸特征。

9、根据本专利技术实施例的另一方面,提供了一种人脸属性编辑装置,包括:图像获取模块,用于获取目标人脸图像,以及需要在所述目标人脸图像中进行编辑的目标属性;第一处理模块,用于对所述目标人脸图像进行处理,得到第一人脸特征;属性样式获取模块,用于获取所述目标属性的目标属性样式;迁移处理模块,用于采用所述目标属性样式,对所述第一人脸特征进行迁移处理,得到具有所述目标属性样式的第二人脸特征;过滤模块,用于基于所述目标属性,对所述第一人脸特征进行过滤,得到过滤人脸特征;重构人脸图像,用于基于所述第二人脸特征和所述过滤人脸特征,生成重构人脸图像。

10、根据本专利技术实施例的另一方面,提供了一种非易失性存储介质,所述非易失性存储介质存储有多条指令,所述指令适于由处理器加载并执行任意一项所述的人脸属性编辑方法。

11、根据本专利技术实施例的另一方面,提供了一种电子设备,包括:一个或多个处理器和存储器,所述存储器用于存储一个或多个程序,其中,当所述一个或多个程序被所述一个或多个处理器执行时,使得所述一个或多个处理器实现任意一项所述的人脸属性编辑方法。

12、在本专利技术实施例中,通过获取目标人脸图像,以及需要在所述目标人脸图像中进行编辑的目标属性;对所述目标人脸图像进行处理,得到第一人脸特征;获取所述目标属性的目标属性样式;采用所述目标属性样式,对所述第一人脸特征进行迁移处理,得到具有所述目标属性样式的第二人脸特征;基于所述目标属性,对所述第一人脸特征进行过滤,得到过滤人脸特征;基于所述第二人脸特征和所述过滤人脸特征,生成重构人脸图像。达到了避免在图像处理中损失特征信息的目的,实现了提高人脸属性编辑后的重构图像质量的技术效果,进而解决了相关技术中存在人脸属性编辑后的重构图像质量不理想的技术问题。

本文档来自技高网
...

【技术保护点】

1.一种人脸属性编辑方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述对所述目标人脸图像进行处理,得到第一人脸特征,包括:

3.根据权利要求1所述的方法,其特征在于,所述获取所述目标属性的目标属性样式,包括:

4.根据权利要求1所述的方法,其特征在于,所述采用所述目标属性样式,对所述第一人脸特征进行迁移处理,得到具有所述目标属性样式的第二人脸特征,包括:

5.根据权利要求1所述的方法,其特征在于,所述基于所述目标属性,对所述第一人脸特征进行过滤,得到过滤人脸特征,包括:

6.根据权利要求1至5中任意一项所述的方法,其特征在于,所述基于所述第二人脸特征和所述过滤人脸特征,生成重构人脸图像,包括:

7.根据权利要求6所述的方法,其特征在于,

8.一种人脸属性编辑装置,其特征在于,包括:

9.一种非易失性存储介质,其特征在于,所述非易失性存储介质存储有多条指令,所述指令适于由处理器加载并执行权利要求1至7中任意一项所述的人脸属性编辑方法。

10.一种电子设备,其特征在于,包括:一个或多个处理器和存储器,所述存储器用于存储一个或多个程序,其中,当所述一个或多个程序被所述一个或多个处理器执行时,使得所述一个或多个处理器实现权利要求1至7中任意一项所述的人脸属性编辑方法。

...

【技术特征摘要】

1.一种人脸属性编辑方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述对所述目标人脸图像进行处理,得到第一人脸特征,包括:

3.根据权利要求1所述的方法,其特征在于,所述获取所述目标属性的目标属性样式,包括:

4.根据权利要求1所述的方法,其特征在于,所述采用所述目标属性样式,对所述第一人脸特征进行迁移处理,得到具有所述目标属性样式的第二人脸特征,包括:

5.根据权利要求1所述的方法,其特征在于,所述基于所述目标属性,对所述第一人脸特征进行过滤,得到过滤人脸特征,包括:

6.根据权利要求1至5中任意一项所述的方法,其...

【专利技术属性】
技术研发人员:曾子恒
申请(专利权)人:天翼电子商务有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1