一种带有参考条件的人脸妆容语义局部判别方法技术

技术编号:41150646 阅读:42 留言:0更新日期:2024-04-30 18:17
本发明专利技术公开了一种带有参考条件的人脸妆容语义局部判别方法,对化妆的参考图像和不化妆的原图像进行区域语义特征提取,为了保证合成图像的精确妆容,本发明专利技术方法加入了一个带有参考条件的局部判别器,由于人脸结构和姿态的差异,特征对齐网络将参考图像和原图像的特征映射到对齐的特征空间,并计算特征统计量进行区域妆容判别,以确保精确的妆容迁移。大量的实验证明了本发明专利技术方法在多个化妆指标上的有效性和优越的化妆迁移性能,能够实现最先进的化妆迁移能力。

【技术实现步骤摘要】

本专利技术涉及妆容迁移的,尤其是指一种带有参考条件的人脸妆容语义局部判别方法


技术介绍

1、面部化妆转移的目的是复制参考图像的化妆风格到一个非化妆面部(原图像)上。化妆转移的挑战原于未配对的训练数据和参考图像与原图像之间的不对齐。近年来,为了解决这些问题,现有的方法专注于空间不变的化妆风格转移,通过在生成对抗网络的潜在空间中注入风格信息和转换,合成化妆图像。

2、一方面,大多数化妆转移方法都是通过风格编码来捕捉面部化妆,其空间表达能力较差。此外,现有工作中对风格信息融合的研究也很少。在现实场景中,原人脸图像和参考人脸图像的语义区域通常是错位的。在错位严重的情况下,将参考样式代码注入化妆渲染网络可能会导致不希望的结果出现。另一方面,现有的模型在测量化妆一致性时,往往忽略了参考图像和合成图像之间的域差距。


技术实现思路

1、本专利技术的目的在于克服现有技术的缺点与不足,提出了一种带有参考条件的人脸妆容语义局部判别方法,可以精确地进行化妆转移,该方法的局部判别器带有参考条件,有效的特征融合和基于统计量本文档来自技高网...

【技术保护点】

1.一种带有参考条件的人脸妆容语义局部判别方法,其特征在于,包括以下步骤:

2.根据权利要求1所述的一种带有参考条件的人脸妆容语义局部判别方法,其特征在于,在步骤S1中,准备的人脸图像数据集按照妆容的种类分为LADN数据集、MT数据集和Makeup-Wild数据集,每个数据集均包括没有妆容的人脸图像作为原图像以及具有精致妆容的人脸图像作为参考图像;准备的人脸分割掩码数据集中,每张人脸分割掩码的图像对应相应的人脸图像,每张人脸分割掩码的图像按照人脸特征区域进行分割,分割成左眼区域、右眼区域、鼻子区域、上嘴唇区域、下嘴唇区域、牙齿区域、左眉毛区域、右眉毛区域、左耳区域、右耳区域、...

【技术特征摘要】

1.一种带有参考条件的人脸妆容语义局部判别方法,其特征在于,包括以下步骤:

2.根据权利要求1所述的一种带有参考条件的人脸妆容语义局部判别方法,其特征在于,在步骤s1中,准备的人脸图像数据集按照妆容的种类分为ladn数据集、mt数据集和makeup-wild数据集,每个数据集均包括没有妆容的人脸图像作为原图像以及具有精致妆容的人脸图像作为参考图像;准备的人脸分割掩码数据集中,每张人脸分割掩码的图像对应相应的人脸图像,每张人脸分割掩码的图像按照人脸特征区域进行分割,分割成左眼区域、右眼区域、鼻子区域、上嘴唇区域、下嘴唇区域、牙齿区域、左眉毛区域、右眉毛区域、左耳区域、右耳区域、面部区域、头发区域、脖子区域、背景区域共14个区域。

3.根据权利要求2所述的一种带有参考条件的人脸妆容语义局部判别方法,其特征在于,在步骤s2中,生成器需要输入参考图像和原图像为条件,生成器首先是采用一个多层卷积层的特征提取器,提取出参考图像和原图像的风格特征,再输入相应的人脸分割掩码,将图像的特征按照人脸分割掩码划分的各个区域得到相应的14个区域的人脸图像风格特征,再根据参考图像的妆容要迁移到原图像上的对应区域,将参考图像相应的风格特征区域与原图像其余不需要进行妆容迁移的风格特征区...

【专利技术属性】
技术研发人员:李镇平胡金龙吴斯谢林岩
申请(专利权)人:华南理工大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1