人脸换脸方法、装置、设备及计算机存储介质制造方法及图纸

本发明专利技术公开了一种人脸换脸方法、装置、设备及计算机存储介质，该方法包括：获得第一人脸图像和第二人脸图像；识别第二人脸图像中的关键点，提取关键点圈定的区域的框图，得到第一表情姿态图；提取第二人脸图像中的光照信息，得到第一光照条件图；将第一表情姿态图、第一光照条件图和第一人脸图像输入生成式对抗网络GAN模型，得到将第一表情姿态图、第一光照条件图与第一人脸图像融合后的换脸图像。根据本发明专利技术实施例，能够通过剥离目标人脸上的表情以及光照信息来进行换脸操作，提高人脸换脸的自然程度。

【技术实现步骤摘要】
人脸换脸方法、装置、设备及计算机存储介质
本专利技术属于图像处理
，尤其涉及一种人脸换脸方法、装置、设备及计算机存储介质。
技术介绍
随着网络的发展，大众娱乐性质的社交软件不断增多，在许多具有直播、视频拍摄以及图像编辑等功能的社交软件中，人脸交换逐渐成为大众娱乐的新热点，具备了越来越广泛的应用场景。人脸交换或者说换脸技术，指的是在图像或者视频中将一个人的脸换成另一个人的脸。但是，目前的换脸技术中，将人脸进行交换后得到的图像或者视频中，存在人脸的表情和光影不自然的情况，影响了人脸换脸的效果。并且，由于目前的换脸技术中，想要对人脸的表情和光照进行调整，需要分别设置不同的网络模型，使得最终得到的换脸结果与原始图像之间的失真较大，换脸效果不自然。
技术实现思路
本专利技术实施例提供一种人脸换脸方法、装置、设备及计算机存储介质，能够通过剥离目标人脸上的表情以及光照信息来进行换脸操作，提高人脸换脸的自然程度。一方面，本专利技术实施例提供一种人脸换脸方法，方法包括：获得第一人脸图像和第二人脸图像；识别本文档来自技高网...

【技术保护点】
1.一种人脸换脸方法，其特征在于，包括：/n获得第一人脸图像和第二人脸图像；/n识别所述第二人脸图像中的关键点，提取所述关键点圈定的区域的框图，得到第一表情姿态图；/n提取所述第二人脸图像中的光照信息，得到第一光照条件图；/n将所述第一表情姿态图、所述第一光照条件图和所述第一人脸图像输入生成式对抗网络GAN模型，得到将所述第一表情姿态图、第一光照条件图与所述第一人脸图像融合后的换脸图像。/n

【技术特征摘要】
1.一种人脸换脸方法，其特征在于，包括：
获得第一人脸图像和第二人脸图像；
识别所述第二人脸图像中的关键点，提取所述关键点圈定的区域的框图，得到第一表情姿态图；
提取所述第二人脸图像中的光照信息，得到第一光照条件图；
将所述第一表情姿态图、所述第一光照条件图和所述第一人脸图像输入生成式对抗网络GAN模型，得到将所述第一表情姿态图、第一光照条件图与所述第一人脸图像融合后的换脸图像。


2.根据权利要求1所述的人脸换脸方法，其特征在于，所述提取所述关键点圈定的区域的框图的过程，包括：
提取并连接各个所述关键点，得到所述关键点组成的若干个封闭图形；
使用第一预设颜色填充所述封闭图形，得到所述第一表情姿态图。


3.根据权利要求2所述的人脸换脸方法，其特征在于，若两个所述封闭图形的位置对称，则分别采用不同的颜色填充上述两个封闭图形。


4.根据权利要求1所述的人脸换脸方法，其特征在于，所述提取所述第二人脸图像中的光照信息，得到第一光照条件图的过程包括：
对所述第二人脸图像进行模糊处理，得到所述第一光照条件图。


5.根据权利要求1所述的人脸换脸方法，其特征在于，所述提取所述第二人脸图像中的光照信息，得到第一光照条件图的过程包括：
将所述第二人脸图像的五官抠除，并用第二预设颜色填充五官所在区域；
使用所述第二人脸图像中脸颊处的光照填充上述颜色填充完成后的所述五官所在区域，得到第三人脸图像；
对所述第三人脸图像进行模糊处理，得到所述第一光照条件图。


6.根据权利要求1所述的人脸换脸方法，其特征在于，所述GAN网络的训练过程包括：
选择属于同一人的两张人脸图像分别作为第四人脸图像和第五人脸图像；
识别所述第五人...

【专利技术属性】
技术研发人员：张涛，覃威宁，王山虎，郑天祥，周润楠，文建华，唐杰，
申请(专利权)人：北京陌陌信息技术有限公司，
类型：发明
国别省市：北京;11