特效生成方法、装置、设备及存储介质制造方法及图纸

本公开提供一种特效生成方法、装置、设备及存储介质，其中方法包括：将目标人脸图中的头发区域进行模糊处理，得到模糊头发图；根据所述目标人脸图，生成纹理图、人脸掩膜图和头发掩膜图；将所述人脸掩膜图和头发掩膜图进行融合，得到融合掩膜图；基于根据所述融合掩膜图确定的融合比例，将所述模糊头发图和所述纹理图进行融合，得到所述目标人脸图的特效图。

【技术实现步骤摘要】
特效生成方法、装置、设备及存储介质
本公开涉及计算机视觉
，具体涉及一种特效生成方法、装置、设备及存储介质。
技术介绍
在视频创作领域常需要对视频中的对象增加特效。特效生成作为图像生成研究的新兴主题，逐渐成为计算机视觉和图像学中重要的热门主题。并且，特效生成在很多图像生成
有着重要应用，例如性别转换特效、风格迁移特效、各类饰品的添加特效。
技术实现思路
本公开提供了一种特效生成方法、装置、设备及存储介质。根据本公开实施例的第一方面，提供一种特效生成方法，所述方法包括：将目标人脸图中的头发区域进行模糊处理，得到模糊头发图；根据所述目标人脸图，生成纹理图、人脸掩膜图和头发掩膜图；将所述人脸掩膜图和头发掩膜图进行融合，得到融合掩膜图；基于根据所述融合掩膜图确定的融合比例，将所述模糊头发图和所述纹理图进行融合，得到所述目标人脸图的特效图。在一些可选实施例中，根据所述融合掩膜图确定所述融合比例，包括：基于所述融合掩膜图中的不同区域，分别确定所述纹理图中对应区域的融合比例，以及确定所述模糊头发图中对应区域的融本文档来自技高网...

【技术保护点】
1.一种特效生成方法，其特征在于，所述方法包括：/n将目标人脸图中的头发区域进行模糊处理，得到模糊头发图；/n根据所述目标人脸图，生成纹理图、人脸掩膜图和头发掩膜图；/n将所述人脸掩膜图和头发掩膜图进行融合，得到融合掩膜图；/n基于根据所述融合掩膜图确定的融合比例，将所述模糊头发图和所述纹理图进行融合，得到所述目标人脸图的特效图。/n

【技术特征摘要】
1.一种特效生成方法，其特征在于，所述方法包括：
将目标人脸图中的头发区域进行模糊处理，得到模糊头发图；
根据所述目标人脸图，生成纹理图、人脸掩膜图和头发掩膜图；
将所述人脸掩膜图和头发掩膜图进行融合，得到融合掩膜图；
基于根据所述融合掩膜图确定的融合比例，将所述模糊头发图和所述纹理图进行融合，得到所述目标人脸图的特效图。


2.根据权利要求1所述的方法，其特征在于，根据所述融合掩膜图确定所述融合比例，包括：
基于所述融合掩膜图中的不同区域，分别确定所述纹理图中对应区域的融合比例，以及确定所述模糊头发图中对应区域的融合比例。


3.根据权利要求2所述的方法，其特征在于，所述将所述模糊头发图和所述纹理图进行融合，得到所述目标人脸图的特效图，包括：
根据所述纹理图中的像素值和所述纹理图的融合比例，确定第一像素值集合；
根据所述模糊头发图的像素值和所述模糊头发图的融合比例，确定第二像素值集合；
基于所述第一像素值集合和所述第二像素值集合，确定所述目标人脸图的特效图中的像素值。


4.根据权利要求1所述的方法，其特征在于，在所述得到所述目标人脸图的特效图之后，所述方法还包括：
将所述目标人脸图的特效图与原始人脸图进行融合，得到原始特效图。


5.根据权利要求4所述的方法，其特征在于，所述方法还包括：
基于所述原始特效图中的性别信息，对所述原始特效图中的人脸轮廓进行调整，和/或对所述原始特效图进行美颜处理。


6.根据权利要求1至5中任一项所述的方法，其特征在于，所述将目标人脸图中的头发区域进行模糊处理，得到模糊头发图，包括：
将所述目标人脸图进行头发分割，得到头发分割图；
基于所述头发分割图，将所述目标人脸图中的头发区域按照背景像素进行填充，得到所述模糊头发图。


7.根据权利要求1至6中任一项所述的方法，其特征在于，所述根据所述目标人脸图，生成纹理图、人脸掩膜图和头发掩膜图，包括：
获取所述目标人脸图中的人脸关键点信息；
根据所述人脸关键点信息，确定所述目标人脸图对应的人脸热图；
将所述人脸热图输入预先训练的深度神经网络，得到所述纹理图、人脸掩膜图和头发掩膜图。


8.根据权利要求7所述的方法，其特征在于，所述深度神经网络包括编码器和解码器；所述编码器，用于根据卷积滤波器对所述人脸热图进行编码操作；所述解码器，用于根据卷积滤波器对所述人脸热图进行解码操作。


9.根据权利要求7或8所述的方法，其特征在于，所...

【专利技术属性】
技术研发人员：吴文岩，唐斯伟，郑程耀，张丽，钱晨，
申请(专利权)人：北京市商汤科技开发有限公司，
类型：发明
国别省市：北京;11