一种基于粤剧图片的面部替换方法、设备及介质技术

本发明专利技术提供的一种基于粤剧图片的面部替换方法，包括获取用户在终端上传的用户图像；识别用户图像，得到用户人脸特征图以及对应的特征关键点信息；根据特征关键点信息在预设模板数据库筛选到对应的预设粤剧静态图像，作为目标粤剧静态图像，根据特征关键点信息在目标粤剧静态图像中筛选出对应的预设人脸特征图，将预设人脸特征图作为目标人脸特征图；将人脸特征图绑定到目标人脸特征图上，根据目标人脸特征图与人脸特征图的位置偏差对人脸特征图进行位移调整。本发明专利技术提供的一种基于粤剧图片的面部替换方法，使融合后的人脸的表情更加生动，满足了用户的审美需求。

A face replacement method, equipment and media based on Cantonese Opera pictures

The invention provides a face replacement method based on Cantonese Opera pictures, which includes obtaining the user image uploaded by the user on the terminal; recognizing the user image, obtaining the user face feature image and the corresponding feature key point information; filtering the corresponding preset Cantonese Opera static image in the preset template database according to the feature key point information, as the target Cantonese Opera static image, according to the feature key point information The key point information selects the corresponding preset face feature map from the static image of the target Cantonese opera, takes the preset face feature map as the target face feature map, binds the face feature map to the target face feature map, and adjusts the displacement of the face feature map according to the position deviation between the target face feature map and the face feature map. The invention provides a face replacement method based on Cantonese Opera pictures, which makes the expression of the fused face more vivid and meets the aesthetic requirements of users.

【技术实现步骤摘要】
一种基于粤剧图片的面部替换方法、设备及介质
本专利技术涉及图像处理
，尤其涉及一种基于粤剧图片的面部替换方法、设备及介质。
技术介绍
随着社会经济和计算机技术的不断发展，人类生活水平不断提高，图像处理技术也日益提高。在日常中，图像合成技术普遍采用PS(AdobePhotoshop)软件实现，主要用于图像美化处理，如：把自己人脸与他人的替换，形成新图像。该方式依靠手动修图，过程漫长复杂，且需具备专业美工知识。粤剧，是广东艺人吸纳外省入粤戏班的戏曲声腔，加以易语而歌并融进本地的歌谣、小曲而形成的剧种。该剧种以武生、文武生、小生、正印花旦、二帮花旦、丑生为台柱，唱腔音乐变化灵活，旋律优美，是世界非物质文化遗产，深受人民爱戴。因此，将人脸与粤剧中的人物角色进行融合替换很受用户的喜欢，但是，目前人脸替换技术，替换效果生硬，导致人物表情、头部朝向等面部特征与图像背景不搭，甚至导致面部变形等问题，难以满足用户需求。
技术实现思路
为了克服现有技术的不足，本专利技术的目的在于之一提供一种基于粤剧图片的面部替换方法，其能解决目前人脸替换技术，替换效果生硬，导致人物表情、头部朝向等面部特征与图像背景不搭的问题。本专利技术的目的在于之二提供一种电子设备，其能解决目前人脸替换技术，替换效果生硬，导致人物表情、头部朝向等面部特征与图像背景不搭的问题。本专利技术的目的在于之三提供一种计算机可读存储介质，其能解决目前人脸替换技术，替换效果生硬，导致人物表情、头部朝向等面部特征与图像背景不搭的问题。本专利技术提供目的之一采用以下技术方案实现：一种基于粤剧图片的面部替换方法，包括以下步骤：图像获取，获取用户在终端上传的人物图像，所述人物图像包括人脸；图像识别，识别所述人物图像，得到所述人物图像对应的人脸特征图以及所述人脸特征图中的若干特征关键点信息，所述特征关键点信息包括关键点序号以及关键点数量；筛选预设粤剧静态图像，根据所述特征关键点信息在预设模板数据库筛选到对应的多张或单张所述预设粤剧静态图像，当筛选到的所述预设粤剧静态图像为单张时，将此所述预设粤剧静态图像作为目标粤剧静态图像，当筛选到的所述预设粤剧静态图像为多张时，随机选取一张所述预设粤剧静态图像作为目标粤剧静态图像；筛选人脸特征图，根据所述特征关键点信息在所述目标粤剧静态图像中筛选出对应的预设人脸特征图以及所述预设人脸特征图对应的预设特征关键点信息，将所述预设人脸特征图作为目标人脸特征图，所述预设特征关键点信息包括预设关键点序号以及预设关键点数量；人脸特征替换，根据所述关键点序号与所述目标人脸特征图对应预设关键点序号的位置关系将所述人脸特征图绑定到所述目标人脸特征图上，根据所述目标人脸特征图与所述人脸特征图的位置偏差对所述人脸特征图进行位移调整，得到最终人脸特征图。进一步地，在所述图像获取之前包括建立预设模板数据库，获取若干预设粤剧静态图像，识别所述预设粤剧静态图像，得到预设人脸特征图以及所述预设人脸特征图对应的预设特征关键点信息，将所述预设人脸特征图、所述预设特征关键点信息以及所述预设粤剧静态图像建立映射关系并存储，得到预设模板数据库。进一步地，所述识别所述预设粤剧静态图像，得到预设人脸特征图以及对应的预设特征关键点信息具体为：通过边缘检测算法对所述预设粤剧静态图像进行边缘检测处理，得到对应的预设人脸特征图，根据标记算法对所述预设人脸特征图进行标号处理，得到预设关键点序号以及预设关键点数量。进一步地，所述图像识别具体为：通过边缘检测算法对所述人物图像进行边缘检测处理，得到对应的人脸特征图，根据标记算法对所述人脸特征图进行标号处理，得到关键点序号以及关键点数量。进一步地，所述筛选预设粤剧静态图像具体为：在所述预设模板数据库中筛选出所有与所述关键点数量相同的所述预设关键点数量对应的所述预设粤剧静态图像，得到含有若干所述预设粤剧静态图像的预设粤剧静态图像组或单张所述预设粤剧静态图像，当得到预设粤剧静态图像组时，在所述预设粤剧静态图像组中选取任意一张所述预设粤剧静态图像作为目标粤剧静态图像；当得到单张所述预设粤剧静态图像时，将此张所述预设粤剧静态图像作为目标粤剧静态图像。进一步地，所述筛选人脸特征图具体为：当所述目标粤剧静态图像含有多张与所述关键点数量相同的预设关键点数量对应的预设人脸特征图时，随机选择一张所述预设人脸特征图作为目标人脸特征图；当所述目标粤剧静态图像只含有一张与所述关键点数量相同的预设关键点数量对应的预设人脸特征图时，将所述预设人脸特征图作为目标人脸特征图。本专利技术提供目的之二采用以下技术方案实现：一种电子设备，包括：处理器；存储器；以及程序，其中所述程序被存储在所述存储器中，并且被配置成由处理器执行，所述程序包括用于执行本申请的一种基于粤剧图片的面部替换方法。本专利技术提供目的之三采用以下技术方案实现：一种计算机可读存储介质，其上存储有计算机程序，其特征在于：所述计算机程序被处理器执行本申请的一种基于粤剧图片的面部替换方法。相比现有技术，本专利技术的有益效果在于：获取用户在终端上传的人物图像，人物图像包括人脸特征；识别人物图像，得到人物图像对应的人脸特征图以及人脸特征图中的若干特征关键点信息，特征关键点信息包括关键点序号以及关键点数量；根据特征关键点信息在预设模板数据库筛选到对应的多张或单张预设粤剧静态图像，当筛选到的预设粤剧静态图像为单张时，将此预设粤剧静态图像作为目标粤剧静态图像，当筛选到的预设粤剧静态图像为多张时，随机选取一张预设粤剧静态图像作为目标粤剧静态图像；根据特征关键点信息在目标粤剧静态图像中筛选出对应的预设人脸特征图以及预设人脸特征图对应的预设特征关键点信息，将预设人脸特征图作为目标人脸特征图，预设特征关键点信息包括预设关键点序号以及预设关键点数量；根据关键点序号与目标人脸特征图对应预设关键点序号的位置关系将人脸特征图绑定到目标人脸特征图上，根据目标人脸特征图与人脸特征图的位置偏差对人脸特征图进行位移调整，得到最终人脸特征图。整个过程的替换效果不在生硬，使用户图像与粤剧静态图像中的人脸实现了精准的融合，使融合后的人脸的表情更加生动，满足了用户的审美需求。上述说明仅是本专利技术技术方案的概述，为了能够更清楚了解本专利技术的技术手段，并可依照说明书的内容予以实施，以下以本专利技术的较佳实施例并配合附图详细说明如后。本专利技术的具体实施方式由以下实施例及其附图详细给出。附图说明此处所说明的附图用来提供对本专利技术的进一步理解，构成本申请的一部分，本专利技术的示意性实施例及其说明用于解释本专利技术，并不构成对本专利技术的不当限定。在附图中：图1为本专利技术的一种基于粤剧图片的面部替换方法的流程示意图；图2为本专利技术的一种基于粤剧图片的面部替换方法中的预设人脸特征图的示意图。具体实施方式下面，结合附图以及具体实施方式，对本专利技术做进一步描述，需要说明的是，在不相冲突的前提下，以下描述的各实施例之间或各技术特征之间可以任意本文档来自技高网...

【技术保护点】
1.一种基于粤剧图片的面部替换方法，其特征在于，包括以下步骤：/n图像获取，获取用户在终端上传的人物图像，所述人物图像包括人脸；/n图像识别，识别所述人物图像，得到所述人物图像对应的人脸特征图以及所述人脸特征图中的若干特征关键点信息，所述特征关键点信息包括关键点序号以及关键点数量；/n筛选预设粤剧静态图像，根据所述特征关键点信息在预设模板数据库筛选到对应的多张或单张所述预设粤剧静态图像，当筛选到的所述预设粤剧静态图像为单张时，将此所述预设粤剧静态图像作为目标粤剧静态图像，当筛选到的所述预设粤剧静态图像为多张时，随机选取一张所述预设粤剧静态图像作为目标粤剧静态图像；/n筛选人脸特征图，根据所述特征关键点信息在所述目标粤剧静态图像中筛选出对应的预设人脸特征图以及所述预设人脸特征图对应的预设特征关键点信息，将所述预设人脸特征图作为目标人脸特征图，所述预设特征关键点信息包括预设关键点序号以及预设关键点数量；/n人脸特征替换，根据所述关键点序号与所述目标人脸特征图对应预设关键点序号的位置关系将所述人脸特征图绑定到所述目标人脸特征图上，根据所述目标人脸特征图与所述人脸特征图的位置偏差对所述人脸特征图进行位移调整，得到最终人脸特征图。/n...

【技术特征摘要】
1.一种基于粤剧图片的面部替换方法，其特征在于，包括以下步骤：
图像获取，获取用户在终端上传的人物图像，所述人物图像包括人脸；
图像识别，识别所述人物图像，得到所述人物图像对应的人脸特征图以及所述人脸特征图中的若干特征关键点信息，所述特征关键点信息包括关键点序号以及关键点数量；
筛选预设粤剧静态图像，根据所述特征关键点信息在预设模板数据库筛选到对应的多张或单张所述预设粤剧静态图像，当筛选到的所述预设粤剧静态图像为单张时，将此所述预设粤剧静态图像作为目标粤剧静态图像，当筛选到的所述预设粤剧静态图像为多张时，随机选取一张所述预设粤剧静态图像作为目标粤剧静态图像；
筛选人脸特征图，根据所述特征关键点信息在所述目标粤剧静态图像中筛选出对应的预设人脸特征图以及所述预设人脸特征图对应的预设特征关键点信息，将所述预设人脸特征图作为目标人脸特征图，所述预设特征关键点信息包括预设关键点序号以及预设关键点数量；
人脸特征替换，根据所述关键点序号与所述目标人脸特征图对应预设关键点序号的位置关系将所述人脸特征图绑定到所述目标人脸特征图上，根据所述目标人脸特征图与所述人脸特征图的位置偏差对所述人脸特征图进行位移调整，得到最终人脸特征图。


2.如权利要求1所述的一种基于粤剧图片的面部替换方法，其特征在于：在所述图像获取之前包括建立预设模板数据库，获取若干预设粤剧静态图像，识别所述预设粤剧静态图像，得到预设人脸特征图以及所述预设人脸特征图对应的预设特征关键点信息，将所述预设人脸特征图、所述预设特征关键点信息以及所述预设粤剧静态图像建立映射关系并存储，得到预设模板数据库。


3.如权利要求2所述的一种基于粤剧图片的面部替换方法，其特征在于：所述识别所述预设粤剧静态图像，得到预设人脸特征图以及对应的预设特征关键点信息具体为：通过边缘检测算法对所述预设粤剧静...

【专利技术属性】
技术研发人员：邓立邦，陈荧，潘予昕，黎灿勇，王佳兵，
申请(专利权)人：广东智媒云图科技股份有限公司，
类型：发明
国别省市：广东;44