一种判定人脸点可见性的方法及计算设备技术

本发明专利技术公开了一种判定人脸点可见性的方法，先通过训练生成人脸点可见性判定模型，再通过该模型对待处理的人脸图像进行判定处理。其中，生成判定模型的的方法包括：获取经过标注的人脸图像作为训练图像；构建第一、第二、第三处理模块；将训练图像输入第一处理模块以输出每个人脸点的预测位置，并根据标注数据对第一处理模块进行训练；利用第二处理模块根据各人脸点的位置生成各人脸点的特征图；将各人脸点的特征图输入第三处理模块以输出表征各人脸点可见性的置信度，并根据标注数据对第三处理模块进行训练；根据训练后的第一处理模块、第二处理模块和训练后的第三处理模块生成人脸点可见性判定模型。本发明专利技术还公开了相应的计算设备。

A Method and Computing Equipment for Determining Visibility of Face Points

The invention discloses a method for judging the visibility of face points. Firstly, a model for judging the visibility of face points is generated by training, and then the face images to be processed are judged and processed by the model. Among them, the methods of generating the decision model include: obtaining the labeled face image as the training image; constructing the first, second and third processing module; inputting the training image into the first processing module to output the predicted position of each face point, and training the first processing module according to the labeled data; using the second processing module to generate each person according to the position of each face point. Face feature map; input the feature map of each face point into the third processing module to output the confidence of representing the visibility of each face point, and train the third processing module according to the labeled data; generate the face point visibility judgment model according to the first processing module, the second processing module and the third processing module after training. The invention also discloses corresponding computing equipment.

【技术实现步骤摘要】
一种判定人脸点可见性的方法及计算设备
本专利技术涉及图像处理
，尤其涉及一种判定人脸点可见性的方法及计算设备。
技术介绍
人脸特征点检测是在人脸检测的基础上进行的，对人脸上的特征点(例如嘴角、眼角)等进行定位的方案。人脸特征点检测在工程上有很多应用，例如：(1)改善人脸识别，通过人脸特征点检测将人脸对齐到平均脸，对齐后的人脸图像可以提高人脸识别算法的效果；(2)人脸融合，利用人脸特征点检测的结果，对两张不同的人脸图像进行融合，以达到类似“换脸”的效果；(3)人脸美妆，例如在人脸特征点检测的基础上实现添加腮红、眼影眼线、美瞳、戴眼镜等特效。由此可见，人脸特征点检测能够极大地满足不同用户的个性化需求，并且，只有在特征点检测地足够准确且速度很快的基础上，接下来的应用功能才能达到符合用户期望的效果。深度神经网络在现如今的人脸特征点检测算法中应用广泛并且取得了很好的效果，但是当五官或者轮廓被遮挡住后，后续的应用就会出现误差。以人脸美妆为例，当五官被遮挡物部分遮挡时，继续基于人脸特征点做特效会导致妆容或者特效加在遮挡物上的问题。因此，需要一种在人脸特征点检测及应用中，能够有效判定人脸点可见本文档来自技高网...

【技术保护点】
1.一种生成人脸点可见性判定模型的方法，所述方法适于在计算设备中执行，所述方法包括步骤：获取经过标注的人脸图像作为训练图像，所述训练图像具有相应的标注数据，所述标注数据包含所述训练图像中每个人脸点的位置及各人脸点的可见性值；构建第一处理模块、第二处理模块和第三处理模块；将所述训练图像输入所构建的第一处理模块进行处理，以输出训练图像中每个人脸点的预测位置，并根据标注数据对所构建的第一处理模块进行训练，以得到训练后的第一处理模块；利用第二处理模块根据各人脸点的位置生成各人脸点的特征图；将各人脸点的特征图输入所构建的第三处理模块进行处理，以输出表征各人脸点可见性的置信度，并根据标注数据对所构建的第三...

【技术特征摘要】
1.一种生成人脸点可见性判定模型的方法，所述方法适于在计算设备中执行，所述方法包括步骤：获取经过标注的人脸图像作为训练图像，所述训练图像具有相应的标注数据，所述标注数据包含所述训练图像中每个人脸点的位置及各人脸点的可见性值；构建第一处理模块、第二处理模块和第三处理模块；将所述训练图像输入所构建的第一处理模块进行处理，以输出训练图像中每个人脸点的预测位置，并根据标注数据对所构建的第一处理模块进行训练，以得到训练后的第一处理模块；利用第二处理模块根据各人脸点的位置生成各人脸点的特征图；将各人脸点的特征图输入所构建的第三处理模块进行处理，以输出表征各人脸点可见性的置信度，并根据标注数据对所构建的第三处理模块进行训练，以得到训练后的第三处理模块；以及根据所述训练后的第一处理模块、第二处理模块和训练后的第三处理模块生成人脸点可见性判定模型。2.如权利要求1所述的方法，其中，所述根据标注数据对所构建的第一处理模块进行训练，以得到训练后的第一处理模块的步骤包括：按照第一损失函数计算每个人脸点的预测位置相对于标注数据中每个人脸点的位置的第一损失值，直到所述第一损失值满足预定条件时，得到训练后的第一处理模块。3.如权利要求1或2所述的方法，其中，所述利用第二处理模块根据各人脸点的位置生成各人脸点的特征图的步骤包括：将所述训练图像输入训练后的第一处理模块中，得到各人脸点的预测位置和至少一个第一特征图；以及利用第二处理模块根据各人脸点的预测位置从至少一个第一特征图中裁剪出各人脸点的特征图。4.如权利要求1-3中任一项所述的方法，其中，所述根据标注数据对所构建的第三处理模块进行训练，以得到训练后的第三处理模块的步骤包括：按照第二损失函数计算每个人脸点可见性的置信度相对于标注数据中每个人脸点的可见性值的...

【专利技术属性】
技术研发人员：郑曌琼，孙太武，林煜，张伟，余清洲，
申请(专利权)人：厦门美图之家科技有限公司，
类型：发明
国别省市：福建,35