一种化妆进度检测方法、装置、设备及存储介质制造方法及图纸

本申请提出一种化妆进度检测方法、装置、设备及存储介质，该方法包括：获取眼影掩码图以及用户当前进行特定妆容的实时化妆视频中的初始帧图像和当前帧图像；根据眼影上妆的每个目标上妆区域，分别从眼影掩码图中拆分出每个目标上妆区域对应的美妆掩码图；根据初始帧图像、当前帧图像及每个目标上妆区域对应的美妆掩码图，确定当前帧图像对应的当前化妆进度。本申请将眼影掩码图拆分成每个目标上妆区域对应的美妆掩码图，分别检测每个目标上妆区域的化妆进度，提高了检测的准确性。未采用深度学习，无需预先收集大量数据，通过捕获用户化妆的实时画面，经服务器端的计算，将检测结果返回给用户，如此耗费更少的计算成本，减少服务器的处理压力。服务器的处理压力。服务器的处理压力。

【技术实现步骤摘要】
一种化妆进度检测方法、装置、设备及存储介质


[0001]本申请属于图像处理
，具体涉及一种化妆进度检测方法、装置、设备及存储介质。

技术介绍

[0002]化妆已经成为很多人日常生活必不可少的环节，化妆过程的步骤繁多，如果能够将化妆进度实时反馈给用户，将可以极大减少化妆对用户精力的消耗，节省用户的化妆时间。
[0003]目前，相关技术中存在一些使用深度学习模型提供虚拟试妆、肤色侦测、个性化产品推荐等功能，这些功能均需要预先收集大量的人脸图片对深度学习模型进行训练。
[0004]但人脸图片是用户的隐私数据，很难收集到庞大的人脸图片。且模型训练需耗费大量计算资源，成本高。模型的精度与实时性成反比，化妆进度检测需要实时捕获用户人脸面部信息来确定用户当前的化妆进度，实时性要求很高，能够满足实时性要求的深度学习模型，其检测的准确性不高。

技术实现思路

[0005]本申请提出一种化妆进度检测方法、装置、设备及存储介质，将眼影掩码图拆分成每个目标上妆区域对应的美妆掩码图，根据实时化妆视频的初始帧图像、当前帧图像及每个目标区本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种化妆进度检测方法，其特征在于，包括：获取眼影掩码图以及用户当前进行特定妆容的实时化妆视频中的初始帧图像和当前帧图像；根据眼影上妆的每个目标上妆区域，分别从所述眼影掩码图中拆分出每个所述目标上妆区域对应的美妆掩码图；根据所述初始帧图像、所述当前帧图像及每个所述目标上妆区域对应的美妆掩码图，确定所述当前帧图像对应的当前化妆进度。2.根据权利要求1所述的方法，其特征在于，所述根据所述初始帧图像、所述当前帧图像及每个所述目标上妆区域对应的美妆掩码图，确定所述当前帧图像对应的当前化妆进度，包括：分别以每个所述目标上妆区域对应的美妆掩码图为参照，从所述初始帧图像中获取每个所述目标上妆区域对应的第一目标区域图像；分别以每个所述目标上妆区域对应的美妆掩码图为参照，从所述当前帧图像中获取每个所述目标上妆区域对应的第二目标区域图像；根据每个所述目标上妆区域对应的第一目标区域图像及第二目标区域图像，确定所述当前帧图像对应的当前化妆进度。3.根据权利要求2所述的方法，其特征在于，所述根据每个所述目标上妆区域对应的第一目标区域图像及第二目标区域图像，确定所述当前帧图像对应的当前化妆进度，包括：分别将每个所述目标上妆区域对应的第一目标区域图像和第二目标区域图像转换为HLS颜色空间下包含预设单通道分量的图像；根据转换后的每个所述目标上妆区域对应的第一目标区域图像和第二目标区域图像，确定所述当前帧图像对应的当前化妆进度。4.根据权利要求3所述的方法，其特征在于，所述根据转换后的每个所述目标上妆区域对应的第一目标区域图像和第二目标区域图像，确定所述当前帧图像对应的当前化妆进度，包括：分别计算转换后同一目标上妆区域对应的第一目标区域图像和第二目标区域图像中位置相同的像素点对应的所述预设单通道分量的差值绝对值；统计每个目标上妆区域对应的差值绝对值满足预设化妆完成条件的像素点数目；分别计算每个目标上妆区域对应的所述像素点数目与对应目标上妆区域中的像素点总数目之间的比值，得到每个目标上妆区域对应的化妆进度；根据每个目标上妆区域对应的化妆进度及每个目标上妆区域对应的预设权重，计算所述当前帧图像对应的当前化妆进度。5.根据权利要求2所述的方法，其特征在于，分别以每个所述目标上妆区域对应的美妆掩码图为参照，从所述初始帧图像中获取每个所述目标上妆区域对应的第一目标区域图像，包括：检测所述初始帧图像对应的第一人脸关键点；根据所述第一人脸关键点，获取所述初始帧图像对应的人脸区域图像；分别以每个所述目标上妆区域对应的美妆掩码图为参照，从所述人脸区域图像中分别获取每个所述目标上妆区域对应的第一目标区域图像。
6.根据权利要求5所述的方法，其特征在于，所述分别以每个所述目标上妆区域对应的美妆掩码图为参照，从所述人脸区域图像中分别获取每个所述目标上妆区域对应的第一目标区域图像，包括：分别将第一目标上妆区域对应的美妆掩码图和所述人脸区域图像转换为二值化图像；所述第一目标上妆区域为每个所述目标上妆区域中的任一目标上妆区域；对所述美妆掩码图对应的二值化图像和所述人脸区域图像对应的二值化图像进行与运算，获得所述美妆掩码图与所述人脸区域图像的相交区域对应的第一掩膜图像；对所述第一掩膜图像与所述初始帧图像对应的人脸区域图像进行与运算，获得第一目标区域图像。7.根据权利要求6所述的方法，其特征在于，所述对所述美妆掩码图对应的二值化图像和所述人脸区域图像对应的二值化图像进行与运算之前，还包括：根据所述美妆掩码图对应的标准人脸关键点，确定所述美妆掩码图中位于所述美妆掩码图包括的目标上妆区域的轮廓上的一个或多个第一定位点；根据所述第一人脸关键点，从所述人脸区域图像中确定出与每个所述第一定位点对应的第二定位点；对所述美妆掩码图进行拉伸处理，将每个所述第一定位点拉伸至对应的每个所述第二定位点对应的位置处。8.根据权利要求1所述的方法，其特征...

【专利技术属性】
技术研发人员：刘聪，苗锋，张梦洁，
申请(专利权)人：北京新氧科技有限公司，
类型：发明
国别省市：