数字彩妆师制造技术

一种数字彩妆师系统包括移动设备、数据库系统，所述数据库系统存储化妆程序信息、常见彩妆妆容、针对皮肤类型和种族特点的化妆品以及用户的用户妆容偏好。所述移动设备包括用于与数字彩妆师交互的用户界面。所述数字彩妆师执行与所述用户的交互式对话以便捕获所述用户的需求，包括彩妆妆容类型、室内或室外妆容、皮肤状况、面部问题区域、最喜欢的面部特征。计算电路分析所述用户的面部图像以识别面部部位，分析所述面部图像以确定面部特性，并且基于以下随着与所述数字彩妆师的所述交互同步地生成要显示的图像帧：所分析的面部图像、所述用户的需求、所存储的化妆程序信息、常见彩妆妆容、针对皮肤类型和种族特点的化妆品以及所述用户妆容偏好。所述用户妆容偏好。所述用户妆容偏好。

【技术实现步骤摘要】
【国外来华专利技术】数字彩妆师
[0001]相关申请的交叉引用
[0002]本申请要求2020年12月30日提交的非临时申请号17/138,078、2020年12月30日提交的非临时申请号17/138,143、2021年7月22日提交的法国申请序列号2107909和2021年7月22日提交的法国申请序列号2107906的优先权，以上申请的全部内容以引用方式并入本文。


[0003]本公开涉及数字彩妆师和用于交互式彩妆建议和彩妆教程的方法。

技术介绍

[0004]近来开发了为搜索和选择要购买的化妆品提供帮助的移动应用或App。App可提供工具以用于搜索特定类型的彩妆，或搜索可能是用户喜好的产品，或只是购买先前使用过的产品。一些App通过显示调色板来帮助选择口红或眼影的颜色。一些App提供颜色匹配特征来帮助搜索与衣服、配饰匹配的颜色或来自图片的颜色。此外，可提供关于如何应用特定类型的彩妆的视频。
[0005]一些App通过提供产品试妆应用来利用智能手机、平板电脑和笔记本电脑中的相机。这些应用中的一些应用被实现为网页应用或App。这些应用中的一些应用涉及使用相机：用智能手机相机拍摄自身肖像照片，将照片上传到网页应用，接着对所上传的图像涂抹虚拟彩妆产品。这些应用可提供多种选项，诸如平滑皮肤、提拉颧骨、调整眼睛颜色。这些应用可以为用户提供添加任何类型和颜色的彩妆以及改变颜色强度的能力。
[0006]然而，迄今为止提供的试妆应用通过照片编辑工具来创建妆容。一些现有的试妆应用从所上传的照片开始，并且提供一步功能来叠加彩妆类型和颜色，然后允许编辑彩妆照片。此外，用于带有相机的移动设备的照片编辑工具已经在社交媒体上变得流行起来。一款照片共享应用VSCO允许用户在共享照片之前对照片进行编辑和添加滤镜。许多VSCO滤镜可用于获得特定效果。VSCO滤镜可以由可应用于照片的值组成，包括曝光度、温度、对比度、淡入度、饱和度、色调、肤色。虽然此类照片编辑工具提供了编辑照片的功能，但编辑照片并不能提供个人彩妆体验。此外，现有的试妆应用工具不提供定制妆容的创建。例如，用户可能想要约会之夜妆容。现有的试妆应用可以提供约会之夜妆容，但不提供关于使用哪些彩妆产品可能最适合用户以及可如何应用各种类型的彩妆产品来创建妆容的建议。相反，用户可以对面部图像执行一些编辑以尝试获得定制妆容。此外，用户可能想要约会之夜妆容，该妆容基于用户的心情，或者用户可能想要描绘的心情。
[0007]这些现有的试妆网页应用或App缺乏完全的个性化，部分是因为它们执行的过程不是定制彩妆程序。典型现有的虚拟试妆应用依赖于针对他人创建的模板和妆容。当用户想要他们心目中的特定妆容或想要体验新妆容时，用户可能面临者不得不编辑针对他人创建的妆容。需要提供针对特定用户的定制试妆体验，其允许以媲美用户可能与个人彩妆师具有的体验的方式进行交互。需要一种彩妆体验，其中个人彩妆师教导用户如何在自己的
面部上得到期望妆容的步骤。
[0008]已经开发了社交媒体app来帮助用户创建他们自己的卡通头像。这些卡通头像可以定制头发造型、头发颜色、面部形状和颜色、彩妆、眉毛、鼻子形状等。但是，用户可能希望在社交媒体上发布他们真实面部的彩妆图像。
[0009]前述“
技术介绍
”描述是为了一般性地呈现本公开的上下文。目前指定的专利技术人的工作(在该背景部分中进行了描述的范围)以及该描述的在提交时原本可能不符合条件作为现有技术的方面既没有明示地也没有暗示地被承认是针对本专利技术的现有技术。

技术实现思路

[0010]一个方面是一种数字彩妆师系统，该数字彩妆师系统包括：移动设备，该移动设备具有显示设备、计算电路和存储器；数据库系统，该数据库系统存储化妆程序信息、常见彩妆妆容、针对皮肤类型和种族特点的化妆品以及用户的用户妆容偏好；机器学习系统，该机器学习系统用于分析面部图像；并且移动设备包括用于与数字彩妆师交互的用户界面，其中数字彩妆师执行与用户的交互式对话以便捕获用户的需求，包括彩妆妆容类型、室内或室外妆容、皮肤状况、面部问题区域、最喜欢的面部特征中的一者或多者。计算电路被配置为：输入用户的面部图像，经由机器学习系统分析用户的面部图像以识别面部部位，分析面部图像以确定面部特性，包括皮肤色调、眼睛颜色、头发颜色、嘴唇颜色和皮肤纹理中的一者或多者，并且随着与数字彩妆师的交互同步地生成要在显示设备上显示的图像帧。图像帧是基于以下而生成的：用户的所分析的面部图像；通过与用户的交互获得的用户的需求；所存储的化妆程序信息、常见彩妆妆容、针对皮肤类型和种族特点的化妆品以及用户妆容偏好中的一者或多者。
[0011]一个方面是一种数字彩妆师系统，该数字彩妆师包括：移动设备，该移动设备具有显示设备、计算电路和存储器；数据库系统，该数据库系统存储化妆程序信息、常见彩妆妆容、针对皮肤类型和种族特点的化妆品以及用户的用户妆容偏好；机器学习系统，该机器学习系统用于分析面部的图像；并且移动设备包括用于与数字彩妆师交互的用户界面，其中数字彩妆师执行与用户的交互式对话以便提供建议，包括请求化妆咨询、获取初始信息，该初始信息包括彩妆妆容类型、室内或室外妆容、皮肤状况、面部问题区域、最喜欢的面部特征中的一者或多者。计算电路被配置为：输入用户的面部图像，经由机器学习系统分析用户的面部图像以识别面部部位，分析面部图像以确定面部特性，包括皮肤色调、眼睛颜色、嘴唇颜色、头发颜色和皮肤纹理中的一者或多者，并且随着与数字彩妆师的交互同步地生成要在显示设备上显示的图像帧以提供建议。图像帧是基于以下而与交互同步地生成的：用户的所分析的面部图像；通过与用户的交互获得的初始信息；所存储的化妆程序信息、常见彩妆妆容、针对皮肤类型和种族特点的化妆品以及用户妆容偏好中的一者或多者。
[0012]例示性实施例的以上总体描述及其以下的详细描述仅仅是本公开的教导的示范性方面，而不是限制性的。
附图说明
[0013]因为结合附图考虑时，通过参考以下的详细描述将更好地理解本公开及其许多附带优点，所以将容易获得对本公开及其许多附带优点的更完整的理解，其中：
[0014]图1是根据本公开的示范性方面的系统的图；
[0015]图2是用于移动设备的计算机系统的框图；
[0016]图3展示了根据本公开的示范性方面的具有头像的用户界面屏；
[0017]图4展示了根据本公开的示范性方面的移动设备的用户界面屏；
[0018]图5是根据本公开的示范性方面的用于数字彩妆师与用户之间针对定制教程的交互的序列图；
[0019]图6是根据本公开的示范性方面的用于输入妆容类型的用户界面；
[0020]图7是根据本公开的示范性方面的面部分析的流程图；
[0021]图8是用于面部形状分类的卷积神经网络的示范性架构的图；
[0022]图9是用于面部标志检测的示范性深度学习神经网络的图；
[0023]图10是根据本公开的示范性方面的推荐系统的图；
[0024]图11展示了根据本公开的示范性方面的非限本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种数字彩妆师系统，包括：移动设备，所述移动设备具有显示设备、计算电路和存储器；数据库系统，所述数据库系统存储化妆程序信息、常见彩妆妆容、针对皮肤类型和种族特点的化妆品以及用户的用户妆容偏好；机器学习系统，所述机器学习系统用于分析面部的图像；并且所述移动设备包括用于与数字彩妆师交互的用户界面，其中所述数字彩妆师执行与所述用户的交互式对话以便捕获所述用户的需求，包括彩妆妆容类型、室内或室外妆容、皮肤状况、面部问题区域、最喜欢的面部特征中的一者或多者；所述计算电路被配置为：输入所述用户的面部图像，经由所述机器学习系统分析所述用户的面部图像以识别面部部位，分析所述面部图像以确定面部特性，包括皮肤色调、眼睛颜色、头发颜色、嘴唇颜色和皮肤纹理中的一者或多者，并且随着与所述数字彩妆师的所述交互同步地生成要在所述显示设备上显示的图像帧，其中所述图像帧是基于以下而生成的：所述用户的所分析的面部图像；通过与所述用户的所述交互获得的所述用户的所述需求；所存储的化妆程序信息、常见彩妆妆容、针对皮肤类型和种族特点的化妆品以及所述用户妆容偏好中的一者或多者。2.根据权利要求1所述的数字彩妆师系统，其中所述计算电路被配置为通过以预定回放速率显示所生成的图像帧来播放视频，其中所述视频包括章节，其中每个章节是化妆程序中的步骤，并且其中来自所述用户的输入包括用于控制所述视频的播放的视频控制命令。3.根据权利要求2所述的数字彩妆师系统，其中所述视频控制命令包括放慢回放速率、暂停回放、从步骤的开头重新开始、向前跳到视频中的下一步骤中的一者。4.根据权利要求3所述的数字彩妆师系统，其中当来自所述用户的所述输入是所述放慢回放速率视频控制命令时，所述计算电路将所述回放速率降低所述预定回放速率的百分比，并且在所述数据库中存储对当输入所述命令时正在播放的当前章节很复杂的指示。5.根据权利要求3所述的数字彩妆师系统，其中来自所述用户的所述输入是所述从步骤的开头重新开始视频控制命令，其中所述计算电路被配置为读取与当输入所述命令时正在播放的当前章节的开头相关联的时间点，并且从所述时间点的帧开始播放所述视频。6.根据权利要求3所述的数字彩妆师系统，其中来自所述用户的所述输入是所述从步骤的开头重新开始视频控制命令并且进一步包括用于做出对图像帧的生成的调整的命令，其中所述计算电路被配置为读取与正在播放的当前章节的开头相关联的时间点，并且生成经调整的图像帧以用于从所述时间点的帧开始播放所述视频。7.根据权利要求6所述的数字彩妆师系统，其中所述对图像帧的生成的调整包括对用于所述面部图像中的面部部位的彩妆的颜色的特性的改变，并且
其中所述颜色的所述特性是遮盖力、色度和光洁度中的一者或多者。8.根据权利要求6所述的数字彩妆师系统，其中所述用户输入包括所述妆容类型，并且其中所述对图像帧的生成的调整考虑与所述妆容类型相关联的所述用户妆容偏好。9.根据权利要求6所述的数字彩妆师系统，其中基于所述对图像帧的生成的调整而创建的彩妆妆容作为优选彩妆妆容存储在所述数据库中。10.根据权利要求1所述的数字彩妆师系统，其中所述计算电路被进一步配置为经由所述机器学习系统分析所述用户的面部图像以确定面部形状、嘴唇形状、眼睑形状和头发造型中的一者或多者，并且分析所述用户的面部图像以确定皮肤色调、眼睛颜色、头发颜色和皮肤纹理中的一者或多者，并且其中所述图像帧是基于化妆程序而生成的，所述化妆程序与所述面部形状、所述嘴唇形状、所述眼睑形状、所述头发造型、所述皮肤色调、所述眼睛颜色、所述头发颜色和所述皮肤纹理相关地存储。11.根据权利要求1所述的数字彩妆师系统，其中由所述数字彩妆师进行的与所述用户的所述交互式对话包括语音输入，并且其中所述移动设备对所述语音输入执行自然语言处理，并且所述数字彩妆师输出语音响应。12.根据权利要求11所述的数字彩妆师系统，其中与所述用户的所述交互式对话包括所述数字彩妆师说出问题以便获得关于所述用户的皮肤的所述状况的信息。13.根据权利要求11所述的数字彩妆师系统，其中与所述用户的所述交互式对话包括所述数字彩妆师说出问题以便获得关于所述用户的面部问题区域的信息。14.根据权利要求12所述的数字彩妆师系统，其中与所述用户的所述交互式对话包括所述数字彩妆师接收指示所述用户的皮肤为干燥的语音输入，并且其中所述图像帧是基于化妆程序而生成的，所述化妆程序与对所述用户的皮肤为干燥的指示相关地存储。15.根据权利要求1所述的数字彩妆师系统，其中存储在所述数据库系统中的所述化妆程序信息和化妆品是针对皮肤护理的，并且其中所述图像帧是基于针对皮肤护理的所述化妆程序信息和化妆品而生成的。16.根据权利要求1所述的数字彩妆师系统，其中存储在所述数据库系统中的所述化妆程序信息和化妆品是针对皮肤护理类彩妆的，并且其中所述图像帧是基于针对皮肤护理类彩妆的所述化妆程序信息和化妆品而生成的。17.根据权利要求16所述的数字彩妆师系统，其中所述皮肤护理类彩妆包括具有抗衰老特性的化妆品，并且其中所述图像帧是基于化妆程序而生成的，所述化妆程序与应用具有抗衰老特性的所述化妆品相关地存储。18.根据权利要求1所述的数字彩妆师系统，其中所述图像帧是基于所述用户的包括皮肤色调的所分析的面部图像而生成的，以便提供使用最适合所述皮肤色调的色度的化妆程序。19.根据权利要求1所述的数字彩妆师系统，进一步包括皮肤底色机器学习模型，所述皮肤底色机器学习模型用于选择适合所述面部图像的特定皮肤底色的化妆品的色度。
20.根据权利要求19所述的数字彩妆师系统，其中所述化妆品是粉底，并且其中所述皮肤底色机器学习模型用于选择适合所述面部图像的所述特定皮肤底色的所述粉底。21.一种数字彩妆师系统，包括：移动设备，所述移动设备具有显示设备、计算电路和存储器；数据库系统，所述数据库系统存储化妆程序信息、常见彩妆妆容、针对皮肤类型和种族特点的化妆品以及用户的用户妆容偏好；机器学习系统，所述机器学习系统...

【专利技术属性】
技术研发人员：M，
申请(专利权)人：欧莱雅公司，
类型：发明
国别省市：