具有美肤美妆指导功能的智能镜系统及方法技术方案

一种具有美肤美妆指导功能的智能镜系统及方法，该系统包括附有镜膜的曲面或平面的屏幕、三维人脸信息采集装置、存储器与处理单元，存储器中预存有至少妆容规则库，三维人脸信息采集装置、存储器均与处理单元相连，三维人脸信息采集装置用于采集用户的真实三维人脸信息，处理单元经配置对三维人脸信息进行处理，将三维人脸信息与基于妆容大数据采集经过机器学习得出的三维人脸模型进行对比，根据对比的差异，在三维人脸模型的基础上结合妆容规则库进行美妆推荐与美妆指导，将推荐的妆容样图呈现在屏幕上，且用户能够通过镜膜查看自己的面部。本系统和方法可指导化妆者完成个性化和接近专业化的化妆，具有易操作、定制化，个性化的优点。

Intelligent mirror system and method with the function of beautifying skin and making up

【技术实现步骤摘要】
具有美肤美妆指导功能的智能镜系统及方法
本专利技术涉及一种具有美肤美妆指导功能的智能镜系统及方法。
技术介绍
随着社会物质生活水平的提高,人们尤其是女性越来越重视美妆尤其是面部美妆的运用，而美妆的具体实现则离不开镜子。现有的智能镜产品主要提供的功能为人机交互，显示消息、图片、视频等。但已有的智能镜在用户体验上仍有待提高，尤其是，对用户在美肤美妆过程中的实时指导作用不大，并不能很好地适应用户的当前自身肌肤状况和环境状况，难以满足用户在实时场景下的美妆需求。用户对与自身肌肤状况与面部特征的了解不深入，系统也没有适于不同用户的定制化、个性化的化妆方法可学。以上
技术介绍
内容的公开仅用于辅助理解本专利技术的专利技术构思及技术方案，其并不必然属于本专利申请的现有技术，在没有明确的证据表明上述内容在本专利申请的申请日已经公开的情况下，上述
技术介绍
不应当用于评价本申请的新颖性和创造性。
技术实现思路
本专利技术的主要目的在于克服现有技术的上述缺陷，提供一种具有美肤美妆指导功能的智能镜系统及方法。为实现上述目的，本专利技术采用以下技术方案：在一些实施例中，一种具有美肤美妆指导功能的智能镜系统，包括附有镜膜的曲面或平面的屏幕、三维人脸信息采集装置、存储器与处理单元，所述存储器中预存有妆容规则库，优选还存有用户肤色肤质状况数据库、化妆品信息数据库，所述三维人脸信息采集装置、所述存储器均与所述处理单元相连，所述三维人脸信息采集装置用于采集用户的真实三维人脸信息，所述处理单元经配置对所述三维人脸信息进行处理，将所述三维人脸信息与基于妆容大数据采集经过机器学习得出的三维人脸模型进行对比，根据所述对比的差异，在所述三维人脸模型的基础上结合妆容规则库、优选以及用户肤色肤质状况数据库、化妆品信息数据库，进行美妆推荐与美妆指导，并将推荐的妆容样图呈现在所述屏幕上，且用户能够通过所述镜膜查看自己的面部。优选地，所述美妆指导包括对根据用户选择反馈生成对应妆容的化妆过程指引，如每一步所使用的化妆工具、工具用法、配套粉、液及色彩；优选地，经过机器学习得到人脸模型，是通过对人脸妆容的大数据采集，基于卷积网络CRN模型得出归一优化的人脸三维模型。优选地，所述三维人脸信息采集装置包括光栅发射装置和光栅图案采集装置，所述光栅发射装置和所述光栅图案采集装置与所述处理单元相连，所述光栅发射装置用于发射栅状探测光线，以在用户的脸上形成结构光图案，所述采集装置用于采集所述结构光图案以获得所述三维人脸信息；更优选地，所述采集装置为CCD。在一些实施例中，一种具有美肤美妆指导功能的智能镜系统，包括附有镜膜的曲面或平面的屏幕、环境光模拟装置与处理单元，所述环境光模拟装置包括环境光感应装置和发光装置，所述环境光感应装置和所述发光装置均与所述处理单元相连，所述环境光感应装置用于对包括自然光在内的环境光进行感应，所述处理单元根据所述环境光感应装置获得的感应信息，控制所述发光装置进行发光，基于环境光信息、用户妆容目标场景与个人偏好设置对环境光进行模拟校正调节，以适应用户在不同环境下个性化的化妆需求，和/或模拟出用户需要的各种情境的光照环境，和/或在环境光照不充足的情况下补光；优选地，所述发光装置包括分别设置在屏幕上部和下部的两条LED光带。在一些实施例中，一种具有美肤美妆指导功能的智能镜系统，包括附有镜膜的曲面或平面的屏幕、屏幕显示与图像参数校正装置、与处理单元，所述屏幕显示与图像参数校正装置包括环境光感应装置，所述环境光感应装置与所述处理单元相连，所述环境光感应装置用于对包括自然光在内的环境光进行感应，所述处理单元根据所述环境光感应装置获得的感应信息控制所述屏幕，基于环境光信息、用户妆容目标场景与个人偏好设置对屏幕显示与图像参数如屏幕亮度、色彩、色温、色调进行校正调节，以适应用户在不同环境下个性化的化妆需求。在一些实施例中，一种具有美肤美妆指导功能的智能镜系统，包括附有镜膜的曲面或平面的屏幕、摄像头、化妆笔、存储器与处理单元，所述存储器中预存有笔数据库和妆容规则库，所述摄像头、所述存储器均与所述处理单元相连，所述摄像头用于捕捉所述化妆笔在化妆过程中的动作信息以及用户人脸上产生的妆容变化，所述处理单元经配置实时识别所述化妆笔的动作位置、方向及化妆轨迹，并结合人脸的妆容变化，与所述笔数据库的预置笔信息和所述妆容规则库中的预置妆容规则信息进行对比，根据对比结果对用户的化妆动作方法进行提示和指导，所述进行提示和指导包括以所述屏幕上的扬声器发音和/或及基于所述屏幕的增强现实显示的方式来向用户指引化妆动作方法，和/或提示用户是否达到相应步骤的预定效果。优选地，所述化妆笔上具有可识别标记，所述处理单元利用所述摄像头捕捉的图像中的所述可识别标记的信息，来识别所述化妆笔的动作位置、方向及化妆轨迹；或者，初始化阶段先对所述化妆笔的形状及色彩特征的记录，所述处理单元利用所述摄像头捕捉的图像中的化妆笔形状及色彩特征的信息，来识别所述化妆笔的动作位置、方向及化妆轨迹。优选地，所述化妆笔包括笔本体以及设置在笔本体上的压感单元和方向传感器，所述压感单元安装在笔头，用于检测所述化妆笔在化妆过程中的压感信息，所述方向传感器用于检测所述化妆笔在化妆过程中的运行方向信息，所述压感单元和所述方向传感器以无线或有线方式连接所述处理单元，所述处理单元还获取所述压感信息和所述运行方向信息，并根据所述压感信息和所述运行方向信息分析得到所述化妆笔的动作方式和化妆轨迹。在一些实施例中，一种具有模拟美肤美妆练习功能的智能镜系统，包括附有镜膜的曲面或平面的屏幕、存储器、化妆笔与处理单元，所述存储器中预存有笔数据库和妆容规则库，所述化妆笔包括笔本体以及设置在笔本体上的压感单元和方向传感器，所述压感单元安装在笔头，用于检测所述化妆笔在模拟化妆过程中对物体的压感信息，所述方向传感器用于检测所述化妆笔在模拟化妆过程中的运行方向信息，所述压感单元和所述方向传感器以无线或有线方式连接所述处理单元，所述处理单元根据所述压感信息和所述运行方向信息分析得到所述化妆笔的动作方式和化妆轨迹，结合笔数据库和妆容规则库，生成人脸三维坐标系下的虚拟化妆图像，并通过所述屏幕进行显示，以完成化妆模拟练习过程。在一些实施例中，一种美肤美妆指导方法，采用所述的智能镜系统，在用户化妆或模拟化妆的过程中给予用户美肤美妆指导。在一些实施例中，一种美妆辅助方法，使用所述的智能镜系统，所述方法包含以下步骤：步骤1：初始化智能镜系统的光源设置，根据环境信息、妆容目标场景与个人偏好设置和调整光照；步骤2：初始化妆容偏好，场景选择，设定个人偏好选择，系统据此筛选可选妆容类别；步骤3：获取用户的面部三维结构信息与色彩信息，并构建用户人脸三维模型；步骤4：通过机器学习的方式获得与该用户人脸三维模型对应的完美脸部模型，对比得出差异；步骤5：根据步骤4得出的差异与预制的妆容规则库，生成推荐妆容与化妆步骤；步骤6：引导用户完成每一化妆步骤，优选地，在用户化妆时，识别用户本文档来自技高网...

【技术保护点】
1.一种具有美肤美妆指导功能的智能镜系统，其特征在于,包括附有镜膜的曲面或平面的屏幕、三维人脸信息采集装置、存储器与处理单元，所述存储器中预存有妆容规则库，优选还存有用户肤色肤质状况数据库、化妆品信息数据库，所述三维人脸信息采集装置、所述存储器均与所述处理单元相连，所述三维人脸信息采集装置用于采集用户的真实三维人脸信息，所述处理单元经配置对所述三维人脸信息进行处理，将所述三维人脸信息与基于妆容大数据采集经过机器学习得出的三维人脸模型进行对比，根据所述对比的差异，在所述三维人脸模型的基础上结合妆容规则库、优选以及用户肤色肤质状况数据库、化妆品信息数据库，进行美妆推荐与美妆指导，并将推荐的妆容样图呈现在所述屏幕上，且用户能够通过所述镜膜查看自己的面部；/n优选地，所述美妆指导包括对根据用户选择反馈生成对应妆容的化妆过程指引，如每一步所使用的化妆工具、工具用法、配套粉、液及色彩；/n优选地，经过机器学习得到人脸模型，是通过对人脸妆容的大数据采集，基于卷积网络CRN模型得出归一优化的人脸三维模型。/n优选地，所述三维人脸信息采集装置包括光栅发射装置和光栅图案采集装置，所述光栅发射装置和所光栅图案采集装置与所述处理单元相连，所述光栅发射装置用于发射栅状探测光线，以在用户的脸上形成结构光图案，所述采集装置用于采集所述结构光图案以获得所述三维人脸信息；更优选地，所述采集装置为CCD。/n...

【技术特征摘要】
1.一种具有美肤美妆指导功能的智能镜系统，其特征在于,包括附有镜膜的曲面或平面的屏幕、三维人脸信息采集装置、存储器与处理单元，所述存储器中预存有妆容规则库，优选还存有用户肤色肤质状况数据库、化妆品信息数据库，所述三维人脸信息采集装置、所述存储器均与所述处理单元相连，所述三维人脸信息采集装置用于采集用户的真实三维人脸信息，所述处理单元经配置对所述三维人脸信息进行处理，将所述三维人脸信息与基于妆容大数据采集经过机器学习得出的三维人脸模型进行对比，根据所述对比的差异，在所述三维人脸模型的基础上结合妆容规则库、优选以及用户肤色肤质状况数据库、化妆品信息数据库，进行美妆推荐与美妆指导，并将推荐的妆容样图呈现在所述屏幕上，且用户能够通过所述镜膜查看自己的面部；
优选地，所述美妆指导包括对根据用户选择反馈生成对应妆容的化妆过程指引，如每一步所使用的化妆工具、工具用法、配套粉、液及色彩；
优选地，经过机器学习得到人脸模型，是通过对人脸妆容的大数据采集，基于卷积网络CRN模型得出归一优化的人脸三维模型。
优选地，所述三维人脸信息采集装置包括光栅发射装置和光栅图案采集装置，所述光栅发射装置和所光栅图案采集装置与所述处理单元相连，所述光栅发射装置用于发射栅状探测光线，以在用户的脸上形成结构光图案，所述采集装置用于采集所述结构光图案以获得所述三维人脸信息；更优选地，所述采集装置为CCD。


2.一种具有美肤美妆指导功能的智能镜系统，其特征在于,包括附有镜膜的曲面或平面的屏幕、环境光模拟装置与处理单元，所述环境光模拟装置包括环境光感应装置和发光装置，所述环境光感应装置和所述发光装置均与所述处理单元相连，所述环境光感应装置用于对包括自然光在内的环境光进行感应，所述处理单元根据所述环境光感应装置获得的感应信息，控制所述发光装置进行发光，基于环境光信息、用户妆容目标场景与个人偏好设置对环境光进行模拟校正调节，以适应用户在不同环境下个性化的化妆需求，和/或模拟出用户需要的各种情境的光照环境，和/或在环境光照不充足的情况下补光；
优选地，所述发光装置包括分别设置在屏幕上部和下部的两条LED光带。


3.一种具有美肤美妆指导功能的智能镜系统，其特征在于,包括附有镜膜的曲面或平面的屏幕、屏幕显示与图像参数校正装置、与处理单元，所述屏幕显示与图像参数校正装置包括环境光感应装置，所述环境光感应装置与所述处理单元相连，所述环境光感应装置用于对包括自然光在内的环境光进行感应，所述处理单元根据所述环境光感应装置获得的感应信息控制所述屏幕，基于环境光信息、用户妆容目标场景与个人偏好设置对屏幕显示与图像参数如屏幕亮度、色彩、色温、色调进行校正调节，以适应用户在不同环境下个性化的化妆需求。


4.一种具有美肤美妆指导功能的智能镜系统，其特征在于,包括附有镜膜的曲面或平面的屏幕、摄像头、化妆笔、存储器与处理单元，所述存储器中预存有笔数据库和妆容规则库，所述摄像头、所述存储器均与所述处理单元相连，所述摄像头用于捕捉所述化妆笔在化妆过程中的动作信息以及用户人脸上产生的妆容变化，所述处理单元经配置实时识别所述化妆笔的动作位置、方向及化妆轨迹，并结合人脸的妆容变化，与所述笔数据库的预置笔信息和所述妆容规则库中的预置妆容规则信息进行对比，根据对比结果对用户的化妆动作方法进行提示和指导，所述进行提示和指导包括以所述屏幕上的扬声器发音和/或及基于所述屏幕的...

【专利技术属性】
技术研发人员：俞敬松，钊洋，张永伟，高爱华，
申请(专利权)人：北京蓝海达信科技有限公司，
类型：发明
国别省市：北京;11