化妆辅助装置以及化妆辅助方法制造方法及图纸

化妆辅助装置(100)具有：图像取得部(101)，其取得用户面部图像、目标面部图像、安排面部图像；图像决定部(103)，其在从用户面部图像提取到的面部特征量与从目标面部图像提取到的面部特征量的差量值在阈值以下的情况下，采用目标面部图像中所确定的每个脸部部位的化妆项目，在差量值比阈值大的情况下，对于在所述目标面部图像与所述安排面部图像中具有不同的特征的一部分脸部部位，采用安排面部图像中所确定的化妆项目；以及信息生成部(104)，其生成将使用所采用的化妆项目时的步骤提示给用户的化妆步骤信息，并向预定装置输出。

Cosmetic AIDS and cosmetic AIDS

The cosmetic assistant device (100) has: an image acquisition unit (101), which obtains the user's face image, the target face image and arranges the face image; and an image determination unit (103), which uses each face determined in the target face image when the difference between the face feature amount extracted from the user's face image and the face feature amount extracted from the target face image is below the threshold value. In the case of a large difference ratio threshold, for a part of the face part with different features in the target face image and the arranged face image, the cosmetic items determined in the arranged face image are arranged; and the information generation unit (104) is used to generate the cosmetic step information for the user when the cosmetic item is used. And output to the predetermined device.

【技术实现步骤摘要】
【国外来华专利技术】化妆辅助装置以及化妆辅助方法
本公开涉及辅助用户化妆的化妆辅助装置以及化妆辅助方法。
技术介绍
例如当用户在化妆品售卖处等地方让店员帮忙给脸化妆(makeup)后又想自己在自己的脸上化此妆时，有时会无法很好地再现(重现)。另外，例如在用户再次光顾化妆品售卖处等并让与上述店员不同的店员帮忙化上述妆的情况下，有时也无法很好地再现。于是，考虑利用将表示化了妆时的妆的状态的图像重叠于面部(脸部)图像来生成模拟(simulation)图像的技术(例如参照专利文献1)。与面部图像重叠的图像(以下称为“化妆部位图像”)例如可列举表示眼影(eyeshadow)、腮红(cheek)这样的化妆项目(item)的图像。例如，设置于化妆品售卖处等的店铺终端生成表示店员推荐的妆的模拟图像，并将该模拟图像发送到智能手机等用户终端。由此，用户能一边查看显示于用户终端的模拟图像一边自己化妆，因此妆的再现性提高。另外，模拟图像能保存于店铺终端从而在店员之间共享，因此在用户再次到店里让店员帮忙化上述妆的情况下，妆的再现性也会提高。现有技术文献专利文献1：日本专利第1715357号公报
技术实现思路
化妆部位图像通过对模特的面部图像中的各脸部部位(例如眉、眼睑、脸颊、唇等)进行各种化妆项目的描绘来制作。然而，在用户的面部与模特的面部之间所有脸部部位的特征都相同是罕见的。在选择了与特征不同的脸部部位对应的化妆部位图像的情况下，该化妆部位图像按照用户的脸部部位的特征变形来显示。其结果，可能会导致变为表示整个面部并不协调的不自然的妆的模拟图像。于是，本公开的一个技术方案提供能够给用户提示整个面部协调的自然的妆的化妆辅助装置。本公开的化妆辅助装置具有：图像取得部，其取得用户面部图像、目标(target)面部图像和安排(arrange)面部图像，所述目标面部图像是按每个脸部部位确定了具有预定形状和预定颜色的化妆项目的图像，所述安排面部图像是与目标面部图像相比一部分脸部部位的特征不同的按每个脸部部位确定了具有预定形状和预定颜色的化妆项目的图像；图像决定部，其在从用户面部图像提取到的面部特征量与从目标面部图像提取到的面部特征量的差量值在阈值以下的情况下，采用目标面部图像中所确定的每个脸部部位的化妆项目，在差量值比阈值大的情况下，对于上述一部分脸部部位采用安排面部图像中所确定的化妆项目，对于其他脸部部位采用目标面部图像中所确定的化妆项目；以及信息生成部，其生成将使用所采用的化妆项目时的步骤提示给用户的化妆步骤信息，并向预定装置输出。此外，这些总括性的或具体的技术方案既可以通过系统、方法、集成电路、计算机程序或记录介质来实现，也可以通过系统、装置、方法、集成电路、计算机程序和记录介质的任意组合来实现。根据本公开，能够给用户提示整个面部协调的自然的妆。附图说明图1是表示本公开涉及的化妆辅助系统以及化妆辅助装置的构成的一例的框图。图2是表示本公开涉及的化妆辅助装置的整体工作的一例的流程图。图3是表示本公开涉及的化妆部位图像表(table)的一例的图。图4是表示本公开涉及的化妆辅助装置的化妆部位图像决定处理的流程的一例的流程图。图5是对本公开涉及的特征量比较处理的具体例进行说明的图。图6是表示本公开涉及的化妆步骤信息的显示例的图。图7是表示本公开涉及的模板数据生成处理的流程的一例的流程图。图8是表示本公开涉及的安排数据生成处理的流程的一例的流程图。图9是对本公开涉及的特征量比较处理的具体例进行说明的图。图10是对本公开涉及的特征量比较处理的具体例进行说明的图。具体实施方式以下，参照附图，对本公开的一个实施方式详细进行说明。(得到专利技术的见解)化妆模拟系统中所使用的化妆部位图像例如通过专业的化妆师等对模特的面部图像按每个脸部部位(例如眉、眼睑、脸颊、唇等)描绘各种化妆项目(例如描眉(eyebrow)、眼影、腮红、唇膏(口红)等)来制作。如此制作出的化妆部位图像在化妆模拟系统中由用户或者化妆品售卖处等的店员来选择，并与用户的面部图像重叠而显示。然而，在用户的面部与模特的面部之间所有脸部部位的特征都相同是罕见的。在与所选择的化妆部位图像对应的脸部部位的特征不同于用户的脸部部位的特征的情况下，化妆模拟系统将所选择的化妆部位图像按照用户的脸部部位的特征变形来显示。其结果，会导致显示出表示整个面部并不协调的不自然的妆的模拟图像。于是，在本专利技术中，要使得能够给用户提示整个面部协调的自然的妆。＜系统构成＞首先，使用图1，对包括本实施方式涉及的化妆辅助装置的化妆辅助系统的构成进行说明。图1是表示化妆辅助系统以及化妆辅助装置的一例的框图。图1所示的化妆辅助系统1例如配置于工厂、化妆品销售店铺、美容院、医疗机构、整理仪容的化妆室、活动会场以及个人住宅等。如图1所示，化妆辅助系统1包括化妆辅助装置100、拍摄装置200、显示装置300、操作装置400、存储装置500以及终端装置600。化妆辅助装置100是辅助用户化妆的装置，例如配置于工厂、化妆品销售店铺、美容院、医疗机构、整理仪容的化妆室、活动会场以及个人住宅等。化妆辅助装置100既可以是台式装置，也可以是也能够容易搬运的便携式装置。将会在后面对化妆辅助装置100的构成进行说明。拍摄装置200拍摄用户正面的面部。在此，所拍摄的面部例如是没有化妆的面部。此外，以下将拍摄到没有化妆的用户的正面面部的静态图像称为“用户面部图像”。拍摄装置200将用户面部图像向化妆辅助装置100输出。显示装置300显示重叠有化妆部位图像的用户面部图像或者重叠有化妆部位图像的目标面部图像等。化妆部位图像指的是表示化妆项目的形状以及颜色的图像。化妆项目例如可列举描眉、眼影、眼线(eyeline)、睫毛膏(mascara)、腮红、唇膏等。目标面部图像指的是，拍摄到用户选作“想变成的脸”的模特的没有化妆的正面面部的静态图像。模特不限于专业模特，例如也可以是普通人。可以将对多个模特的正面面部进行拍摄而得到的多个静态图像作为目标面部图像预先存储于存储装置500。再者，也可以通过拍摄装置200或者网络取得成为目标面部图像的静态图像并存储于存储装置500。此外，以下将重叠有化妆部位图像的用户面部图像称为“化妆后用户面部图像”，将重叠有化妆部位图像的目标面部图像称为“化妆后目标面部图像”。此外，化妆后用户面部图像也可以称为“模拟图像”。操作装置400受理由用户进行的各种操作(例如后述的化妆后目标面部图像的选择操作等)，将操作的内容通知给化妆辅助装置100。存储装置500例如设置于网络上的服务器装置(图略)，存储各种信息。例如，存储装置500存储化妆部位图像表(详情后述。参照图3)。另外例如，存储装置500按每个用户(用户识别信息)存储化妆步骤信息(详情后述)等。再者，存储装置500存储多个目标面部图像以及多个化妆后目标面部图像。这些化妆后目标面部图像既可以预先存储于存储装置500，也可以为通过网络等取得并使之存储。终端装置600例如是由用户使用的智能手机和/或平板电脑等用户终端。终端装置600能够与化妆辅助装置100通信。此外，拍摄装置200、显示装置300、操作装置400和存储装置500中的至少一个装置也可以设置于化妆辅助装置100。＜装置的构成＞接着，使用图1，对本文档来自技高网...

【技术保护点】
1.一种化妆辅助装置，具有：图像取得部，其取得用户面部图像、目标面部图像和安排面部图像，所述目标面部图像是按每个脸部部位确定了具有预定形状和预定颜色的化妆项目的图像，所述安排面部图像是与所述目标面部图像相比一部分脸部部位的特征不同的按每个脸部部位确定了具有预定形状和预定颜色的化妆项目的图像；图像决定部，其在从所述用户面部图像提取到的面部特征量与从所述目标面部图像提取到的面部特征量的差量值在阈值以下的情况下，采用所述目标面部图像中所确定的每个所述脸部部位的所述化妆项目，在所述差量值比所述阈值大的情况下，对于所述一部分脸部部位采用所述安排面部图像中所确定的所述化妆项目，对于其他脸部部位采用所述目标面部图像中所确定的所述化妆项目；以及信息生成部，其生成将使用所采用的所述化妆项目时的步骤提示给用户的化妆步骤信息，并向预定装置输出。

【技术特征摘要】
【国外来华专利技术】2016.07.14 JP 2016-1395001.一种化妆辅助装置，具有：图像取得部，其取得用户面部图像、目标面部图像和安排面部图像，所述目标面部图像是按每个脸部部位确定了具有预定形状和预定颜色的化妆项目的图像，所述安排面部图像是与所述目标面部图像相比一部分脸部部位的特征不同的按每个脸部部位确定了具有预定形状和预定颜色的化妆项目的图像；图像决定部，其在从所述用户面部图像提取到的面部特征量与从所述目标面部图像提取到的面部特征量的差量值在阈值以下的情况下，采用所述目标面部图像中所确定的每个所述脸部部位的所述化妆项目，在所述差量值比所述阈值大的情况下，对于所述一部分脸部部位采用所述安排面部图像中所确定的所述化妆项目，对于其他脸部部位采用所述目标面部图像中所确定的所述化妆项目；以及信息生成部，其生成将使用所采用的所述化妆项目时的步骤提示给用户的化妆步骤信息，并向预定装置输出。2.根据权利要求1所述的化妆辅助装置，所述图像决定部，判定从所述用户面部图像提取到的关于预定脸部部位的面部特征量与从所述目标面部图像提取到的关于所述预定脸部部位的面部特征量的第1差量值是否在所述阈值以下，当所述第1差量值在所述阈值以下的情况下，采用在所述目标面部图像中对所述预定脸部部位所确定的所述化妆项目，当所述第1差量值比所述阈值大的情况下，判定从所述用户面部图像提取到的关于所述预定脸部部位的面部特征量与从所述安排面部图像提取到的关于所述预定脸部部位的面部特征量的第2差量值是否在所述阈值以下，当所述第2差量值在所述阈值以下的情况下，采用在所述安排面部图像中对所述预定脸部部位所确定的所述化妆项目。3.根据权利要求2所述的化妆辅助装置，所述图像取得部取得多个所述安排面部图像，所述图像决定部判定从所述用户面部图像提取到的关于所述预定脸部部位的面部特征量与从所述多个安排面部图像的每一个提取到的关于所述预定脸部部位的面部特征量的所述第2差量值是否在所述阈值以下，并采用对所述阈值以下的所述第2差量值中的最...

【专利技术属性】
技术研发人员：西千枝，浅井理惠子，竹下幸子，
申请(专利权)人：松下知识产权经营株式会社，
类型：发明
国别省市：日本,JP