化妆模拟辅助装置、化妆模拟辅助方法和化妆模拟辅助程序制造方法及图纸

化妆模拟辅助装置具有：模拟图像生成部(210)，其生成在由拍摄用户面部的图像来作为面部图像的拍摄部拍摄到的面部图像上重叠化妆图像而得到的模拟图像，所述化妆图像表示对面部的面部器官实施了化妆时的化妆状态；模拟图像输出部(220)，其输出所生成的模拟图像；兴趣程度检测部(230)，其基于在模拟图像被输出时由摄像部拍摄到的面部图像，检测用户对化妆图像的兴趣程度；以及兴趣程度信息输出部(240)，其输出表示所检测出的兴趣程度的兴趣程度信息。

Makeup simulation auxiliary device, makeup simulation auxiliary method and makeup simulation assistant program

The makeup simulation auxiliary device has an analog image generating unit (210), which is generated by an analog image that overlaps a make-up image on the face image taken by the photographing Department of the face image of the user. The make-up image indicates the make-up state of the facial organs on the opposite side of the facial image; An image output unit (220) that outputs an analog image generated by the output, an interest degree detection unit (230), which detects a user's interest in a make-up image, and an interest level information output unit (240) based on the facial image captured by the camera department when the simulated image is output; and the output indicates the degree of interest detected. Interest level information.

【技术实现步骤摘要】
【国外来华专利技术】化妆模拟辅助装置、化妆模拟辅助方法和化妆模拟辅助程序
本公开涉及化妆模拟辅助装置、化妆模拟辅助方法和化妆模拟辅助程序。
技术介绍
制造销售作为与化妆(makeup)相关的商品的一例的化妆品的制造商常常利用如下销售方式：在百货店或超市等中开设独自的化妆品销售店(店内)，通过所谓的面对面销售，一边与顾客对话一边进行销售。在化妆品的面对面销售中，例如化妆品销售店的美容职员(BA)观察顾客的皮肤等，并基于该观察结果进行建议，选定认为对顾客最好的化妆品。以往，在化妆品销售店中，利用了辅助由美容职员进行的面对面销售的各种工具。作为辅助由美容职员进行的面对面销售的工具的一例，提出了不实际对顾客的面部实施化妆，而在计算机上模拟化妆后的顾客的面部的技术(例如参照专利文献1)。在专利文献1所记载的技术中，根据拍摄到的用户的面部的图像，进行用户面部的面部特征分析和肤色分析，基于面部特征分析和肤色分析的结果，显示适合用户面部的面部特征和肤色的商品的信息，并且，对使用该商品虚拟地实施了化妆的用户的面部进行模拟并显示。现有技术文献专利文献1:日本特开2011-22733号公报
技术实现思路
如专利文献1中记载的技术那样，辅助面对面销售的各种工具是为了最终引发化妆品销售而开发的。但是，即使利用了辅助面对面销售的各种工具，如果实际没有激发顾客对化妆的潜在意愿、对化妆的不满，不提供顾客想要的信息，则存在不能引发化妆品销售这样的问题。实际上，对于是否激发顾客对化妆的潜在意愿而高效地引发化妆品的销售，与美容职员的经验、能力有很有关系。进一步讲，为了激发顾客对化妆的潜在意愿，也可考虑店员询问顾客这样的应对，但正在接待顾客的店员没有足够的时间，难以进行那样的应对。对此，虽然提出了在销售化妆品时灵活运用虚拟地实施化妆的模拟，但也只是显示该描绘结果，检测顾客的真实意愿仍取决于店员的技巧。另外，该课题不限于美容职员(BA)面对面地进行销售的情形。在化妆品的销售中，顾客独自判断并购入化妆品的风格的网点或基于互联网等的通信销售(以下，称作无店员销售)的比重在升高，认为不仅仅是通过装置/程序简单地实施化妆的模拟，对掌握顾客的潜在意愿进行辅助或判断的要求也在升高。本公开的一个方式，提供对面对面销售和无店员销售进行辅助以使得高效地引发与化妆相关的商品销售的化妆模拟辅助装置、化妆模拟辅助方法和化妆模拟辅助程序。本公开的化妆模拟辅助装置具有：模拟图像生成部，其生成在由拍摄用户面部的图像来作为面部图像的拍摄部拍摄到的所述面部图像上重叠化妆图像而得到的模拟图像，所述化妆图像表示对所述面部的面部器官实施了化妆时的化妆状态；模拟图像输出部，其输出所生成的所述模拟图像；兴趣程度检测部，其基于在所述模拟图像被输出时拍摄到的面部图像，检测所述用户对所述化妆图像的兴趣程度；以及兴趣程度信息输出部，其输出表示所检测出的所述兴趣程度的兴趣程度信息。此外，这些概括性或具体方式可以由系统、装置、方法、集成电路、计算机程序、或记录介质实现，也可以由系统、装置、方法、集成电路、计算机程序和记录介质的任意组合实现。根据本公开，能够辅助面对面销售和无店员销售，使得高效地引发与化妆相关的商品销售。附图说明图1是示出本实施方式中的面对面销售涉及的化妆模拟系统的功能结构的框图。图2是示出化妆模拟时的用户画面和店员画面的显示例的图。图3是示出本实施方式中的兴趣信息的图。图4是示出本实施方式中的化妆候选决定表的图。图5是示出本实施方式中的用户信息的图。图6是示出本实施方式中的店员侧终端装置的工作的流程图。图7是示出面对面销售开始时的用户画面和店员画面的显示例的图。图8是示出本实施方式中的无店员销售涉及的化妆模拟系统的功能结构的框图。具体实施方式以下，基于附图，详细说明本实施方式。图1是示出本公开的实施方式的化妆模拟系统10的功能结构的框图。化妆模拟系统10例如在化妆品销售店中，作为对由美容职员(以下称作“店员”)进行的面对面销售、即一边与顾客(对应于本公开的“用户”，以下称作“用户”)对话一边销售的销售方式进行辅助的工具来利用。化妆模拟系统10构成为具有经由通信线路彼此连接的顾客侧终端装置100(平板终端)和店员侧终端装置200(带笔平板终端)。顾客侧终端装置100例如朝用户竖立设置，显示使用用户的面部而进行化妆之后的面部的模拟图像。店员侧终端装置200在通过顾客侧终端装置100显示了模拟图像时，辅助面对面销售，使得高效地引发与化妆相关的商品(化妆品)的销售。此外，顾客侧终端装置100不限于平板终端，也可以固定在化妆品销售店的柜台。顾客侧终端装置100(对应于本公开的“化妆模拟辅助装置”)具有拍摄部110和第1显示部120。此外，虽然没有图示，但顾客侧终端装置100具有作为照明单元的照明部、作为闪光单元的闪光部和作为麦克风单元的麦克风部。另外，虽然没有图示，但顾客侧终端装置100例如具有作为处理器的CPU(CentralProcessingUnit：中央处理器)、保存有控制程序的ROM(ReadOnlyMemory：只读存储器)等存储介质、RAM(RandomAccessMemory：随机存取存储器)等作业用存储器和通信电路。在该情况下，上述各部的功能通过CPU执行控制程序来实现。拍摄部110拍摄用户面部的图像来作为面部图像。拍摄部110是CMOS(ComplementaryMetal-OxideSemiconductor：互补金属氧化半导体)摄像头或CCD(ChargeCoupledDevice：电荷耦合器件)摄像头等。拍摄部110将拍摄到的面部图像输出到店员侧终端装置200。第1显示部120具有能够等倍地显示用户面部的大小的液晶显示器或有机EL(organicelectroluminescence:有机电致发光)显示器等，显示从顾客侧终端装置100输出的模拟图像。图2A是示出包含模拟图像400的用户画面的显示例的图。如图2A所示，模拟图像400包含由拍摄部110拍摄到的面部图像410和能够选择对化妆对象的部位(以下，称作“面部器官”，例如眼、口)的妆容(在图2A的例子中为口红)的颜色的表格图像420。430是表示当前由用户选择的化妆的颜色的颜色图像。第1显示部120为了受理用户或店员对顾客侧终端装置100的操作，以覆盖画面的方式配置有触摸屏，从而成为触摸屏显示器。此外，受理用户或店员的操作的方式不限于触摸屏显示器，也可以另外设置操作部。店员侧终端装置200具有模拟图像生成部210、模拟图像输出部220、兴趣程度检测部230、兴趣程度信息输出部240、化妆候选信息输出部250、第2显示部260、面部器官位置信息存储部270、面部位置检测部280、面部器官确定部290、判定部300、兴趣程度历史信息记录部310和兴趣程度历史信息存储部320。此外，虽然没有图示，但店员侧终端装置200例如具有作为处理器的CPU(CentralProcessingUnit：中央处理器)、保存有控制程序(对应于本公开的“化妆模拟辅助程序”)的ROM(ReadOnlyMemory：只读存储器)等存储介质、RAM(RandomAccessMemory：随机存取存储器)等作业用存储器和通信电路。在该情况下，上述各部的功能本文档来自技高网...

【技术保护点】
1.一种化妆模拟辅助装置，具有：模拟图像生成部，其生成在由拍摄用户面部的图像来作为面部图像的拍摄部拍摄到的所述面部图像上重叠化妆图像而得到的模拟图像，所述化妆图像表示对所述面部的面部器官实施了化妆时的化妆状态；模拟图像输出部，其输出所生成的所述模拟图像；兴趣程度检测部，其基于在所述模拟图像被输出时拍摄到的面部图像，检测所述用户对所述化妆图像的兴趣程度；以及兴趣程度信息输出部，其输出表示所检测出的所述兴趣程度的兴趣程度信息。

【技术特征摘要】
【国外来华专利技术】2015.12.28 JP 2015-2569891.一种化妆模拟辅助装置，具有：模拟图像生成部，其生成在由拍摄用户面部的图像来作为面部图像的拍摄部拍摄到的所述面部图像上重叠化妆图像而得到的模拟图像，所述化妆图像表示对所述面部的面部器官实施了化妆时的化妆状态；模拟图像输出部，其输出所生成的所述模拟图像；兴趣程度检测部，其基于在所述模拟图像被输出时拍摄到的面部图像，检测所述用户对所述化妆图像的兴趣程度；以及兴趣程度信息输出部，其输出表示所检测出的所述兴趣程度的兴趣程度信息。2.根据权利要求1所述的化妆模拟辅助装置，所述兴趣程度检测部基于在所述模拟图像被输出时拍摄到的面部图像，检测所述用户感兴趣的面部器官和与所述化妆图像对应的面部器官的一致程度，由此检测所述用户的兴趣程度。3.根据权利要求1或2所述的化妆模拟辅助装置所述兴趣程度包含所述用户对所述化妆图像的满意程度。4.根据权利要求1～3中的任一项所述的化妆模拟辅助装置，所述化妆模拟辅助装置具有基于检测出的所述兴趣程度来输出化妆候选信息的化妆候选信息输出部，所述化妆候选信息表示推荐接下来实施的化妆的候选。5.根据权利要求4所述的化妆模拟辅助装置，所述化妆候选信息输出部在所述兴趣程度高的情况下，输出将针对所述面部器官的、和与所述化妆图像对应的化妆不同的化妆作为所述候选来表示的化妆候选信息，另一方面，在所述兴趣程度低的情况下，输出将针对与所述面部器官不同的面部器官的化妆作为所述候选来表示的化妆候选信息。6.根据权利要求4所述的化妆模拟辅助装置，具有：面部器官位置信息存储部，其存储表示平均的面部器官在面部中的位置的面部器官位置信息；面部位置检测部，其基于拍摄到的所述面部图像，检测所述用户的面部器官在面部中的位置；以及面部器官确定部，其基于所述面部器官位置信息和所述面部位置检测部的检测结果，确定作为所述用户的面部的特征的面部器官，所述化妆候选信息输出部输出将针对所确定出的所述面部器官的化妆作为所述候选来表示的化妆候选信息。7.根据权利要求1～6中的任一项所述的化妆模拟辅助装置，所述兴趣程度信息输出部向与所述模拟图像被输出的第1显示部不同的第2显示部输出所述兴趣程度信息。8.根据权利要求1～7中的任一项所述的化妆模拟辅助装置，所述兴趣程度检测部检测所述用户正面朝向所述拍...

【专利技术属性】
技术研发人员：田冈宏毅，佐藤哲郎，竹下幸子，浅井理惠子，
申请(专利权)人：松下知识产权经营株式会社，
类型：发明
国别省市：日本,JP