一种智能试妆货架及方法技术

本发明专利技术公开了一种智能试妆货架及方法，货架包括货架本体、控制终端、显示终端、镜面、图像采集终端、货物检测终端；货物检测终端采集货物变化信息，并发送至控制终端；图像采集终端采集用户的人像数据，发送至控制终端；控制终端判断对应的化妆品，获取化妆品对应的人脸应用位置及化妆品色谱；在对应的人脸位置生成化妆品应用后的覆盖图像；将生成的信息发送至显示终端；显示终端将显示的图像由镜面后部映射在镜面表面。本发明专利技术将AR技术与试妆货架结合，利用货物的变化识别被用户拾起的商品类别，将试妆画面与用户的面部进行叠加显示，能够让用户更加直观的获取自己的试妆效果，提高了用户的使用体验。

An Intelligent Cosmetic Shelf and Method

The invention discloses an intelligent cosmetic shelf and a method, which comprises a shelf body, a control terminal, a display terminal, a mirror, an image acquisition terminal and a cargo detection terminal; a cargo detection terminal collects cargo change information and sends it to a control terminal; an image acquisition terminal collects user's portrait data and sends it to a control terminal; and a control terminal judges the corresponding cosmetics and obtains it. Take the corresponding face application location and cosmetic chromatogram of cosmetics; generate the cover image after cosmetics application at the corresponding face location; send the generated information to the display terminal; the display terminal maps the displayed image from the rear of the mirror to the mirror surface. The invention combines AR technology with cosmetic shelves, identifies the commodity categories picked up by users by the change of goods, and superimposes the cosmetic screen and the user's face to display, so as to enable users to obtain their own cosmetic effect more intuitively and improve the user's use experience.

【技术实现步骤摘要】
一种智能试妆货架及方法
本专利技术涉及智能硬件
，具体涉及一种智能试妆货架及方法。
技术介绍
增强现实技术(AR)，是一种将真实世界信息和虚拟世界信息“无缝”集成的技术，是把原本在现实世界的一定时间空间范围内很难体验到的实体信息(视觉信息,声音,味道,触觉等),通过电脑等科学技术，模拟仿真后再叠加，将虚拟的信息应用到真实世界，被人类感官所感知，从而达到超越现实的感官体验。真实的环境和虚拟的物体实时地叠加到了同一个画面或空间同时存在。传统的货架仅作为向用户展览商品的工具，但是随着科学技术的发展，传统货架已不能满足用户的使用需求，具有多方位展示商品信息的货架更加受到用户的广泛欢迎。但是，现有的针对传统货架的改进仅在于表面，如何将AR技术与传统的货架结合是现在亟需解决的问题。现有的化妆品销售展台仅通过放置镜子来供用户试妆，需要商家提供大量样品，造成了一定的浪费。而如果是唇膏一类的需要与肌肤接触的商品，由于卫生问题，用户只能涂在手上试妆，效果不好，不能直观看到试妆效果。
技术实现思路
本专利技术的目的在于提供一种智能试妆货架及方法，用以解决现有货架功能单一，无法直观显示试妆效果的问题。为实现上述目的，本专利技术的技术方案为第一方面，一种智能试妆货架，包括货架本体、控制终端、显示终端、镜面、图像采集终端、货物检测终端；货物检测终端安装在货架本体的货筐上，连接控制终端，采集货筐内货物的变化信息，并发送至控制终端；图像采集终端安装在货架本体上，采集用户的人像数据，发送至控制终端；控制终端安装在货架本体上，接收货物检测终端发送的货物变化信息，根据货物变化信息判断所对应的化妆品，获取化妆品对应的人脸应用位置及化妆品色谱；接收图像采集终端采集的人像数据，生成至少包括人脸五官所在具体位置坐标、尺寸的信息，并显示再显示终端上，在对应的人脸位置生成化妆品应用后的覆盖图像，以及与覆盖图像区域对应的化妆品可选色谱；将生成的信息发送至显示终端；显示终端安装在货架本体上，接收控制终端发送的显示数据，显示终端将显示的图像由镜面后部映射在镜面表面；镜面安装在显示终端前方，镜面能够反射面板前方的光线并透过面板后方的显示终端的光线。作为本专利技术的一种优选方案，所述货物检测终端为重力传感器，采集货筐的重量变化信息，并发送至控制终端。作为本专利技术的一种优选方案，所述货物检测终端为光电传感器，采集货筐内的货物被拾取后的光照变化信息，并发送至控制终端。作为本专利技术的一种优选方案，所述图像采集终端为全景摄像头。作为本专利技术的一种优选方案，还设有用户信息采集装置，包括接近觉传感器、光强传感器、声强传感器中的一种或多种；所述接近觉传感器安装在货架本体上，连接控制终端，采集用户与试妆货架的距离数据，统计客流量及客注意力时间分布；所述光强传感器安装在货架本体上，连接控制终端，采集用户经过后的光照强度变化，发送至控制终端，统计客流量；所述声强传感器连接安装在货架本体上，连接控制终端，采集货架本体周围用户声音信息，发送至控制终端，通过声音强度判断客注意力时间分布。作为本专利技术的一种优选方案，所述控制终端、显示终端和图像采集终端集成为具有前置摄像头的平板电脑。作为本专利技术的一种优选方案，所述货架本体包括背板、基板、底座、货筐，所述背板固定在底座后，背板的不同高度上设有若干基板安装位，基板安装在基板安装位上，货筐放置在基板上，背板上还设有显示终端安装位。作为本专利技术的一种优选方案，所述基板底部设有向下方化妆品照射的补光灯，镜面周边设有补光灯带。作为本专利技术的一种优选方案，所述货架本体上还设有拾音装置，拾音装置连接控制终端，拾音装置接收用户的语音控制指令，发送至控制终端。第二方面，一种智能试妆方法，应用如第一方面任一项所述的智能试妆货架，包括如下步骤：获取人像数据信息；生成至少包括人脸五官所在具体位置坐标、尺寸的信息并显示；获取货筐的货物变化信息；判断货物变化信息是否有化妆品与之对应；若判断结果为是，则根据货物的变化信息匹配对应的化妆品；获取化妆品的种类，根据化妆品种类生成人脸对应位置的覆盖图像；获取化妆品的色谱，生成能够填充在覆盖图像上的若干可选色谱。本专利技术具有如下优点：本专利技术将AR技术与试妆货架结合，利用货物的变化信息(重量或光线)的变化识别被用户拾起的商品类别，采用AR技术将试妆画面与用户的面部进行叠加显示，能够让用户更加直观的获取自己的试妆效果，提高了用户的使用体验。附图说明图1是本专利技术的结构示意图。图2是本专利技术的结构框图。其中：1-显示终端，2-补光灯带，3-背板，4-底座，5-基板，6-货筐。具体实施方式以下实施例用于说明本专利技术，但不用来限制本专利技术的范围。实施例1见图1、图2，本实施例公开的一种智能试妆货架，包括货架本体、控制终端、显示终端1、镜面、图像采集终端、重力传感器；重力传感器安装在货架本体的货筐6底部，连接控制终端，重力传感器用于采集货筐的重量变化信息，并发送至控制终端。具体的，首先通过重力传感器获取每一类化妆品的重量，并录入控制终端的存储介质中，将所有的化妆品摆放入货筐6后，重力传感器采集货筐6中全部商品的总重量，并录入控制终端的存储介质。当用户拾取货筐6中的商品时，重力传感器会获取到重量变化信号，并将具体的重量变化数值发送至控制终端进行匹配。图像采集终端安装在货架本体上，采集用户的人像数据，发送至控制终端。图像采集终端首先用于采集图像发送至控制判断判断是否有用户正在挑选商品，如果有用户正在挑选商品，则将用户人脸信息发送至控制终端进行进一步处理。在货架或屏幕上可设置二维码等扫码区域，用户在第一次走进货架时，可首先通过手机扫码的方式识别会员身份，之后第二次可以通过人脸识别确认会员身份。控制终端安装在货架本体上，首先接收重力传感器发送的货筐重量变化信息，根据货筐重量变化信息判断所对应的化妆品(如不同系列的唇膏等产品都是具有不同重量的，通过不同重量的变化则能确认具体的类型)，获取化妆品对应的人脸应用位置(唇膏，则应用于唇部；眉笔，则应用于眉部)及化妆品色谱(不同的唇膏具有不同的色号)；接收图像采集终端采集的人像数据，生成至少包括人脸五官所在具体位置坐标、尺寸的信息，通过采集的具体位置坐标来进行准确的图像覆盖位置(如前面获得的商品信息是唇膏，则图像覆盖位置位于用户唇部，通过采集的五官尺寸信息，可将生成的图像覆盖的准确位置)，并显示在显示终端上，在对应的人脸位置生成化妆品应用后的覆盖图像，以及与覆盖图像区域对应的化妆品可选色谱，即不同色号可供用户选择试用；将生成的信息发送至显示终端1；显示终端1安装在货架本体上、便于用户照镜子的地方，接收控制终端发送的显示数据，即能够覆盖在五官准确位置的图像，显示终端1将显示的图像由镜面后部映射在镜面表面；镜面安装在显示终端1前方，镜面能够反射面板前方的光线并透过面板后方的显示终端1的光线，为实现此功能，将镜面设计为具有透光板和具有反射膜的结构，反射膜反射前方光线，实现镜子的效果，显示终端将显示图像从透光板后方射入，映射在前方与用户五官对应的位置。在实际应用中，可设置远程服务器，将重力传感器与远程服务器通过网络连接，远程服务器负责与用户手机端通信，用户在扫码确认会员后，远程服务器确认用户身份，用户在拿起货品时，重力传感器获取重量变化信本文档来自技高网...

【技术保护点】
1.一种智能试妆货架，其特征在于，包括货架本体、控制终端、显示终端、镜面、图像采集终端、货物检测终端；货物检测终端安装在货架本体的货筐上，连接控制终端，采集货筐内货物的变化信息，并发送至控制终端；图像采集终端安装在货架本体上，采集用户的人像数据，发送至控制终端；控制终端安装在货架本体上，接收货物检测终端发送的货物变化信息，根据货物变化信息判断所对应的化妆品，获取化妆品对应的人脸应用位置及化妆品色谱；接收图像采集终端采集的人像数据，生成至少包括人脸五官所在具体位置坐标、尺寸的信息，并显示再显示终端上，在对应的人脸位置生成化妆品应用后的覆盖图像，以及与覆盖图像区域对应的化妆品可选色谱；将生成的信息发送至显示终端；显示终端安装在货架本体上，接收控制终端发送的显示数据，显示终端将显示的图像由镜面后部映射在镜面表面；镜面安装在显示终端前方，镜面能够反射面板前方的光线并透过面板后方的显示终端的光线。

【技术特征摘要】
1.一种智能试妆货架，其特征在于，包括货架本体、控制终端、显示终端、镜面、图像采集终端、货物检测终端；货物检测终端安装在货架本体的货筐上，连接控制终端，采集货筐内货物的变化信息，并发送至控制终端；图像采集终端安装在货架本体上，采集用户的人像数据，发送至控制终端；控制终端安装在货架本体上，接收货物检测终端发送的货物变化信息，根据货物变化信息判断所对应的化妆品，获取化妆品对应的人脸应用位置及化妆品色谱；接收图像采集终端采集的人像数据，生成至少包括人脸五官所在具体位置坐标、尺寸的信息，并显示再显示终端上，在对应的人脸位置生成化妆品应用后的覆盖图像，以及与覆盖图像区域对应的化妆品可选色谱；将生成的信息发送至显示终端；显示终端安装在货架本体上，接收控制终端发送的显示数据，显示终端将显示的图像由镜面后部映射在镜面表面；镜面安装在显示终端前方，镜面能够反射面板前方的光线并透过面板后方的显示终端的光线。2.根据权利要求1所述的一种智能试妆货架，其特征在于，所述货物检测终端为重力传感器，采集货筐的重量变化信息，并发送至控制终端。3.根据权利要求1所述的一种智能试妆货架，其特征在于，所述货物检测终端为光电传感器，采集货筐内的货物被拾取后的光照变化信息，并发送至控制终端。4.根据权利要求1所述的一种智能试妆货架，其特征在于，所述图像采集终端为全景摄像头。5.根据权利要求1所述的一种智能试妆货架，其特征在于，还设有用户信息采集装置，包括接近觉传感器、光强传感器、声强传感器中的一种或多种；所述接近觉传感器安装在货架本体上，连...

【专利技术属性】
技术研发人员：贾润芝，
申请(专利权)人：颜沿上海智能科技有限公司，
类型：发明
国别省市：上海,31