用于提供定制的产品推荐的系统和方法技术方案

本发明专利技术公开了用于提供定制的护肤产品推荐的系统和方法。所述系统利用图像捕获装置和耦合到所述图像捕获装置的计算装置。所述计算装置促使所述系统通过利用卷积神经网络处理图像来分析捕获的用户图像，以确定所述用户的皮肤年龄。确定所述皮肤年龄可包括识别指示所述皮肤年龄的至少一个像素以及利用所述至少一个像素来创建热图，所述热图识别所述图像对所述皮肤年龄作出贡献的区域。所述系统可用于确定所述用户的目标皮肤年龄，确定用于实现所述目标皮肤年龄的护肤产品，并且提供供所述用户购买所述产品的选项。

【技术实现步骤摘要】
【国外来华专利技术】用于提供定制的产品推荐的系统和方法
本申请大体上涉及用于提供定制的产品推荐的系统和方法，并且具体地，涉及与利用卷积神经网络识别图像特征并利用所述特征来推荐产品有关的实施方案。
技术介绍
各种各样的护肤产品被销售用于治疗皮肤状况，但消费者常常难以确定她应使用哪种护肤产品。因此，消费者可能购买到并非治疗消费者寻求治疗的特定皮肤状况的护肤产品。因此，仍然需要针对消费者的需求定制护肤产品。美国公布号2013/0013330(“‘330公布”)涉及一种用于评估皮肤的美学和形态学状况以及为美容和/或皮肤病学治疗开处方的方法。‘330公布描述了获得关于用户的年龄和生活习惯的信息；执行对用户身体部分的生物特征分析；从所述分析中处理结果并将它们与皮肤的美学和形态学因子的预定数据进行比较；根据所处理的数据获得用户的皮肤模型；将用户的皮肤模型与包含在数据库中关于美容和/或皮肤病产品的至少二维预定数据相连接；以及为一盒预先选择的美容和/或皮肤病产品开处方。虽然‘330公布描述了对用户的皮肤进行分析和基于分析进行治疗，但是‘330公布未能利用卷积神经网络。‘330公布还未能描述评估皮肤特征以及未能执行与基线的比较。美国专利号8,625,864(“‘864专利”)涉及一种美容分析和治疗诊断的系统和方法。‘864专利描述了接收受试者的多个限定身体区中的每一个的可观察特性的评估数据；将所述多个限定的身体区中的每一个的评估数据转换为与每个身体区相关联的加权数据；从所述加权数据生成美容分析数据；以及输出美容分析数据。因此，虽然‘864专利描述了可执行美容分析的系统，但是‘864专利和其它现有技术未能公开评估皮肤偏好或确定产品偏好。因此，需要一种改进的评估消费者皮肤状况并基于所述评估提供定制的产品推荐的方法。
技术实现思路
包括用于提供定制的产品推荐的实施方案。一些实施方案包括系统，所述系统包括图像捕获装置和耦合到图像捕获装置的计算装置。计算装置可包括存储逻辑的存储器部件，所述逻辑促使系统通过图像捕获装置捕获用户图像并且通过卷积神经网络处理图像以确定用户的皮肤年龄。确定皮肤年龄可包括识别指示皮肤年龄的至少一个像素并利用所述至少一个像素来创建热图，所述热图识别图像对皮肤年龄作出贡献的区域。所述逻辑可进一步促使所述系统确定用户的目标皮肤年龄，确定供用户施用到用户皮肤区域以实现所述目标皮肤年龄的产品，并且提供供用户购买所述产品的选项。本专利技术还包括方法的实施方案。所述方法的一些实施方案包括接收用户图像并且通过卷积神经网络处理图像以确定用户的皮肤年龄。确定所述皮肤年龄可包括识别指示所述皮肤年龄的至少一个像素并利用所述像素创建二维热图，所述二维热图识别图像对皮肤年龄作出贡献的区域。所述方法还可包括确定供用户施用到皮肤区域以用于实现目标皮肤年龄的产品，其中确定产品适用于所述区域并提供供用户购买所述产品的选项。本专利技术还包括非暂态计算机可读介质的实施方案。非暂态计算机可读介质的一些实施方案包括逻辑，所述逻辑促使计算装置接收用户图像并创建图像的二维热图，其中二维热图经由卷积神经网络创建，以识别指示皮肤年龄的图像的至少一个像素，并且其中二维热图识别图像对皮肤年龄作出贡献的区域。所述逻辑可进一步促使计算装置从二维热图确定用户的目标皮肤年龄，并且确定供用户施用到皮肤区域以实现目标皮肤年龄的产品。在一些实施方案中，所述逻辑促使计算装置提供供用户购买所述产品的选项。附图说明应当理解，前述一般说明和以下的详细说明均描述了各种实施方案，并且旨在提供用于了解受权利要求书保护的主题的属性和特征的概述或框架。附图用来提供对所述各种实施方案的进一步理解，并且被并入本说明书中并构成本说明书的一部分。附图示出了本文所述的各种实施方案，并且连同说明书一起用来解释受权利要求书保护的主题的原理和操作。图1描绘了根据本文描述的实施方案的用于提供定制的产品推荐的计算环境；图2描绘了根据本文描述的实施方案的可用于识别图像特征的卷积神经网络的结构；图3A-3F描绘了根据本文描述的实施方案的可被分析以确定用于治疗的特征的图像；图4描绘了根据本文描述的实施方案的用于捕获用户图像以提供定制的产品推荐的用户界面；图5描绘了根据本文描述的实施方案的用户界面，所述用户界面示出了被分析以提供定制的产品推荐的图像；图6描绘了根据本文描述的实施方案的用户界面，所述用户界面提供归一化图像和可被创建用于产品推荐的热图；图7描绘了根据本文描述的实施方案的用户界面，所述用户界面向用户提供调查表以定制产品推荐；图8描绘了根据本文描述的实施方案的用于提供调查表的另外提示的用户界面；图9描绘了根据本文描述的实施方案的用户界面，所述用户界面用于基于捕获的图像提供用户的皮肤年龄；图10描绘了根据本文描述的实施方案的用于提供产品推荐的用户界面；图11描绘了根据本文描述的实施方案的用于提供产品推荐的细节的用户界面；图12描绘了根据本文描述的实施方案的用户界面，所述用户界面提供施用为用户推荐的产品的方案；图13描绘了根据本文描述的实施方案的用于提供产品方案细节的用户界面；图14描绘了根据本文描述的实施方案的用于提供与确定的方案相关的推荐的用户界面；图15描绘了根据本文描述的实施方案的用于向用户时间线提供产品推荐的用户界面。图16描绘了根据本文描述的实施方案的用于训练卷积神经网络以从图像识别特征的流程图；图17描绘了根据本文描述的实施方案的用于生成图像的热图的流程图，所述热图可用于进行特征辨识。图18描绘了根据本文描述的实施方案的用于提供定制的产品推荐的流程图；并且图19描绘了根据本文描述的实施方案的用于提供定制的产品推荐的远程计算装置的部件。具体实施方式化妆品行业中已使用多种系统和方法来向消费者提供定制的产品推荐。例如，使用基于特征的分析的系统通常用于分析皮肤，其中皮肤状况的一个或多个特征(例如细纹、皱纹、斑点、不均匀皮肤色调)通过寻找符合预定义的定义的特征而在捕获的图像中检测到。然而，基于特征的分析系统依赖于感兴趣的特定皮肤状况的预定定义，并且可能需要大量的计算机内存和/或处理能力。因此，基于特征的系统在诊断皮肤状况或确定皮肤年龄时可能不提供期望的准确度水平。鉴于一些传统的基于特征的图像分析系统的缺点，本文所述的方法和系统依赖于基于卷积神经网络(“CNN”)的系统，以向用户提供皮肤年龄分析和皮肤状况指示。本文的基于CNN的图像分析系统使用相对较少的图像预处理，这减少了系统对先前知识和预定定义的依赖。因此，与传统的基于特征的图像分析系统相比，本系统展示了改善的一般化，并且可提供更准确的皮肤分析和/或年龄预测，这可导致为使用所述系统的消费者进行更好的护肤产品或方案推荐。定义“锚特征”是指用户面部上用于使用户面部的图像归一化的特征。“卷积神经网络”是一种前馈人工神经网络的类型，其中各个神经元被覆盖使得它们对视觉领域中的重叠区域作出响应。“数据扩充”是指改变与训练图像或其它图像相关联的数据以创建图像的另外样本。本文的“热图”是指用户面部的数字图像，其中视觉上突出显示图像的部分以识别皮肤特征和/或区(例如，前额、脸颊、鼻唇皱褶线、鱼尾纹、眼底、上唇)，这对确定的皮肤年龄作出贡献。“图像捕获装置”是指能够捕获用户图像的装置，诸如数字相机；本文档来自技高网...

【技术保护点】
1.一种用于向用户提供定制的产品推荐的系统，包括：a)图像捕获装置；b)由所述图像捕获装置捕获的用户图像；和c)计算装置，所述计算装置耦合到所述图像捕获装置，其中所述计算装置包括存储逻辑的存储器部件，所述逻辑促使所述系统进行以下动作：(i)使用卷积神经网络来分析所述捕获的用户的图像以预测用户的年龄，其中预测所述用户的年龄包括识别所述捕获的图像中指示所述用户的年龄的至少一个像素，(ii)利用所述至少一个像素来生成热图，所述热图识别所述图像对所述用户的预测年龄作出贡献的区域，(iii)在对所述用户可见的显示装置上向所述用户显示所述热图，以及(iv)推荐供所述用户施用到皮肤区域以用于实现目标皮肤年龄的产品。

【技术特征摘要】
【国外来华专利技术】2016.03.21 US 62/311,0361.一种用于向用户提供定制的产品推荐的系统，包括：a)图像捕获装置；b)由所述图像捕获装置捕获的用户图像；和c)计算装置，所述计算装置耦合到所述图像捕获装置，其中所述计算装置包括存储逻辑的存储器部件，所述逻辑促使所述系统进行以下动作：(i)使用卷积神经网络来分析所述捕获的用户的图像以预测用户的年龄，其中预测所述用户的年龄包括识别所述捕获的图像中指示所述用户的年龄的至少一个像素，(ii)利用所述至少一个像素来生成热图，所述热图识别所述图像对所述用户的预测年龄作出贡献的区域，(iii)在对所述用户可见的显示装置上向所述用户显示所述热图，以及(iv)推荐供所述用户施用到皮肤区域以用于实现目标皮肤年龄的产品。2.根据权利要求1所述的系统，其中生成所述热图包括在所述用户的图像的至少一部分上覆盖第一层和第二层，所述第一层包括将所述图像分成多个区域的感兴趣的掩模，并且所述第二层包括像素图，所述像素图识别所述感兴趣的掩模中对所述用户的所述预测年龄作出贡献的区域。3.根据权利要求1或2所述的系统，其中所述逻辑促使所述热图显示给所述用户。4.根据前述权利要求中任一项所述的系统，其中所述热图包括至少一个缩放的像素，所述至少一个缩放的像素指示所述缩放的像素对所述用户的预测年龄作出贡献的水平。5.根据前述权利要求...

【专利技术属性】
技术研发人员：F·F·舍曼，S·C·维策，J·徐，
申请(专利权)人：宝洁公司，
类型：发明
国别省市：美国,US