一种商品的图片导航方法技术

本发明专利技术涉及通信技术领域，尤其涉及一种商品的图片导航方法，包括以下步骤：S1终端的线上系统通过图像识别模块提取数字视觉特征，选取且标记所述商品图像为语义区域标签，再将语义区域标签制作成热点链接；S2终端的线下系统搜集图片，通过图像识别模块提取数字视觉特征，获取并标记所述商品图像为语义区域标签，并储存在图片数据库中；S3用户点击所述热点链接，在图片数据库中进行数字视觉特征匹配，再通过用户界面包含有相同或相似的商品图像的图片呈现给用户。用户可通过浏览终端界面，通过包含商品的图片观察商品使用效果，经历一种无尽搜索与浏览地宝贵的视觉体验。

【技术实现步骤摘要】
一种商品的图片导航方法
本专利技术涉及通信
，尤其涉及一种商品的图片导航方法。
技术介绍
随着电子商务的发展，越来越多的人在互联网上进行购物。外观款式等图像信息是商品的重要特征，也影响着消费者对商品的购买行为。目前，市场上还没有任何产品可以帮助人们在对一张图片内的某个商品感兴趣时，可以直接找到其他也含有这个商品的图片，举例来说，如果一个人在看一张图片时，对图片里的模特穿的那条裤子感兴趣，那么他如何找到里面也有模特穿着相似的裤子其他图片，就是一个技术难题。现有技术中，为了解决上述技术问题，采用了以下技术方案：通过手动提取图片中含有的商品，并且提供1)关键字文本描述作为，或者2)这些商品图像的单独的超链接，以便用户可以找到其他图像或内容。可是，1)关键字文本描述的导航链接，能够找到商品的单独图片，但是对于同一商品的文本描述又不尽相同，便导致搜索结果的不准确；而且，消费者会失去宝贵的视觉体验，不能满足消费者通过包含商品的图片观察商品使用效果的目的，所以关键字文本描述链接的这种导航效果不好；而2)单独商品图像的链接，则无法规模化操作，因为不断会有新的海量图片产生，手动添加链接的效率低下，无法满足消费者的需求。
技术实现思路
(一)要解决的技术问题本专利技术的目的是提供一种使消费者经历直观视觉体验且具有较高效率搜索性能的商品的图片导航方法。(二)技术方案本专利技术是通过以下技术方案实现的：一种商品的图片导航方法，包括以下步骤：S1终端的线上系统通过图像识别模块提取用户界面上显示图片内的商品图像的数字视觉特征，选取且标记所述商品图像为语义区域标签，再将语义区域标签制作成热点链接。终端通过线上系统搜索感兴趣的商品及其应用图片，并作上语义区域标签和热点链接。S2终端的线下系统搜集图片，对图片内的商品图像通过图像识别模块提取数字视觉特征，获取并标记所述商品图像为语义区域标签，并储存在图片数据库中。终端的线下系统也通过图像识别模块搜索图片，标注语义区域标签，并把图片存储在数据库中。S3用户点击热点链接，终端的导航模块会检索该热点链接对应的语义区域标签，并在图片数据库中进行数字视觉特征匹配，再通过用户界面将包含有相同或相似的商品图像的图片呈现给用户。这样，用户就能通过终端看到穿戴同样服饰等商品的图片，给予用户直观的视觉体验。其中，步骤S1或S2中，语义区域标签的选取并标记采用深度神经网络方法和/或人工标签方法。其中，深度神经网络方法和人工标签方法采用以下具体方式相结合：采用深度神经网络选取并划出图片中的语义区域，再由人工在该语义区域打上标签；或者，采用深度神经网络划出图片中的语义区域并打上标签，由人工进行抽样纠正；或者，使用人工标签的结果去训练深度神经网络，以提升深度神经网络的精确度；或者，把深度神经网络打标签的结果的一部分交给人工标签进行二次标签，比较两种标签的吻合度，以判断深度神经网络方法的精确度。进一步，所述步骤S1或S2中，商品图像的语义区域标签还包括定义图片搜索范围的语义信息，用于实现图片数据库内的商品图像的相似性搜索。该步骤能够提供必要的语义信息以确定图片数据库内图片搜索范围。其中，所述步骤S3中，终端实现商品图像的数字视觉特征匹配采用余弦相似度的计算方法，计算公式如下：其中，A为用户查询的语义区域标签的数字视觉特征；B为图片数据库中的相关语义区域标签的数字视觉特征；i取自然数。或者，所述步骤S3中，终端实现商品图像的数字视觉特征匹配采用巴特查里亚距离技术的计算方法，计算公式如下：其中，其中，a为用户查询的语义区域标签的数字视觉特征，b为图片数据库中的相关图片的语义区域标签的数字视觉特征，i取自然数。优选地，所述步骤S2中，线下系统里的数据采集模块索引图片并进行正态化调整，使图片具有相同的大小和格式。从而，方便数据库的储存和图片中商品的匹配对比。(三)有益效果与现有技术和产品相比，本专利技术有如下优点：本专利技术通过使用终端自动识别出图片内关于特定“语义区域”的“视觉描述”，并在此“语义区域”上产生可点击交互的“视觉链接”，通过图片数据库及用户界面显示包含相同或相似性商品图像的图片。用户可通过浏览终端界面，通过包含商品的图片观察商品使用效果，经历一种无尽搜索与浏览地宝贵的视觉体验。附图说明图1为本专利技术提供的商品的图片导航方法示意图；图2为本专利技术提供的图片导航应用模块结构示意图；图3为本专利技术的图片链接演示图。图中标记：1-图像采集模块；2-标签模块；3-图片数据库；4-导航模块；5-用户界面。具体实施方式为了便于本领域普通技术人员理解和实施本专利技术，下面结合附图及具体实施方式对本专利技术作进一步的详细描述。如图1所示，本实施例提供一种商品的图片导航方法，具体包括以下步骤：S1线上系统商品图像的识别、选取及标记：如图2所示，终端(计算机、智能手机等)的线上系统通过图像识别模块提取用户界面5(显示屏)上显示的图片内的商品图像的数字视觉特征，选取且标记所述商品图像为语义区域标签，再将语义区域标签制作成热点链接。线上系统提供终端用户可使用的服务与交互界面。消费者可通过互联网搜索感兴趣的商品及其应用图片。如图3中所示的“手提包图片”以及由模特使用的该款手提包的图片。其中，视觉描述不是人类可读的，而是由计算机终端通过图像识别模块所识别出来的数字视觉特征。图像识别模块就是用机器代替人眼来做测量和判断。图像识别模块能够对商品进行图像处理，根据图像像素分布和亮度、颜色等信息，运算抽取商品图像的数字视觉特征。进一步，本实施例中采用机器学习的技术，优选采用深度神经网络(DeepNeuralNetwork，DNN)或人工标签，或两者结合，以选取并标记出图片中的语义区域。对于终端用户而言，这些语义区域会以热点链接方式呈现，它可以被鼠标点击，或用手指触碰，或用语音命令操作，从而实现在海量图片中的导航。其中，深度神经网络是从仿生学角度模拟人脑的分多层计算架构体系，非常接近人工智能(AI)的一个方向，能够表征一些复杂的模式与函数。本实施例中，采用深度神经网络的方式：使用深度神经网络技术使得对图片中的语义区域的大规模自动识别得以实现，而传统的人工识别只能处理非常少量的图片，而且不能保证足够更新速度。人工标签的方法：基于一个计算机编辑平台，编辑在这个平台上首先观看一些对时尚服饰打标签的例子，完成测试任务并被系统判定为及格后，编辑开始收到计算机分配给他的图片，编辑会在这些图片上的服饰部分划出区域并打上相应服饰类别的语义区域标签。深度神经网络与人工标签相结合：由于神经网络可以进行快速且大规模的自动化标签，可精确度稍低，而人工标签效率较低，而精确度较高。这两者结合使用可以达到更好地效果，有以下结合方式：1)由神经网络划出图片中的语义区域，由人工打上标签；2)由神经网络划出图片中的语义区域并打上标签，由人工进行抽样纠正；3)使用人工标签的结果去训练神经网络，以提升神经网络的精确度；4)把神经网络打标签的结果的一部分交给人工标签进行二次标签，比较两种标签的吻合度，以判断神经网络的精确度。进一步，为了提供必要的语义信息以确定图片数据库内图片搜索范围，商品图像的语义区域标签还包括商品图像的语义信息，用于实现图片数据库内的商品图像的相似性搜索。S2线下系统的图片搜集及存储：本文档来自技高网...

【技术保护点】
一种商品的图片导航方法，其特征在于，包括以下步骤：S1终端的线上系统通过图像识别模块提取用户界面上显示图片内的商品图像的数字视觉特征，选取且标记所述商品图像为语义区域标签，再将语义区域标签制成热点链接；S2终端的线下系统搜集图片，对图片内的商品图像通过图像识别模块提取数字视觉特征，获取并标记所述商品图像为语义区域标签，并储存在图片数据库中；S3用户点击热点链接，终端的导航模块会检索该热点链接对应的语义区域标签，并在图片数据库中进行数字视觉特征匹配，再通过用户界面将包含有相同或相似的商品图像的图片呈现给用户。

【技术特征摘要】
1.一种商品的图片导航方法，其特征在于，包括以下步骤：S1终端的线上系统通过图像识别模块提取用户界面上显示图片内的商品图像的数字视觉特征，选取且标记所述商品图像为语义区域标签，再将语义区域标签制成热点链接；S2终端的线下系统搜集图片，对图片内的商品图像通过图像识别模块提取数字视觉特征，获取并标记所述商品图像为语义区域标签，并储存在图片数据库中；S3用户点击热点链接，终端的导航模块会检索该热点链接对应的语义区域标签，并在图片数据库中进行数字视觉特征匹配，再通过用户界面将包含有相同或相似的商品图像的图片呈现给用户；所述步骤S1或S2中，语义区域标签的选取并标记采用深度神经网络方法和/或人工标签方法；采用深度神经网络选取并划出图片中的语义区域，再由人工在该语义区域打上标签；或者，采用深度神经网络划出图片中的语义区域并打上标签，由人工进行抽样纠正；或者，使用人工标签的结果去训练深度神经网络，以提升深度神经网络的精确度；或者，把深度神经网络打标签的结果的一部分交给人工标签进行二次标签，比较两种标签的吻合度，以判断深度神经网络方法的精确度；所述步骤S1或S2中，商品图像的语义区域标签还包括定义图片搜索范围的语义信息，用于实现图...

【专利技术属性】
技术研发人员：黄鼎隆，马修罗伯特斯科特，林晓梦，
申请(专利权)人：深圳码隆科技有限公司，
类型：发明
国别省市：北京;11