基于智能收银台的商品识别方法、装置、设备及存储介质制造方法及图纸

本发明专利技术公开了一种基于智能收银台的商品识别方法，包括：将待识别商品的图像信息输入目标Siamese网络，提取特征信息；利用局部敏感哈希算法确定特征信息的哈希值，与图像库的哈希表进行检索，确定与待识别商品对应的预定数量个相似的商品信息进行展示。可见，在本方案中，通过Siamese网络和局部敏感哈希算法相结合来选择相似商品信息的方式，可以提高相似商品的检索速度，并且通过将预定数量个商品信息进行展示的方式，可以向用户选择正确商品信息的机会，给予用户使用智能收银台的纠错体验，提高智能收银台的识别准确度。本发明专利技术还公开了一种基于智能收银台的商品识别装置、设备及计算机可读存储介质，同样能实现上述技术效果。

【技术实现步骤摘要】
基于智能收银台的商品识别方法、装置、设备及存储介质
本专利技术涉及图片识别
，更具体地说，涉及一种基于智能收银台的商品识别方法、装置、设备及计算机可读存储介质。
技术介绍
目前，随着互联网技术的发展，人们对生活的体验感急需提升，无人超市、无人便利店、三公里配送等等新零售逐渐兴起，成为了新的风口，相应的，人脸识别门禁、店内姿态识别、无人支付等等也成为需要重点发展和应用的新型技术。无人支付的智能收银是核心技术，现市场主要有五种收银方式：1)基于无人货柜的收货方式。2)基于智能收银台的收货方式。其中，基于智能收银台的收货方式中，具体包括以下三种方式：①商品逐个扫二维码；②RFID式；③基于机器视觉识别，手势、人脸、扫码支付式。智能收银台的三种方式中，最方便、成本最低的商品识别支付方式为基于视觉识别的支付方式，但基于零售店内现场环境的影响，现市场所有基于视觉的智能收银台都不能达到100％的准确识别效果，识别效果严重影响购物支付体验。因此，如何提高智能收银台的识别准确度，是本领域技术人员需要解决的问题。
技术实现思路
本专利技术的目的在于提供一种基于智能收银台的商品识别方法、装置、设备及计算机可读存储介质，以实现提高智能收银台的识别准确度。为实现上述目的，本专利技术实施例提供了如下技术方案：一种基于智能收银台的商品识别方法，包括：获取待识别商品的图像信息；将所述图像信息输入目标Siamese网络，通过所述目标Siamese网络提取所述待识别商品的特征信息；利用局部敏感哈希算法确定所述特征信息的哈希值，并与图像库的哈希表进行检索，确定与所述待识别商品对应的预定数量个相似的商品信息；将所述预定数量个相似的商品信息进行展示，以使用户选择与所述待识别商品对应的商品信息。其中，所述将所述预定数量个相似的商品信息进行展示之前，还包括：接收相似商品展示指令。其中，所述获取待识别商品的图像信息，包括：获取整体图像信息；从所述整体图像信息中检测待识别商品，并从所述整体图像信息中截取与所述待识别商品对应的图像信息。其中，所述图像库的哈希表生成方法包括：将图像库中的每个图片输入所述目标Siamese网络，通过所述目标Siamese网络提取所述图像库中的每个图片的特征信息；根据每个图片的特征信息及局部敏感哈希算法创建所述哈希表；所述哈希表中记载了与每个图片的特征信息对应的哈希值。其中，所述与图像库的哈希表进行检索，确定与所述待识别商品对应的预定数量个相似的商品信息，包括：通过K邻近法、所述图像库的哈希表和所述特征信息的哈希值，从所述图像库中选择与所述待识别商品最相似的K个商品信息。一种基于智能收银台的商品识别装置，包括：图像信息获取单元，用于获取待识别商品的图像信息；特征信息提取单元，用于将所述图像信息输入目标Siamese网络，通过所述目标Siamese网络提取所述待识别商品的特征信息；商品信息确定单元，用于利用局部敏感哈希算法确定所述特征信息的哈希值，并与图像库的哈希表进行检索，确定与所述待识别商品对应的预定数量个相似的商品信息；商品信息展示单元，用于将所述预定数量个相似的商品信息进行展示，以使用户选择与所述待识别商品对应的商品信息。其中，本方案还包括：展示指令接收单元，用于接收相似商品展示指令。其中，本方案还包括哈希表创建单元；所述哈希表创建单元包括：特征信息提取子单元，用于将图像库中的每个图片输入所述目标Siamese网络，通过所述目标Siamese网络提取所述图像库中的每个图片的特征信息；哈希表创建子单元，用于根据每个图片的特征信息及局部敏感哈希算法创建所述哈希表；所述哈希表中记载了与每个图片的特征信息对应的哈希值。一种基于智能收银台的商品识别设备，包括：存储器，用于存储计算机程序；处理器，用于执行所述计算机程序时实现如上述基于智能收银台的商品识别方法的步骤。一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现上述基于智能收银台的商品识别方法的步骤。通过以上方案可知，本专利技术实施例提供的一种基于智能收银台的商品识别方法，包括：获取待识别商品的图像信息；将所述图像信息输入目标Siamese网络，通过所述目标Siamese网络提取所述待识别商品的特征信息；利用局部敏感哈希算法确定所述特征信息的哈希值，并与图像库的哈希表进行检索，确定与所述待识别商品对应的预定数量个相似的商品信息；将所述预定数量个相似的商品信息进行展示，以使用户选择与所述待识别商品对应的商品信息。可见，在本方案中，通过Siamese网络和局部敏感哈希算法相结合来选择相似商品信息的方式，可以提高相似商品的检索速度，并且通过将预定数量个商品信息进行展示的方式，可以向用户选择正确商品信息的机会，给予用户使用智能收银台的纠错体验，提高智能收银台的识别准确度。本专利技术还公开了一种基于智能收银台的商品识别装置、设备及计算机可读存储介质，同样能实现上述技术效果。附图说明为了更清楚地说明本专利技术实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本专利技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。图1为本专利技术实施例公开的一种基于智能收银台的商品识别方法流程示意图；图2为本专利技术实施例公开的双支的Siamese网络结构图；图3为本专利技术实施例公开的Siamese网络训练流程示意图；图4为本专利技术实施例公开的特征s1的提取流程示意图；图5为本专利技术实施例公开的一种图像库特征提取方法示意图；图6为本专利技术实施例公开的基于Siamese网络和LSH相结合的图像检索流程示意图；图7为本专利技术实施例公开的一种相似图片检索流程示意图；图8为本专利技术实施例公开的基于Siamese网络与LSH结合的图像检索的人机交互智能识别整体示意图；图9为本专利技术实施例公开的一种基于智能收银台的商品识别装置结构示意图。具体实施方式下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。本专利技术实施例公开了一种基于智能收银台的商品识别方法、装置、设备及计算机可读存储介质，以实现提高智能收银台的识别准确度。参见图1，本专利技术实施例提供的一种基于智能收银台的商品识别方法，包括：S101、获取待识别商品的图像信息；其中，所述获取待识别商品的图像信息，包括：获取整体图像信息；从所述整体图像信息中检测待识别商品，并从所述整体图像信息中截取与所述待识别商品对应的图像信息。具体的，在本实施例中的待识别商品的图像信息，具体是客户把所购买的商品放置在智能识别收银台上，从摄像头处获取包括待识别商品及背景的整体图像信息，该整体图像信息中可能包括多个待识别商品，为了对待识别商品进行逐一识别，需要通过目标检测算法从整体图像信息中进行检测，对整体图像信息中的商品进行画框、分类等操作，把画出框的每个商品截取出来，并进行预处理操作后，便是本实施例中的待识别商品的图像信息。需要说明的是，本实施例本文档来自技高网...

【技术保护点】
1.一种基于智能收银台的商品识别方法，其特征在于，包括：获取待识别商品的图像信息；将所述图像信息输入目标Siamese网络，通过所述目标Siamese网络提取所述待识别商品的特征信息；利用局部敏感哈希算法确定所述特征信息的哈希值，并与图像库的哈希表进行检索，确定与所述待识别商品对应的预定数量个相似的商品信息；将所述预定数量个相似的商品信息进行展示，以使用户选择与所述待识别商品对应的商品信息。

【技术特征摘要】
1.一种基于智能收银台的商品识别方法，其特征在于，包括：获取待识别商品的图像信息；将所述图像信息输入目标Siamese网络，通过所述目标Siamese网络提取所述待识别商品的特征信息；利用局部敏感哈希算法确定所述特征信息的哈希值，并与图像库的哈希表进行检索，确定与所述待识别商品对应的预定数量个相似的商品信息；将所述预定数量个相似的商品信息进行展示，以使用户选择与所述待识别商品对应的商品信息。2.根据权利要求1所述的商品识别方法，其特征在于，所述将所述预定数量个相似的商品信息进行展示之前，还包括：接收相似商品展示指令。3.根据权利要求1所述的商品识别方法，其特征在于，所述获取待识别商品的图像信息，包括：获取整体图像信息；从所述整体图像信息中检测待识别商品，并从所述整体图像信息中截取与所述待识别商品对应的图像信息。4.根据权利要求1至3中任意一项所述的商品识别方法，其特征在于，所述图像库的哈希表生成方法包括：将图像库中的每个图片输入所述目标Siamese网络，通过所述目标Siamese网络提取所述图像库中的每个图片的特征信息；根据每个图片的特征信息及局部敏感哈希算法创建所述哈希表；所述哈希表中记载了与每个图片的特征信息对应的哈希值。5.根据权利要求4所述的商品识别方法，其特征在于，所述与图像库的哈希表进行检索，确定与所述待识别商品对应的预定数量个相似的商品信息，包括：通过K邻近法、所述图像库的哈希表和所述特征信息的哈希值，从所述图像库中选择与所述待识别商品最相似的K个商品信息。6.一种基于...

【专利技术属性】
技术研发人员：张量，
申请(专利权)人：广州逗号智能零售有限公司，
类型：发明
国别省市：广东,44