智能货柜的物品核对方法及系统技术方案

本说明书提供的智能货柜的物品核对方法及系统，服务器通过对目标图像进行图像识别，确定目标图像中的物品的类别以及物品在目标图像中所在的位置；目标用户(即补货人员)通过显示装置选择要核对的目标类别；客户端确定目标类别对应的目标物品在目标图像中的位置，对每个目标物品依次进行编号，并在显示装置中显示。补货人员可以根据显示装置中显示的目标物品的编号，一目了然知道目标物品的数量和摆放位置，直观、快速地对目标物品进行核对，以确定所有的目标物品都被正确识别，大大提高补理货的速度。的速度。的速度。

【技术实现步骤摘要】
智能货柜的物品核对方法及系统


[0001]本说明书涉及无人零售领域，尤其涉及一种智能货柜的物品核对方法及系统。

技术介绍

[0002]目前的智能零售无人货柜主要采用视觉识别方案，依靠摄像头获取图像，通过图像识别技术进行商品识别，判断用户购买的商品。当无人货柜中的商品出现短缺时，补货人员需要向无人货柜添加商品，以保证货源充足。在补货人员向无人货柜添加商品后，需要逐层核对无人货柜的服务器是否可以正确识别出所有商品，以便于后续售卖过程中能够通过无人货柜采集的图像正确识别用户购买的商品。当补货人员发现漏识别或者识别错误时需要找出漏识别或者识别有错误的商品，重新开门进行调整。现有技术中，通过在图像中将所有商品框出来进行商品名称的标记，来帮助补货人员核对查找出识别错误的商品。但这种方法的图像画面杂乱，商品之间的标记交错，补货人员眼花缭乱找出识别有误或者漏识别的商品较困难、耗时较长，影响补货速度。
[0003]因此，需要提供一种效率更高、视觉效果好的智能货柜的物品核对方法及系统。

技术实现思路

[0004]本说明书提供一种效率更高、视觉效果好的智能货柜的物品核对方法及系统。
[0005]第一方面，本说明书提供一种智能货柜的物品核对方法，应用于所述智能货柜的客户端，包括：获取目标图像并发送给服务器，所述目标图像中包括多个物品；接收所述服务器发送的对所述目标图像的图像识别结果，所述图像识别结果包括所述多个物品中的至少部分物品对应的类别及其在所述目标图像中的位置；控制显示装置显示所述目标图像以及类别列表，所述类别列表包括所述多个物品对应的至少一个类别；以及基于目标用户对所述类别列表的选择，控制所述显示装置在所述目标图像中对所述目标用户选择的类别进行标记。
[0006]在一些实施例中，所述基于目标用户对所述类别列表的选择，控制所述显示装置在所述目标图像中对所述目标用户选择的类别进行标记，包括：接收所述显示装置发送的所述目标用户对目标类别的选择，所述目标类别包括所述类别列表中的一个；在所述目标图像中对所述目标类别对应的至少一个目标物品进行标记，生成目标标记图像；以及控制所述显示装置显示所述目标标记图像。
[0007]在一些实施例中，所述在所述目标图像中对所述目标类别对应的至少一个目标物品进行标记，包括：基于所述图像识别结果，确定所述至少一个目标物品中的每个目标物品在所述目标图像中对应的位置；基于所述每个目标物品在所述目标图像中对应的位置以及预设的排列规则，在所述目标图像中对所述至少一个目标物品依次进行编号。
[0008]在一些实施例中，所述排列规则包括：基于坐标序列的排列规则。
[0009]在一些实施例中，所述在所述目标图像中对所述至少一个目标物品依次进行编号，包括：基于所述每个目标物品在所述目标图像中对应的位置以及所述排列规则，确定所
述每个目标物品的编号；以及在所述目标图像中，对所述每个目标物品在其所在的位置显示对应的编号。
[0010]在一些实施例中，所述目标用户包括通过所述服务器进行身份验证的用户。
[0011]在一些实施例中，在所述获取目标图像并发送给服务器之前，还包括：获取所述智能货柜的关门信号，其中，所述智能货柜的柜门处设置有感应传感器，与所述客户端通信连接。
[0012]在一些实施例中，所述智能货柜的物品核对方法，还包括：接收所述显示装置发送的确认核对结果的指令，并发送给所述服务器。
[0013]第二方面，本说明书提供一种智能货柜的物品核对系统，包括所述智能货柜的客户端，包括至少一个存储介质以及至少一个处理器，所述至少一个存储介质存储有至少一个指令集用于智能货柜的物品核对；所述至少一个处理器同所述至少一个存储介质通信连接，其中，当所述智能货柜的物品核对系统运行时，所述至少一个处理器读取所述至少一个指令集并实施本说明书第一方面所述的智能货柜的物品核对方法。
[0014]第三方面，本说明书还提供一种智能货柜的物品核对方法，应用于所述智能货柜的服务器，包括：接收所述智能货柜的客户端发送的目标图像，所述目标图像中包括多个物品；对所述目标图像进行图像识别生成图像识别结果，所述图像识别结果包括所述多个物品中的至少部分物品对应的类别及其在所述目标图像中的位置；以及将所述图像识别结果发送给所述客户端，其中，所述客户端控制显示装置显示所述目标图像以及类别列表，并基于目标用户对所述类别列表的选择，控制所述显示装置在所述目标图像中对所述目标用户选择的类别进行标记，所述类别列表包括所述多个物品对应的至少一个类别。
[0015]在一些实施例中，所述智能货柜的物品核对方法，还包括：接收所述客户端发送的确认核对结果的指令。
[0016]第二方面，本说明书提供一种智能货柜的物品核对系统，包括所述智能货柜的服务器，包括包括至少一个存储介质以及至少一个处理器，所述至少一个存储介质存储有至少一个指令集用于智能货柜的物品核对；所述至少一个处理器同所述至少一个存储介质通信连接，其中，当所述智能货柜的物品核对系统运行时，所述至少一个处理器读取所述至少一个指令集并实施本说明书第三方面所述的智能货柜的物品核对方法。
[0017]由以上技术方案可知，本说明书提供的智能货柜的物品核对方法及系统中，服务器通过对目标图像进行图像识别，生成图像识别结果，并发送给客户端，从而确定目标图像中的物品的类别以及物品在目标图像中所在的位置；目标用户(即补货人员)可以通过客户端的显示装置选择要核对的货架层对应的目标图像以及要核对的目标图像中的目标类别；客户端可以根据目标用户选择的目标类别以及服务器发送的图像识别结果，确定目标类别对应的目标物品在目标图像中的位置，并在目标图像中对每个目标物品依次进行编号，并在显示装置中显示对目标物品的编号。补货人员可以根据显示装置中显示的目标物品的编号，一目了然知道目标物品的数量以及摆放位置，直观、快速地对目标物品的数量以及是否符合摆放规则进行核对，以确定目标图像中所有的目标物品都被标记了编号，不存在漏识别或识别错误的情况。所述方法和系统可以通过图像识别标记物品的类别以及位置，以对不同类别的物品分别进行核对，核对时可以直接在物品所在的位置显示物品的编号，补货人员可以、有无识别错误，大大提高补理货的速度。
[0018]本说明书提供的智能货柜的物品核对方法及系统的其他功能将在以下说明中部分列出。根据描述，以下数字和示例介绍的内容将对那些本领域的普通技术人员显而易见。本说明书提供的智能货柜的物品核对方法及系统的创造性方面可以通过实践或使用下面详细示例中所述的方法、装置和组合得到充分解释。
附图说明
[0019]为了更清楚地说明本说明书实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本说明书的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
[0020]图1示出了根据本说明书的实施例提供的一种智能货柜的示意图；
[002本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种智能货柜的物品核对方法，应用于所述智能货柜的客户端，包括：显示目标图像和类别列表，所述目标图像是所述智能货柜中的视觉传感器对所述智能货柜中的多个物品采集得到，所述类别列表包括所述多个物品分别对应的至少一个类别；接收目标用户从所述类别列表中对目标类别的选择；以及在所述目标图像中对所述目标类别对应的至少一个目标物品做标记，以便所述目标用户通过所述标记核对所述智能货柜中所述目标类别实际对应的所有物品。2.如权利要求1所述的方法，其中，所述方法还包括：获取所述目标图像并将所述目标图像发送给服务器，接收所述服务器发送的对所述目标图像的图像识别结果，所述图像识别结果包括所述多个物品中的至少部分物品对应的类别及其在所述目标图像中的位置，以及基于所述图像识别结果生成所述类别列表。3.如权利要求2所述的方法，其中，所述在所述目标图像中对所述目标类别对应的至少一个目标物品做标记包括：基于所述图像识别结果，确定所述至少一个目标物品中的每个目标物品在所述目标图像中的位置；以及基于所述每个目标物品在所述目标图像中的位置和预设的排列规则，在所述目标图像中对所述至少一个目标物品依次进行编号。4.如权利要求3所述的方法，其中，所述在所述目标图像中对所述至少一个目标物品依次进行编号，包括：基于所述每个目标物品在所述目标图像中的位置和所述排列规则，确定所述每个目标物品的编号；以及在所述目标图像中，对所述每个目标物品在其所在的位置上显示对应的编号。5.如权利要求3所述的方法，其中，所述排列规则包括基于坐标序列的排列规则。6.如权利要求2所述的方法，其中，所述在所述目标图像中对所述目标类别对应的至少一个目标物品做标记包括：生成目标标记图像；以及控制显示装置显示所述目标标记图像。7.如权利要求6所述的方法，其中，所述类别列表包括所述目标类别和除所述目标类别之外的多个其他类别，所述目标标记图像中包括所述至少一个目标物品和所述多个其他类别对应的多个其他物品，所述多个其他物品未被做标记，所述目标用户通过所述标记和所述多个其他物品，核对所述目标类别实际对应的所有物品是否存在漏识别和错误识别的情况。8.如权利...

【专利技术属性】
技术研发人员：李天民，
申请(专利权)人：支付宝杭州信息技术有限公司，
类型：发明
国别省市：