物品状态检测方法、装置及计算机可读存储介质制造方法及图纸

本发明专利技术实施例提出一种物品状态检测方法、装置及计算机可读存储介质，其中方法包括对进入设定区域的各用户进行人体跟踪，以确定各所述用户在所述设定区域的实时位置信息；在检测到所述设定区域内的目标物品被移动的情况下，获取被移动的目标物品的位置信息；根据所述目标物品的位置信息，以及所述设定区域内的各用户的实时位置信息，匹配得到移动所述目标物品的目标用户的标识信息。在目标物品被移动的情况下，可以利用各用户的位置信息与目标物品的位置信息进行匹配，从而确定出移动目标物品的目标用户。由此可以在无人环境下实现目标物品和目标用户的确认以及匹配，实现了无人化、自动化。

【技术实现步骤摘要】
物品状态检测方法、装置及计算机可读存储介质
本专利技术涉及自动化
，尤其涉及一种物品状态检测方法、装置及计算机可读存储介质。
技术介绍
智慧零售店是融合大数据、智能软件和硬件配给实现店铺互联网化、数据化、电子化的消费管理和营销服务平台。能够24小时运行，运营费用低，方便居民的实际需求。主要针对社区、小区附近的24小时便利店的无人化改造，相比现在的24小时便利店可以大幅节省成本。现有的智慧零售店按照发展进程，包括以下几类：无人零售柜、基于RFID便利店、开门选购的无人零售柜和无人便利店。但上述几类方案还各自存在有缺陷，例如无人零售柜中存储的商品数量有限，基于RFID便利店的每个商品需要在上架之前人工标贴RFID标签，开门选购的无人零售柜过分依赖于摄像头，对于选取商品的检测错误率高，无法做到真正的无人化。
技术实现思路
本专利技术实施例提供一种物品状态检测方法、装置及计算机可读存储介质，以解决现有技术中的一个或多个技术问题。第一方面，本专利技术实施例提供了一种物品状态检测方法，包括：对进入设定区域的各用户进行人体跟踪，以确定各所述用户在所述设定区域的实时位置信息；在检测到所述设定区域内的目标物品被移动的情况下，获取被移动的目标物品的位置信息；根据所述目标物品的位置信息，以及所述设定区域内的各用户的实时位置信息，匹配得到移动所述目标物品的目标用户的标识信息。在一种实施方式中，对进入设定区域的各用户进行人体跟踪，以确定各所述用户在所述设定区域的实时位置信息，包括：获取进入所述设定区域的各所述用户的面部图像；根据各所述用户的面部图像，获取各所述用户的标识信息；根据各所述用户的标识信息，利用行人重识别ReID方式对各所述用户进行人体跟踪，以确定各所述用户在所述设定区域的实时位置信息。在一种实施方式中，根据所述目标物品的位置信息，以及所述设定区域内的各用户的实时位置信息，匹配得到移动所述目标物品的目标用户的标识信息，包括：比较所述设定区域内的各用户的实时位置信息与所述目标物品的位置信息，确定各所述用户与所述目标物品的距离；获取与所述目标物品的距离最近的用户的标识信息。在一种实施方式中，还包括：获取深度图像采集装置所采集的各用户的彩色图像和深度图像；从各所述用户的彩色图像中提取人体关键点；将所述人体关键点与所述深度图像对应，以确定各所述用户的手的位置信息；比较所述各用户的手的位置信息和目标物品的位置信息，得到各用户的手与目标物品的距离；获取与所述目标物品的距离最近的手所属的用户的标识信息。在一种实施方式中，还包括：在检测到设定区域内的目标物品被移动的情况下，获取移动所述目标物品的目标用户的面部图像；利用所述设定区域内的各用户的已有图像对所述目标用户的面部图像进行面部识别，获取所述目标用户的标识信息；比较通过面部识别获取的目标用户的标识信息与匹配得到移动所述目标物品的目标用户的标识信息是否一致。在一种实施方式中，还包括：接收重力感应传感器的触发信息，所述触发信息包括在物品被触碰的第一时刻和在物品被取走的第二时刻；获取所述重力感应传感器对应的目标位置信息；在所述目标位置信息对应的目标位置采集的物品图像中，查找所述第一时刻对应的第一物品图像，以及所述第二时刻对应的第二物品图像；比较所述第一物品图像和所述第二物品图像的差别，以确定所述目标位置信息对应的目标位置处被取走的目标物品。在一种实施方式中，还包括：获取所述重力感应传感器在所述目标物品被取走前的第一重量和被取走后的第二重量；得到所述第一重量与所述第二重量的差值；查询所述目标物品的标准重量；比较所述差值与所述目标物品的标准重量是否一致。第二方面，本专利技术实施例提供了一种物品状态检测装置，包括：用户实时位置确定模块，用于对进入设定区域的各用户进行人体跟踪，以确定各所述用户在所述设定区域的实时位置信息；目标物品位置信息确定模块，用于在检测到所述设定区域内的目标物品被移动的情况下，获取被移动的目标物品的位置信息；匹配模块，用于根据所述目标物品的位置信息，以及所述设定区域内的各用户的实时位置信息，匹配得到移动所述目标物品的目标用户的标识信息在一种实施方式中，所述用户实时位置确定模块，包括：第一面部图像获取子模块，用于获取进入所述设定区域的各所述用户的面部图像；标识信息第一获取子模块，用于根据各所述用户的面部图像，获取各所述用户的标识信息；实时位置信息确定子模块，用于根据各所述用户的标识信息，利用行人重识别ReID方式对各所述用户进行人体跟踪，以确定各所述用户在所述设定区域的实时位置信息。在一种实施方式中，所述匹配模块，包括：第一距离确定子模块，用于比较所述设定区域内的各用户的实时位置信息与所述目标物品的位置信息，确定各所述用户与所述目标物品的距离；标识信息第二获取子模块，用于获取与所述目标物品的距离最近的用户的标识信息。在一种实施方式中，还包括：图像获取模块，用于获取深度图像采集装置所采集的各用户的彩色图像和深度图像；人体关键点提取模块，用于从各所述用户的彩色图像中提取人体关键点；手位置信息确定模块，用于将所述人体关键点与所述深度图像对应，以确定各所述用户的手的位置信息；第二距离确定模块，用于比较所述各用户的手的位置信息和目标物品的位置信息，得到各用户的手与目标物品的距离；标识信息第三获取子模块，用于获取与所述目标物品的距离最近的手所属的用户的标识信息。在一种实施方式中，还包括：第二面部图像获取模块，用于在检测到设定区域内的目标物品被移动的情况下，获取移动所述目标物品的目标用户的面部图像；面部识别模块，用于利用所述设定区域内的各用户的已有图像对所述目标用户的面部图像进行面部识别；标识信息第四获取子模块，用于根据面部识别模块的识别结果，获取所述目标用户的标识信息；判别模块，用于比较通过所述标识信息第四获取子模块获取的目标用户的标识信息与所述匹配模块匹配得到移动所述目标物品的目标用户的标识信息是否一致。在一种实施方式中，还包括：触发信息接收模块，用于接收重力感应传感器的触发信息，所述触发信息包括在物品被触碰的第一时刻和在物品被取走的第二时刻；目标位置信息获取模块，用于获取所述重力感应传感器对应的目标位置信息；物品图像查找模块，用于在所述目标位置信息对应的目标位置采集的物品图像中，查找所述第一时刻对应的第一物品图像，以及所述第二时刻对应的第二物品图像；目标物品确定模块，用于比较所述第一物品图像和所述第二物品图像的差别，以确定所述目标位置信息对应的目标位置处被取走的目标物品。在一种实施方式中，还包括：重量获取模块，用于获取所述重力感应传感器在所述目标物品被取走前的第一重量和被取走后的第二重量；差值确定模块，用于得到所述第一重量与所述第二重量的差值；标准重量查询模块，用于查询所述目标物品的标准重量；重量比较模块，用于比较所述差值与所述目标物品的标准重量是否一致。第三方面，本专利技术实施例提供了一种物品状态检测系统，包括：服务器，包括前述物品状态检测装置；人体跟踪装置，用于采集设定区域的各用户的跟踪图像，传输至所述服务器；重力感应传感器，用于在检测到所述设定区域内的目标物品被移动的情况下，输出感应信息至所述服务器。在一种实施方式中，还包括以下至少一种：面部图像采集装置，用于采集移动所述目标物品本文档来自技高网...

【技术保护点】
1.一种物品状态检测方法，其特征在于，包括：对进入设定区域的各用户进行人体跟踪，以确定各所述用户在所述设定区域的实时位置信息；在检测到所述设定区域内的目标物品被移动的情况下，获取被移动的目标物品的位置信息；根据所述目标物品的位置信息，以及所述设定区域内的各用户的实时位置信息，匹配得到移动所述目标物品的目标用户的标识信息。

【技术特征摘要】
1.一种物品状态检测方法，其特征在于，包括：对进入设定区域的各用户进行人体跟踪，以确定各所述用户在所述设定区域的实时位置信息；在检测到所述设定区域内的目标物品被移动的情况下，获取被移动的目标物品的位置信息；根据所述目标物品的位置信息，以及所述设定区域内的各用户的实时位置信息，匹配得到移动所述目标物品的目标用户的标识信息。2.根据权利要求1所述的方法，其特征在于，对进入设定区域的各用户进行人体跟踪，以确定各所述用户在所述设定区域的实时位置信息，包括：获取进入所述设定区域的各所述用户的面部图像；根据各所述用户的面部图像，获取各所述用户的标识信息；根据各所述用户的标识信息，利用行人重识别ReID方式对各所述用户进行人体跟踪，以确定各所述用户在所述设定区域的实时位置信息。3.根据权利要求1所述的方法，其特征在于，根据所述目标物品的位置信息，以及所述设定区域内的各用户的实时位置信息，匹配得到移动所述目标物品的目标用户的标识信息，包括：比较所述设定区域内的各用户的实时位置信息与所述目标物品的位置信息，确定各所述用户与所述目标物品的距离；获取与所述目标物品的距离最近的用户的标识信息。4.根据权利要求1所述的方法，其特征在于，还包括：获取深度图像采集装置所采集的各用户的彩色图像和深度图像；从各所述用户的彩色图像中提取人体关键点；将所述人体关键点与所述深度图像对应，以确定各所述用户的手的位置信息；比较所述各用户的手的位置信息和目标物品的位置信息，得到各用户的手与目标物品的距离；获取与所述目标物品的距离最近的手所属的用户的标识信息。5.根据权利要求1所述的方法，其特征在于，还包括：在检测到设定区域内的目标物品被移动的情况下，获取移动所述目标物品的目标用户的面部图像；利用所述设定区域内的各用户的已有图像对所述目标用户的面部图像进行面部识别，获取所述目标用户的标识信息；比较通过面部识别获取的目标用户的标识信息与所述匹配得到移动所述目标物品的目标用户的标识信息是否一致。6.根据权利要求1所述的方法，其特征在于，还包括：接收重力感应传感器的触发信息，所述触发信息包括在物品被触碰的第一时刻和在物品被取走的第二时刻；获取所述重力感应传感器对应的目标位置信息；在所述目标位置信息对应的目标位置采集的物品图像中，查找所述第一时刻对应的第一物品图像，以及所述第二时刻对应的第二物品图像；比较所述第一物品图像和所述第二物品图像的差别，以确定所述目标位置信息对应的目标位置处被取走的目标物品。7.根据权利要求6所述的方法，其特征在于，还包括：获取所述重力感应传感器在所述目标物品被取走前的第一重量和被取走后的第二重量；得到所述第一重量与所述第二重量的差值；查询所述目标物品的标准重量；比较所述差值与所述目标物品的标准重量是否一致。8.一种物品状态检测装置，其特征在于，包括：用户实时位置确定模块，用于对进入设定区域的各用户进行人体跟踪，以确定各所述用户在所述设定区域的实时位置信息；目标物品位置信息确定模块，用于在检测到所述设定区域内的目标物品被移动的情况下，获取被移动的目标物品的位置信息；匹配模块，用于根据所述目标物品的位置信息，以及所述设定区域内的各用户的实时位置信息，匹配得到移动所述目标物品的目标用户的标识信息。9.根据权利要求8所述的装置，其特征在于，所述用户实时位置确定模块，包括：第一面部图像获取子模块，用于获取进入所述设定区域的各所述用户的面部图像；标识信息第一获取子模块，用于根据各所述用户的面部图像，获取各所述用户的标识信息；实时位置信息确定子模块，用于根据各所述用户的标识信息，利用行人重识别ReID方式对各所述用户进行人体跟踪，以确定各所述用户在所述设定区域的实时位置信息。10.根据权利要求8所述的装置，其特征在于，所...

【专利技术属性】
技术研发人员：汪学军，
申请(专利权)人：北京百度网讯科技有限公司，
类型：发明
国别省市：北京,11