一种人货关联事件确定方法及装置制造方法及图纸

本发明专利技术公开了一种人货关联事件确定方法及装置，可以获得至少两个视频帧，确定所述至少两个视频帧中的目标物品所在区域与所述至少两个视频帧中人体的目标区域的重叠时长；当所述重叠时长大于预设时长时，根据所述目标物品在所述至少两个视频帧中的位置关系，确定所述人体与所述目标物品的人货关联事件。本发明专利技术实施例通过视频帧中重叠时长超过预设时长的目标物品所在区域和人体的目标关联区域，确定目标物品与人体之间的人货关联事件，合理建立人体与物品之间的关联关系，使得系统在对人货关联事件进行存储后，节约对物品进行查询所耗用的计算机资源。

【技术实现步骤摘要】
一种人货关联事件确定方法及装置
本专利技术涉及计算机
，尤其涉及一种人货关联事件确定方法及装置。
技术介绍
随着社会的不断进步和发展，类似于无人便利店、无人货柜等无人零售行业的发展以及无人零售相关技术逐渐成为人们关心的话题。然而，当前困扰无人零售行业进一步发展的主要问题包括无人零售业务中对物品进行监管的相关问题。例如：在无人便利店中，需要依靠摄像机对店内物品进行监控，当管理员对店内物品进行清点时，发现某物品的数量与物品清单和销售记录中不符时，需要从摄像机的监控记录中筛选出所有顾客的进店记录，以查询是否有顾客对物品进行盗窃。在从摄像机的监控记录中筛选出所有顾客的进店记录需要占用大量的计算机资源，并且由于不是所有顾客的进店记录都与该物品相关，因此，造成了计算机资源的浪费。
技术实现思路
鉴于上述问题，本专利技术提供一种克服上述问题或者至少部分地解决上述问题的一种人货关联事件确定方法及装置，技术方案如下：一种人货关联事件确定方法，包括：获得至少两个视频帧，确定所述至少两个视频帧中的目标物品所在区域与所述至少两个视频帧中人体的目标区域的重叠时长；当所述重叠时长大于预设时长时，根据所述目标物品在所述至少两个视频帧中的位置关系，确定所述人体与所述目标物品的人货关联事件。可选的，所述根据所述目标物品在所述至少两个视频帧中的位置关系，确定所述人体与所述目标物品的人货关联事件，包括：确定所述目标物品在所述至少两个视频帧中的位置关系是否为移动关系，如果是，则确定所述人体与所述目标物品的人货关联事件为拿取物品事件；如果不是，则确定所述人体与所述目标物品的人货关联事件为浏览物品事件。可选的，所述确定所述至少两个视频帧中的目标物品所在区域与所述至少两个视频帧中人体的目标区域的重叠时长，包括：按照采集时间的先后顺序，依次分别确定视频帧序列中的至少部分视频帧中目标物品所在区域与人体的目标区域是否重叠；当第一视频帧中所述目标物品所在区域与人体的目标区域重叠且所述第一视频帧的前一个视频帧中所述目标物品所在区域与所述人体的目标区域未重叠时，将所述第一视频帧的采集时刻确定为重叠开始时刻；当第二视频帧中所述目标物品所在区域与所述人体的目标区域未重叠且所述第二视频帧的前一个视频帧中所述目标物品所在区域与所述人体的目标区域重叠时，将所述第二视频帧的采集时刻确定为重叠结束时刻；根据所述重叠开始时刻和所述重叠结束时刻确定所述目标物品所在区域与所述人体的目标区域的重叠时长。可选的，所述方法还包括：将确定的所述人货关联事件、所述人体对应的用户标识以及所述目标物品的标识对应保存。可选的，所述人体的目标区域包括：人体所在区域、人体关键点所在位置/区域以及人体注视区域中的至少一个区域。一种人货关联事件确定装置，包括：视频帧获得单元、重叠时长确定单元和人货关联事件确定单元，所述视频帧获得单元，用于获得至少两个视频帧；所述重叠时长确定单元，用于确定所述至少两个视频帧中的目标物品所在区域与所述至少两个视频帧中人体的目标区域的重叠时长；所述人货关联事件确定单元，用于当所述重叠时长确定单元确定的所述重叠时长大于预设时长时，根据所述目标物品在所述至少两个视频帧中的位置关系，确定所述人体与所述目标物品的人货关联事件。可选的，所述人货关联事件确定单元包括移动关系确定子单元、拿取物品事件确定子单元和浏览物品事件确定子单元，所述移动关系确定子单元，用于确定所述目标物品在所述至少两个视频帧中的位置关系是否为移动关系，如果是，则触发所述拿取物品事件确定子单元，如果不是，则触发所述浏览物品事件确定子单元；所述拿取物品事件确定子单元，用于确定所述人体与所述目标物品的人货关联事件为拿取物品事件；所述浏览物品事件确定子单元，用于确定所述人体与所述目标物品的人货关联事件为浏览物品事件。可选的，所述重叠时长确定单元包括：区域重叠确定子单元、重叠开始时刻确定子单元、重叠结束时刻确定子单元和重叠时长确定子单元，所述区域重叠确定子单元，用于按照采集时间的先后顺序，依次分别确定视频帧序列中的至少部分视频帧中目标物品所在区域与人体的目标区域是否重叠；所述重叠开始时刻确定子单元，用于当第一视频帧中所述目标物品所在区域与人体的目标区域重叠且所述第一视频帧的前一个视频帧中所述目标物品所在区域与所述人体的目标区域未重叠时，将所述第一视频帧的采集时刻确定为重叠开始时刻；所述重叠结束时刻确定子单元，用于当第二视频帧中所述目标物品所在区域与所述人体的目标区域未重叠且所述第二视频帧的前一个视频帧中所述目标物品所在区域与所述人体的目标区域重叠时，将所述第二视频帧的采集时刻确定为重叠结束时刻；所述重叠时长确定子单元，用于根据所述重叠开始时刻和所述重叠结束时刻确定所述目标物品所在区域与所述人体的目标区域的重叠时长。可选的，所述装置还包括：保存单元，所述保存单元，用于将确定的所述人货关联事件、所述人体对应的用户标识以及所述目标物品的标识对应保存。借由上述技术方案，本专利技术提供的一种人货关联事件确定方法及装置，可以获得至少两个视频帧，确定所述至少两个视频帧中的目标物品所在区域与所述至少两个视频帧中人体的目标区域的重叠时长；当所述重叠时长大于预设时长时，根据所述目标物品在所述至少两个视频帧中的位置关系，确定所述人体与所述目标物品的人货关联事件。本专利技术实施例通过视频帧中重叠时长超过预设时长的目标物品所在区域和人体的目标关联区域，确定目标物品与人体之间的人货关联事件，合理建立人体与物品之间的关联关系，使得系统在对人货关联事件进行存储后，节约对物品进行查询所耗用的计算机资源。上述说明仅是本专利技术技术方案的概述，为了能够更清楚了解本专利技术的技术手段，而可依照说明书的内容予以实施，并且为了让本专利技术的上述和其它目的、特征和优点能够更明显易懂，以下特举本专利技术的具体实施方式。附图说明通过阅读下文优选实施方式的详细描述，各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的，而并不认为是对本专利技术的限制。而且在整个附图中，用相同的参考符号表示相同的部件。在附图中：图1示出了本专利技术实施例提供的一种人货关联事件确定方法的流程示意图；图2示出了本专利技术实施例提供的另一种人货关联事件确定方法的流程示意图；图3示出了本专利技术实施例提供的像素点对的示意图；图4示出了本专利技术实施例提供的差值图像的示意图；图5示出了本专利技术实施例提供的一种人货关联事件确定装置的结构示意图。具体实施方式下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例，然而应当理解，可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反，提供这些实施例是为了能够更透彻地理解本公开，并且能够将本公开的范围完整的传达给本领域的技术人员。...

【技术保护点】
1.一种人货关联事件确定方法，其特征在于，包括：/n获得至少两个视频帧，确定所述至少两个视频帧中的目标物品所在区域与所述至少两个视频帧中人体的目标区域的重叠时长；/n当所述重叠时长大于预设时长时，根据所述目标物品在所述至少两个视频帧中的位置关系，确定所述人体与所述目标物品的人货关联事件。/n

【技术特征摘要】
1.一种人货关联事件确定方法，其特征在于，包括：
获得至少两个视频帧，确定所述至少两个视频帧中的目标物品所在区域与所述至少两个视频帧中人体的目标区域的重叠时长；
当所述重叠时长大于预设时长时，根据所述目标物品在所述至少两个视频帧中的位置关系，确定所述人体与所述目标物品的人货关联事件。


2.根据权利要求1所述的方法，其特征在于，所述根据所述目标物品在所述至少两个视频帧中的位置关系，确定所述人体与所述目标物品的人货关联事件，包括：
确定所述目标物品在所述至少两个视频帧中的位置关系是否为移动关系，如果是，则确定所述人体与所述目标物品的人货关联事件为拿取物品事件；如果不是，则确定所述人体与所述目标物品的人货关联事件为浏览物品事件。


3.根据权利要求1所述的方法，其特征在于，所述确定所述至少两个视频帧中的目标物品所在区域与所述至少两个视频帧中人体的目标区域的重叠时长，包括：
按照采集时间的先后顺序，依次分别确定视频帧序列中的至少部分视频帧中目标物品所在区域与人体的目标区域是否重叠；
当第一视频帧中所述目标物品所在区域与人体的目标区域重叠且所述第一视频帧的前一个视频帧中所述目标物品所在区域与所述人体的目标区域未重叠时，将所述第一视频帧的采集时刻确定为重叠开始时刻；
当第二视频帧中所述目标物品所在区域与所述人体的目标区域未重叠且所述第二视频帧的前一个视频帧中所述目标物品所在区域与所述人体的目标区域重叠时，将所述第二视频帧的采集时刻确定为重叠结束时刻；
根据所述重叠开始时刻和所述重叠结束时刻确定所述目标物品所在区域与所述人体的目标区域的重叠时长。


4.根据权利要求1所述的方法，其特征在于，还包括：
将确定的所述人货关联事件、所述人体对应的用户标识以及所述目标物品的标识对应保存。


5.根据权利要求1至4中任一项所述的方法，其特征在于，所述人体的目标区域包括：人体所在区域、人体关键点所在位置/区域以及人体注视区域中的至少一个区域。


6.一种人货关联事件确定装置，其特征在于，包括：视频帧获得单元、重叠时长确定单元和人货关联事件确定单元，
所述视频帧获得单元，用于获得至少两个视频帧；
所述重叠时长确定单元，用于确定所述至少两个视频帧中的目标物品所在区域与所述...

【专利技术属性】
技术研发人员：程鉴张，
申请(专利权)人：北京爱笔科技有限公司，
类型：发明
国别省市：北京;11