商品存量确定方法、装置及设备制造方法及图纸

本发明专利技术提供一种商品存量确定方法、装置及设备，确定商品货区时不需要依赖货区标签，具有更强的适用性。该方法包括：从已获得的第一货架图像中确定出各商品所处的商品区域；依据各不同商品区域中商品之间的相似度对各商品区域进行聚类，得到至少一个商品区域集合；同一商品区域集合中任意两个商品区域中的商品的相似度大于或等于设定相似度阈值；针对每一商品区域集合，基于该商品区域集合中各商品区域，从所述第一货架图像中确定该商品区域集合对应的商品货区，所述商品货区至少包括商品区域集合中各商品区域，所述商品货区用于存放有该商品区域集合中各商品区域中的商品。

【技术实现步骤摘要】
商品存量确定方法、装置及设备
本专利技术涉及监控
，尤其涉及的是一种商品存量确定方法、装置及设备。
技术介绍
商品的摆放和盘点是商家(比如超市)在日常中必不可少的操作，以确保货架上有充足的商品。一般来说，如果有一些商品比较好卖，相应的商品货区可能很快就会缺货，如果不及时补充商品，会影响商品的销售。但是，如果通过人工定期到现场进行商品盘点，来确定商品存量是否充足，需要耗费较大的人力成本，而且也无法保证商品能够及时得到补充。因此，有必要利用一些更智能的手段来实现商品存量分析。在相关商品存量方式中，在采集到货架图像后，通过检测货架图像中的货区标签，根据货区标签的位置来确定货架图像中的商品货区。该方式中，确定商品货区时需要依赖货区标签，但是实际中，不是每个货区都会设置货区标签，或者货区标签可能会破损或丢失，甚至某些货区还有可能错贴上其他货区的货区标签，在这些情况下，上述方式都无法确定商品存量、或者说确定结果会极不准确。
技术实现思路
有鉴于此，本专利技术提供一种商品存量确定方法、装置及设备，确定商品货区时不需要依赖货区标签，具有更强的适用性。本专利技术第一方面提供一种商品存量确定方法，包括：从已获得的第一货架图像中确定出各商品所处的商品区域；依据各不同商品区域中商品之间的相似度对各商品区域进行聚类，得到至少一个商品区域集合；同一商品区域集合中任意两个商品区域中的商品的相似度大于或等于设定相似度阈值；针对每一商品区域集合，基于该商品区域集合中各商品区域，从所述第一货架图像中确定该商品区域集合对应的商品货区，所述商品货区至少包括商品区域集合中各商品区域，所述商品货区用于存放有该商品区域集合中各商品区域中的商品。根据本专利技术的一个实施例，各不同商品区域中商品之间的相似度通过以下方式确定：从所述第一货架图像截取出各商品区域，将各商品区域分别输入至已训练的特征提取模型中以得到各商品区域中商品的商品特征信息，基于各商品的商品特征信息确定各商品区域中商品的特征相似度；和/或，基于各商品区域之间的距离确定各商品区域中商品的空间相似度；依据各商品区域中商品的特征相似度和/或空间相似度确定各不同商品区域中商品之间的相似度。根据本专利技术的一个实施例，所述基于该商品区域集合中各商品区域，从所述第一货架图像中确定该商品区域集合对应的商品货区，包括：从第一货架图像中确定出包含该商品区域集合中所有商品区域的矩形框；依据所述矩形框的位置信息确定所述商品货区。根据本专利技术的一个实施例，该方法进一步包括：从当前获得的第二货架图像中确定所述商品货区，所述第二货架图像与所述第一货架图像均包含所述商品货区；确定所述商品货区当前的商品存量；当依据所述商品货区当前的商品存量确定针对所述商品货区进行报警时，输出报警信号。根据本专利技术的一个实施例，所述确定所述商品货区当前的商品存量包括：当利用已训练的商品检测算法检测到所述商品货区中商品数量大于或等于所述商品货区对应的第一商品数量阈值时，依据所述商品货区中商品所处的商品区域确定所述商品货区当前的商品存量；当利用已训练的商品检测算法检测到所述商品货区中商品数量小于所述商品货区对应的第一商品数量阈值时，依据所述商品货区中未存放商品的空闲商品区域确定所述商品货区当前的商品存量。根据本专利技术的一个实施例，所述确定所述商品货区当前的商品存量包括：依据所述商品货区中未存放商品的空闲商品区域确定所述商品货区当前的商品存量。根据本专利技术的一个实施例，依据所述商品货区中未存放商品的空闲商品区域确定所述商品货区当前的商品存量，包括：计算所述商品货区的面积与第一并集区域的面积之间的差值；所述第一并集区域为所述商品货区中未存放商品的空闲商品区域的并集区域；将所述差值与所述商品货区的面积之比，确定为所述商品货区当前的商品存量。根据本专利技术的一个实施例，所述依据所述商品货区中商品所处的商品区域确定所述商品货区当前的商品存量包括：将第二并集区域的面积与所述商品货区的面积之比，确定为所述商品货区当前的商品存量；所述第二并集区域为所述商品货区中商品所处的商品区域的并集区域。根据本专利技术的一个实施例，该方法进一步包括：从所述第一货架图像中获取货区标签信息，所述货区标签信息至少包括货区标签的位置信息、货区标签对应的商品信息，并依据货区标签的位置信息将货区标签信息与距离最近的商品货区关联；所述依据商品货区当前的商品存量确定针对所述商品货区进行报警包括：当所述商品货区关联的货区标签信息中的商品信息满足第一预设商品条件时，计算已记录的所述商品货区的历史商品存量与所述商品货区当前的商品存量的差值，当该差值大于或等于设定存量差值时，确定针对所述商品货区进行报警；当所述商品货区关联的货区标签信息中的商品信息满足第二预设商品条件时，当所述商品货区当前的商品存量小于所述商品货区对应的第二商品数量阈值时，确定针对所述商品货区进行报警。本专利技术第二方面提供一种商品存量确定装置，包括：商品区域确定模块，用于从已获得的第一货架图像中确定出各商品所处的商品区域；商品区域聚类模块，用于依据各不同商品区域中商品之间的相似度对各商品区域进行聚类，得到至少一个商品区域集合；同一商品区域集合中任意两个商品区域中的商品的相似度大于或等于设定相似度阈值；商品货区确定模块，用于针对每一商品区域集合，基于该商品区域集合中各商品区域，从所述第一货架图像中确定该商品区域集合对应的商品货区，所述商品货区至少包括商品区域集合中各商品区域，所述商品货区用于存放有该商品区域集合中各商品区域中的商品。根据本专利技术的一个实施例，各不同商品区域中商品之间的相似度通过以下模块确定：特征相似度确定模块，用于从所述第一货架图像截取出各商品区域，将各商品区域分别输入至已训练的特征提取模型中以得到各商品区域中商品的商品特征信息，基于各商品的商品特征信息确定各商品区域中商品的特征相似度；和/或，空间相似度确定模块，用于基于各商品区域之间的距离确定各商品区域中商品的空间相似度；相似度确定模块，用于依据各商品区域中商品的特征相似度和/或空间相似度确定各不同商品区域中商品之间的相似度。根据本专利技术的一个实施例，所述商品货区确定模块基于该商品区域集合中各商品区域，从所述第一货架图像中确定该商品区域集合对应的商品货区时，具体用于：从第一货架图像中确定出包含该商品区域集合中所有商品区域的矩形框；依据所述矩形框的位置信息确定所述商品货区。根据本专利技术的一个实施例，该装置进一步包括：商品存量分析模块，用于从当前获得的第二货架图像中确定所述商品货区，所述第二货架图像与所述第一货架图像均包含所述商品货区，并确定所述商品货区当前的商品存量；报警模块，用于当依据所述商品货区当前的商品存量确定针对所述商品货区进行报警时，输出报警信号。根据本专利技术的一本文档来自技高网...

【技术保护点】
1.一种商品存量确定方法，其特征在于，包括：/n从已获得的第一货架图像中确定出各商品所处的商品区域；/n依据各不同商品区域中商品之间的相似度对各商品区域进行聚类，得到至少一个商品区域集合；同一商品区域集合中任意两个商品区域中的商品的相似度大于或等于设定相似度阈值；/n针对每一商品区域集合，基于该商品区域集合中各商品区域，从所述第一货架图像中确定该商品区域集合对应的商品货区，所述商品货区至少包括商品区域集合中各商品区域，所述商品货区用于存放有该商品区域集合中各商品区域中的商品。/n

【技术特征摘要】
1.一种商品存量确定方法，其特征在于，包括：
从已获得的第一货架图像中确定出各商品所处的商品区域；
依据各不同商品区域中商品之间的相似度对各商品区域进行聚类，得到至少一个商品区域集合；同一商品区域集合中任意两个商品区域中的商品的相似度大于或等于设定相似度阈值；
针对每一商品区域集合，基于该商品区域集合中各商品区域，从所述第一货架图像中确定该商品区域集合对应的商品货区，所述商品货区至少包括商品区域集合中各商品区域，所述商品货区用于存放有该商品区域集合中各商品区域中的商品。


2.如权利要求1所述的商品存量确定方法，其特征在于，各不同商品区域中商品之间的相似度通过以下方式确定：
从所述第一货架图像截取出各商品区域，将各商品区域分别输入至已训练的特征提取模型中以得到各商品区域中商品的商品特征信息，基于各商品的商品特征信息确定各商品区域中商品的特征相似度；和/或，
基于各商品区域之间的距离确定各商品区域中商品的空间相似度；
依据各商品区域中商品的特征相似度和/或空间相似度确定各不同商品区域中商品之间的相似度。


3.如权利要求1所述的商品存量确定方法，其特征在于，所述基于该商品区域集合中各商品区域，从所述第一货架图像中确定该商品区域集合对应的商品货区，包括：
从第一货架图像中确定出包含该商品区域集合中所有商品区域的矩形框；
依据所述矩形框的位置信息确定所述商品货区。


4.如权利要求1至3任一所述的商品存量确定方法，其特征在于，该方法进一步包括：
从当前获得的第二货架图像中确定所述商品货区，所述第二货架图像与所述第一货架图像均包含所述商品货区，并确定所述商品货区当前的商品存量；
当依据所述商品货区当前的商品存量确定针对所述商品货区进行报警时，输出报警信号。


5.如权利要求4所述的商品存量确定方法，其特征在于，所述确定所述商品货区当前的商品存量包括：
当利用已训练的商品检测算法检测到所述商品货区中商品数量大于或等于所述商品货区对应的第一商品数量阈值时，依据所述商品货区中商品所处的商品区域确定所述商品货区当前的商品存量；
当利用已训练的商品检测算法检测到所述商品货区中商品数量小于所述商品货区对应的第一商品数量阈值时，依据所述商品货区中未存放商品的空闲商品区域确定所述商品货区当前的商品存量。


6.如权利要求4所述的商品存量确定方法，其特征在于，所述确定所述商品货区当前的商品存量包括：
依据所述商品货区中未存放商品的空...

【专利技术属性】
技术研发人员：曾杰，朱皓，
申请(专利权)人：杭州海康威视数字技术股份有限公司，
类型：发明
国别省市：浙江;33