一种基于无人货架的商品检测方法和装置制造方法及图纸

本发明专利技术实施例提供了一种基于无人货架的商品检测方法和装置，其中，所述方法包括：实时获取无人货架中商品的视频帧序列；对所述视频帧序列中相邻两帧图像进行分析得到分析结果；当所述分析结果表示所述商品存在移动情况时，识别出存在移动情况的商品所在的感兴趣区域图像；利用训练完毕的神经网络模型对所述感兴趣区域图像进行商品检测。本发明专利技术实施例识别出移动商品所在的感兴趣区域图像，减少商品检测的范围，可以提高商品检测的效率，降低其他商品、背景、前景等对商品检测的影响，进而提高了商品检测的准确度，避免造成意外报警的问题。

A method and device of commodity detection based on unmanned shelf

【技术实现步骤摘要】
一种基于无人货架的商品检测方法和装置
本专利技术涉及计算机视觉
，特别是涉及一种基于无人货架的商品检测方法和装置。
技术介绍
新零售是近年来最火的概念之一。移动互联网的发达、新技术/新应用的出现带来了支付的便捷与供应链革命，加之新生事物层出不穷和国内消费观念的短暂宽容，使得更多的零售新业态得以出现。无人便利店刚成为全社会热门话题不久，无人货架的热度后来居上，大有之前的共享单车的火热势头。无人货架指在一个货架上摆放一些食品、饮品、玩具等商品，贴上二维码，以先付钱再出货的方式进行无人自售的一种销售终端，常见于写字楼、医院、地铁等。无人货架具有以下优点：第一，前期投资较小、技术门槛较低；第二，由于无人货架主要布局在写字楼、医院等空白市场，所以竞争压力较小；第三，线下新流量入口空间较大，对各大电商平台具有吸引力。商品检测是无人货架的一项重要功能，即检测无人货架中商品的种类和数量。通常，在无人货架中设置计数器等感应装置，通过计数器对每类商品的售卖数量进行检测，实现商品检测功能，但是商品检测的准确度不高且容易造成错误报警。...

【技术保护点】
1.一种基于无人货架的商品检测方法，其特征在于，包括：/n实时获取无人货架中商品的视频帧序列；/n对所述视频帧序列中相邻两帧图像进行分析得到分析结果；/n当所述分析结果表示所述商品存在移动情况时，识别出存在移动情况的商品所在的感兴趣区域图像；/n利用训练完毕的神经网络模型对所述感兴趣区域图像进行商品检测。/n

【技术特征摘要】
1.一种基于无人货架的商品检测方法，其特征在于，包括：
实时获取无人货架中商品的视频帧序列；
对所述视频帧序列中相邻两帧图像进行分析得到分析结果；
当所述分析结果表示所述商品存在移动情况时，识别出存在移动情况的商品所在的感兴趣区域图像；
利用训练完毕的神经网络模型对所述感兴趣区域图像进行商品检测。


2.根据权利要求1所述的方法，其特征在于，所述对所述视频帧序列中相邻两帧图像进行分析得到分析结果的步骤，包括：
将所述视频帧序列中相邻两帧图像中相对应的像素点的像素值相减得到像素差值；
将所述像素差值的绝对值与预设的像素阈值进行比较得到所述分析结果。


3.根据权利要求2所述的方法，其特征在于，所述当所述分析结果表示所述商品存在移动情况时，识别出存在移动情况的商品所在的感兴趣区域图像的步骤，包括：
当所述绝对值大于所述像素阈值时，对所述相邻两帧图像中的当前帧图像进行运动检测得到所述感兴趣区域图像。


4.根据权利要求1至3中任一项所述的方法，其特征在于，在所述识别出存在移动情况的商品所在的感兴趣区域图像的步骤之后，所述方法还包括：
按照预设的区域阈值增大所述感兴趣区域图像的面积。


5.根据权利要求4所述的方法，其特征在于，所述利用训练完毕的神经网络模型对所述感兴趣区域图像进行商品检测的步骤，包括：
利用训练完毕的旋转候选区域网络模型对所述增大面积后的所述感兴趣区域图像进行商品检测。


6.根据权利要求1所述的方法，其特征在于，在所述实时获取无人货架中商品的视频帧序列的步...

【专利技术属性】
技术研发人员：邓练兵，李大铭，
申请(专利权)人：珠海大横琴科技发展有限公司，
类型：发明
国别省市：广东;44