一种商品结算信息确定方法、设备、存储介质及智能货柜技术

本发明专利技术实施例公开了一种商品结算信息确定方法、设备、存储介质及智能货柜，涉及图像处理技术领域。方法包括获取满足动作捕捉条件的多张图像，图像包括第一视角图像和多张第二视角图像。分别将各图像输入到商品检测模型中进行商品检测，确定出对应的商品检测结果，商品检测结果包括：第一视角图像对应的第一商品检测结果和第二视角图像对应的第二商品检测结果。按时序将各图像对应的商品检测结果，分别输入到商品追踪模型中进行商品追踪，确定出多条商品抓取轨迹。最后依据商品抓取轨迹确定出商品对象对应的商品结算信息。通过两个不同视角获取到对商品对象移动方向的动态识别，融合不同视角的商品特征准确识别出用户抓取的各商品对象。商品对象。商品对象。

【技术实现步骤摘要】
一种商品结算信息确定方法、设备、存储介质及智能货柜


[0001]本专利技术涉及图像处理
，特别是涉及一种商品结算信息确定方法、设备、存储介质及智能货柜。

技术介绍

[0002]无人智能货柜近几年发展迅速，通过无人值守，非接触式的方式完成商品对象的交易，极大程度为买卖双方提供了便利。目前主流的无人货柜方案，应用广泛是通过一个摄像头捕获图像，再通过对比开、关门前后图像中的差异识别商品对象的结算信息。
[0003]上述方案对摄像机部署要求较高，通常每一层货架都需要一台专门的鱼眼相机，对该层货架商品进行识别。并且，在商品存在堆叠摆放时，大大降低了识别精度。

技术实现思路

[0004]鉴于上述问题，提出了本专利技术以便提供一种克服上述问题或者至少部分地解决上述问题的商品结算信息确定方法、装置、设备、存储介质及智能货柜。
[0005]依据本专利技术的第一方面，提供了一种商品结算信息确定方法，所述方法包括：
[0006]获取满足动作捕捉条件的多张图像，所述图像包括多张第一视角图像和多张第二视角图像；
[0本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种商品结算信息确定方法，其特征在于，所述方法包括：获取满足动作捕捉条件的多张图像，所述图像包括多张第一视角图像和多张第二视角图像；分别将各图像输入到商品检测模型中进行商品检测，确定出所述图像对应的商品检测结果，所述商品检测结果包括：第一视角图像对应的第一商品检测结果和第二视角图像对应的第二商品检测结果；按时序将各图像对应的商品检测结果，分别输入到商品追踪模型中进行商品追踪，确定出多条商品抓取轨迹；依据多条商品抓取轨迹，确定出至少一个商品对象对应的商品结算信息。2.根据权利要求1所述的商品结算信息确定方法，其特征在于，所述分别将各图像输入到商品检测模型中进行商品检测，确定出所述图像对应的商品检测结果，包括：标定各图像的第一区域和第二区域，其中，所述第一区域包含在第二区域内；将各图像输入到商品检测模型中进行商品检测，确定出各图像位于所述第一区域中的商品对象对应的商品检测结果。3.根据权利要求2所述的商品结算信息确定方法，其特征在于，所述将各图像输入到商品检测模型中进行商品检测，确定出各图像位于所述第一区域中的商品对象对应的商品检测结果，包括：将各图像输入到商品检测模型中进行商品检测，确定出各商品对象对应的商品检测结果，所述商品检测结果至少包括商品中心坐标和商品尺寸；依据所述商品中心坐标和/或商品尺寸，分别确定出各图像位于所述第一区域中的商品对象对应的商品检测结果。4.根据权利要求3所述的商品结算信息确定方法，其特征在于，所述方法还包括确定商品对象是否位于第一区域中的步骤：若所述商品中心坐标位于第一区域内，则确定对应商品对象位于第一区域内；或者，若依据商品尺寸所确定的商品框与所述第一区域的交集面积，与所述商品框的总面积之间的比例，大于或等于预设比例阈值，则确定对应商品对象位于第一区域内。5.根据权利要求2或3所述的商品结算信息确定方法，其特征在于，所述按时序将各图像对应的商品检测结果，分别输入到商品追踪模型中进行商品追踪，确定出多条商品抓取轨迹，包括：将各图像位于所述第一区域内的商品对象对应的商品检测结果，按照时序分别输入到商品追踪模型中进行商品追踪，确定出多条商品抓取轨迹，其中，确定所述商品抓取轨迹时采用相邻两帧图像中商品对象的位置交并比，或者是相邻两帧图像中商品对象的深度图像特征之间的特征相似度。6.根据权利要求1所述的商品结算信息确定方法，其特征在于，所述依据多条商品抓取轨迹，确定出至少一个商品对象对应的商品结算信息，包括：确定出多条商...

【专利技术属性】
技术研发人员：田光亚，朱勇，
申请(专利权)人：中科创达软件股份有限公司，
类型：发明
国别省市：