一种商品与价签的匹配方法、装置、设备及存储介质制造方法及图纸

本发明专利技术公开了一种商品与价签的匹配方法、装置、设备及存储介质，包括：获取至少一组商品与价签的样本数据；对样本数据进行特征提取，确定样本中商品与价签的位置信息特征、图像特征以及文本特征；对图像特征以及文本特征进行融合处理，得到商品与价签的节点特征；基于图学习对商品与价签的位置信息特征以及节点特征进行融合处理，得到融合特征，并基于融合特征确定商品与价签的匹配结果。本方法综合考虑了多种特征，将图学习引入匹配关系推理，提升商品与价签匹配的准确度。商品与价签匹配的准确度。商品与价签匹配的准确度。

【技术实现步骤摘要】
一种商品与价签的匹配方法、装置、设备及存储介质


[0001]本专利技术涉及多模态学习
，具体涉及一种商品与价签的匹配方法、装置、设备及存储介质。

技术介绍

[0002]随着陈列商品巡检智能化的发展，通过计算机视觉对陈列商品进行自动识别已逐渐得到应用，其中，为了识别陈列商品，需要对商品和价格标签(价签)进行识别，从而确定不同商品的价格。在实际生活中，可能出现例如价签缺失、多种商品共用同一价签、价签摆放的位置随意、商品或价签信息不完整等情况，导致将商品和价签进行匹配时的准确度较低。

技术实现思路

[0003]有鉴于此，本专利技术实施例提供了一种商品与价签的匹配方法、装置、设备及存储介质，以解决商品和价签进行匹配时的准确度较低的问题。
[0004]根据第一方面，本专利技术实施例提供了一种商品与价签的匹配方法，包括：
[0005]获取至少一组商品与价签的样本数据；
[0006]对所述样本数据进行特征提取，确定样本中商品与价签的位置信息特征、图像特征以及文本特征；
[0007]对所述图像特征以及所述文本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种商品与价签的匹配方法，其特征在于，包括：获取至少一组商品与价签的样本数据；对所述样本数据进行特征提取，确定样本中商品与价签的位置信息特征、图像特征以及文本特征；对所述图像特征以及所述文本特征进行融合处理，得到商品与价签的节点特征；基于图学习对所述商品与价签的位置信息特征以及所述节点特征进行融合处理，得到融合特征，并基于所述融合特征确定所述商品与价签的匹配结果。2.根据权利要求1所述的方法，其特征在于，所述对所述样本数据进行特征提取，确定样本中商品与价签的位置信息特征、图像特征以及文本特征，包括：获取所述商品与价签的坐标信息；基于所述坐标信息计算商品与价签之间的位置关系矩阵，并对所述位置关系矩阵进行线性变换处理，以确定样本中商品与价签的位置信息特征。3.根据权利要求1所述的方法，其特征在于，所述对所述样本数据进行特征提取，确定样本中商品与价签的位置信息特征、图像特征以及文本特征，包括：获取所述商品与价签的图像；基于卷积神经网络对所述图像进行特征提取，得到图像特征，并根据商品与价签的位置信息对所述图像特征进行裁剪，得到每个商品与价签的图像特征。4.根据权利要求1所述的方法，其特征在于，所述对所述样本数据进行特征提取，确定样本中商品与价签的位置信息特征、图像特征以及文本特征，包括：获取所述商品与价签的文本信息；基于字符嵌入方法对所述文本信息进行处理，得到所述文本特征。5.根据权利要求1所述的方法，其特征在于，所述对所述图像特征以及所述文本特征进行融合处理，得到商品与价签的节点特征，包括：对所述商品与价签的图像特征以及文本特征进行补全，以使所述图像特征与所述文本特征对应的节点相同，得到补全后的图像特征和文本特征；将所述补全后的图像特征和文本特征进行融合处理，得到所述商品与价签的节点特...

【专利技术属性】
技术研发人员：邬国锐，王庆庆，
申请(专利权)人：北京爱咔咔信息技术有限公司，
类型：发明
国别省市：