目标对象的识别方法、装置及售货设备制造方法及图纸

本申请公开了一种目标对象的识别方法、装置及售货设备，涉及图像处理技术领域。售货设备能够获取拍摄图像，并能够基于拍摄图像识别得到的目标对象的属性信息。由于无需将目标对象的条形码对准自动结算设备的图像采集组件，以供自动结算设备扫描从而识别商品的属性信息，因此一方面提高了属性信息的获取效率，另一方面可以简化用户的操作，提升了用户体验。并且，由于售货设备在拍摄图像中确定出的检测框的轴线平行于目标对象的轴线，因此可以确保获取到的目标子图像中的无效背景信息较少。由此，可以进一步提高属性信息的获取效率，且可以提高属性信息的识别准确性。以提高属性信息的识别准确性。以提高属性信息的识别准确性。

【技术实现步骤摘要】
目标对象的识别方法、装置及售货设备


[0001]本申请涉及图像处理
，特别涉及一种目标对象的识别方法、装置及售货设备。

技术介绍

[0002]用户在购物过程中，可以将所需购买的商品的条形码对准自动结算设备的图像采集组件。该自动结算设备扫描进而可以扫描到该条形码，并识别商品的属性信息(例如价格)。之后，自动结算设备可以基于识别到的属性信息显示支付码，以供用户的移动终端扫描并支付。
[0003]但是，上述识别商品的属性信息的方法的效率较低。

技术实现思路

[0004]本申请提供了一种目标对象的识别方法、装置及售货设备，可以解决相关技术中识别商品的属性信息的方法的效率较低的问题。所述技术方案如下：
[0005]一方面，提供了一种目标对象的识别方法，应用于售货设备，所述售货设备包括摄像头；所述方法包括：
[0006]获取所述摄像头拍摄到的拍摄图像；
[0007]在所述拍摄图像中确定包括目标对象的检测框，所述检测框的至少一边平行于所述目标对象的轴线；
[0008]获取所述检测框内的目标子图像；
[0009]基于所述目标子图像识别所述目标对象的属性信息。
[0010]另一方面，提供了一种目标对象的识别装置，配置在售货设备中，所述售货设备包括摄像头；所述装置包括：
[0011]第一获取模块，用于获取所述摄像头拍摄到的拍摄图像；
[0012]确定模块，用于在所述拍摄图像中确定包括目标对象的检测框，所述检测框的至少一边平行于所述目标对象的轴线；
[0013]第二获取模块，用于获取所述检测框内的目标子图像；
[0014]识别模块，用于基于所述目标子图像识别所述目标对象的属性信息。
[0015]又一方面，提供了一种售货设备，所述售货设备包括：摄像头，处理器和存储器，所述存储器中存储有指令，所述指令由所述处理器加载并执行以实现如上述方面所述的目标对象的识别方法。
[0016]再一方面，提供了一种计算机可读存储介质，所述存储介质中存储有指令，所述指令由处理器加载并执行以实现如上述方面所述的目标对象的识别方法。
[0017]再一方面，提供了一种计算机程序产品，所述计算机程序产品包括计算机指令，所述指令由处理器加载并执行以实现如上述方面所述的目标对象的识别方法。
[0018]本申请提供的技术方案带来的有益效果至少包括：
[0019]本申请提供了一种目标对象的识别方法、装置及售货设备，该售货设备能够获取拍摄图像，并能够基于拍摄图像识别得到的目标对象的属性信息。由于无需将目标对象的条形码对准自动结算设备的图像采集组件，以供自动结算设备扫描从而识别商品的属性信息，因此一方面提高了属性信息的获取效率，另一方面可以简化用户的操作，提升了用户体验。
[0020]并且，由于售货设备在拍摄图像中确定出的检测框的轴线平行于目标对象的轴线，因此可以确保获取到的目标子图像中的无效背景信息较少。由此，可以进一步提高属性信息的获取效率，且可以提高属性信息的识别准确性。
附图说明
[0021]为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
[0022]图1是本申请实施例提供的一种目标对象的识别方法的流程图；
[0023]图2是本申请实施例提供的另一种目标对象的识别方法的流程图；
[0024]图3是本申请实施例提供的一种基于第一图像得到第二图像的示意图；
[0025]图4是本申请实施例提供的一种基于第一图像得到第四图像和第五图像的示意图；
[0026]图5是本申请实施例提供的一种获取第一图像的示意图；
[0027]图6是相关技术中的一种矩形检测框的示意图；
[0028]图7是本申请实施例提供的一种矩形检测框的示意图；
[0029]图8是本申请实施例提供的一种第一坐标系和第二坐标系的示意图；
[0030]图9是本申请实施例提供的一种目标对象的识别装置的结构示意图；
[0031]图10是本申请实施例提供的另一种目标对象的识别装置的结构示意图；
[0032]图11是本申请实施例提供的一种售货设备的结构示意图。
具体实施方式
[0033]为使本申请的目的、技术方案和优点更加清楚，下面将结合附图对本申请实施方式作进一步地详细描述。
[0034]本申请实施例提供了一种目标对象的识别方法，该方法应用于售货设备(例如无人售货设备)，该售货设备包括摄像头。可选的，该售货设备可以为冰箱或饮料柜等等。参见图1，该方法包括：
[0035]步骤101、获取摄像头拍摄到的拍摄图像。
[0036]在本申请实施例中，售货设备包括设备本体，以及与该设备本体连接的门体。售货设备可以在检测到门体处于打开状态后，控制摄像头拍摄图像。相应的，售货设备可以获取该摄像头拍摄到的拍摄图像。
[0037]或者，售货设备的设备本体呈槽状，售货设备还可以包括：设置在设备本体内的货架。该货架用于放置对象(例如商品)。在售货设备的使用过程中，若售货设备检测到施加在
货架上的压力减小，则可以控制摄像头拍摄图像。相应的，售货设备可以获取该摄像头拍摄到的拍摄图像。
[0038]步骤102、在拍摄图像中确定包括目标对象的检测框。
[0039]其中，该检测框的轴线平行于目标对象的轴线。该检测框可以为轴对称图形，且该检测框的轴线可以为沿该检测框的长度方向延伸的轴线。可选的，该检测框可以为矩形检测框，或椭圆形检测框等。若该检测框为矩形检测框，则该长度方向是指该检测框的长边的延伸方向，若该检测框为椭圆形检测框，则该长度方向是指该检测框的最小外接矩形的长边的延伸方向。
[0040]若目标对象是轴对称的物体，则目标对象的轴线为沿该目标对象的长度方向(也可以称为高度方向)延伸的对称轴。若目标对象不是轴对称的物体，则目标对象的轴线可以为过该目标对象的中心点，且沿该目标对象的长度方向延伸的直线。其中，该目标对象的长度方向可以平行于该目标对象的最小外接矩形的长边的延伸方向。
[0041]可以理解的是，检测框的轴线平行于目标对象的轴线是指：检测框的轴线大致平行于目标对象的轴线。也即是，检测框的轴线与目标对象的轴线之间的夹角小于夹角阈值时，即可认为检测框的轴线平行于目标对象的轴线。该夹角阈值可以是售货设备预先存储的。例如，可以为5
°
。
[0042]步骤103、获取检测框内的目标子图像。
[0043]在本申请实施例中，售货设备可以直接按照检测框裁剪拍摄图像，从而得到检测框内的目标子图像。或者，检测框为矩形检测框。售货设备可以先确定拍摄图像所在的第一坐标系与第二坐标系之间的转换关系。之后，售货设备可以基于该转换关系，将该检测框内的像素本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种目标对象的识别方法，其特征在于，应用于售货设备，所述售货设备包括摄像头；所述方法包括：获取所述摄像头拍摄到的拍摄图像；在所述拍摄图像中确定包括目标对象的检测框，所述检测框的轴线平行于所述目标对象的轴线；获取所述检测框内的目标子图像；基于所述目标子图像识别所述目标对象的属性信息。2.根据权利要求1所述的方法，其特征在于，所述在所述拍摄图像中确定包括目标对象的检测框，包括：将所述拍摄图像输入至目标检测模型，得到所述目标检测模型输出的检测结果，所述检测结果用于指示所述检测框在所述拍摄图像中的位置。3.根据权利要求1所述的方法，其特征在于，所述检测框为矩形检测框；所述获取所述检测框内的目标子图像，包括：基于所述检测框的各个顶点在所述拍摄图像中的位置，确定第一坐标系与第二坐标系之间的第一透视变换矩阵，其中，所述第一坐标系的两个坐标轴分别平行于所述检测框的两条边，所述第二坐标系的两个坐标轴分别平行于所述拍摄图像的像素行方向和像素列方向；基于所述第一透视变换矩阵，以及所述各个顶点在所述拍摄图像中的位置，从所述拍摄图像中确定目标子图像，所述目标子图像的两条边分别平行于所述拍摄图像的像素行方向和像素列方向。4.根据权利要求3所述的方法，其特征在于，所述基于所述检测框的各个顶点在所述拍摄图像中的位置，确定第一坐标系与第二坐标系之间的第一透视变换矩阵，包括：若所述检测框的任一边与所述拍摄图像的像素行方向均不平行，则基于所述检测框的各个顶点在所述拍摄图像中的位置，确定第一坐标系与第二坐标系之间的第一透视变换矩阵。5.根据权利要求1所述的方法，其特征在于，所述检测框为矩形检测框；所述获取所述检测框内的目标子图像，包括：获取所述检测框的一边与所述拍摄图像的像素行方向或像素列方向之间的夹角；基于所述夹角，以及所述检测框的中心点在所述拍摄图像中的位置，确定第一坐标系与第二坐标系之间的第二透视变换矩阵，其中，所述第一坐标系的两个坐标轴分别平行于所述检测框的两条边，所述第二坐标系的两个坐标轴分别平行于所述拍摄图像的像素行方向和像素列方向；基于所述第二透视变换矩阵，所述检测框的尺寸，以及所述中心点在所述拍摄图像中的位置，从所述拍摄图像中确定目标子图像，所述目标子图像的两条边分别平行于所述拍摄图像的像素行方向和像素列方向。6.根据权利要求5所述的方法，其特征在于，所述基于所述夹角，以及所述检测框的中心点在所述拍摄图像中的位置，确定第一坐标系与第二坐标系之间的第二透视变换矩阵，包括：若所述夹角大于角度阈值，则基于所述夹角，以及所述检测框的中心点在所述拍...

【专利技术属性】
技术研发人员：王婷婷，
申请(专利权)人：京东方科技集团股份有限公司，
类型：发明
国别省市：