一种图像识别方法、装置及存储介质制造方法及图纸

本公开实施例公开了一种图像识别方法、装置及存储介质，能够提高人脸与操作部位关联的准确度，该方法包括：对待识别图像进行检测，得到至少一个人脸检测结果、至少一个操作部位检测结果以及至少一个躯干检测结果；一个人脸检测结果中包括一个人脸的检测框，一个操作部位检测结果中包括一个操作部位的检测框，一个躯干检测结果中包括一个躯干的检测框；将至少一个躯干检测结果中的每个躯干检测结果，分别与各个人脸检测结果进行组合，得到至少一个第一结果组合；将每个躯干检测结果，分别和各个操作部位检测结果进行组合，得到至少一个第二结果组合；对至少一个第一结果组合和至少一个第二结果组合进行关联，得到关联结果。得到关联结果。得到关联结果。

【技术实现步骤摘要】
【国外来华专利技术】一种图像识别方法、装置及存储介质
[0001]相关申请的交叉引用
[0002]本申请要求于2020年04月01日提交的题为“IMAGE RECOGNITION METHOD,APPARATUS,AND STORAGE MEDIUM(一种图像识别方法、装置及存储介质)”的新加坡专利申请10202003027Q的优先权，该专利申请的全部内容通过引用并入本文。


[0003]本公开实施例涉及但不限于图像处理技术，尤其涉及一种图像识别方法、装置及存储介质。

技术介绍

[0004]随着图像识别技术的发展，图像识别装置可以将图像画面中的人脸和操作部位，例如人的手部，进行关联匹配，即识别出人脸和操作部位是否属于同一个人。目前，常用的将人脸与操作部位关联的方法有两类，一类是先从图像中分别识别出多个人脸和多个操作部位，然后利用深度学习模型对人脸和操作部位之间的关系进行推断；另一类是基于人体关键点的关联算法，对人脸和操作部位进行关联。
[0005]然而，利用深度学习模型推断人脸和操作部位之间的关系时，针对每个人脸、操作部位的组合都需要调用深度学习模型，而当人脸与操作部位距离较远时，深度学习模型直接对人脸与操作部位的关系进行判断的难度较高，导致人脸与操作部位关联的准确度较低；利用人体关键点的关联算法时，由于图像中存在多个人体时，关键点会丢失部分人体信息，使得人脸与操作部位关联的准确度较低。

技术实现思路

[0006]本公开实施例提供一种图像识别方法、装置及存储设备，能够提高人脸与操作部位关联的准确度。
[0007]本公开的技术方案是这样实现的：
[0008]本公开实施例提供一种图像识别方法，包括：
[0009]对待识别图像进行图像检测，得到至少一个人脸检测结果、至少一个操作部位检测结果以及至少一个躯干检测结果；一个人脸检测结果中包含一个人脸检测检测框，一个操作部位检测结果中包含一个操作部位的检测框，一个躯干检测结果中包括一个躯干的检测框；
[0010]将所述至少一个躯干检测结果中的每个躯干检测结果，分别与各个人脸检测结果进行组合，得到至少一个第一结果组合；
[0011]将所述每个躯干检测结果，分别和各个操作部位检测结果进行组合，得到至少一个第二结果组合；
[0012]对所述至少一个第一结果组合和所述至少一个第二结果组合进行关联，得到关联结果。
[0013]本公开实施例提供一种图像识别装置，包括：
[0014]检测模块，用于对待识别图像进行图像检测，得到至少一个人脸检测结果、至少一个操作部位检测结果以及至少一个躯干检测结果；一个人脸检测结果中包括一个人脸的检测框，一个操作部位检测结果中包括一个操作部位的检测框，一个躯干检测结果中包括一个躯干的检测框；
[0015]组合模块，用于将所述至少一个躯干检测结果中的每个躯干检测结果，分别与各个人脸检测结果进行组合，得到至少一个第一结果组合；将所述每个躯干检测结果，分别和各个操作部位检测结果进行组合，得到至少一个第二结果组合；
[0016]关联模块，用于对所述至少一个第一结果组合和所述至少一个第二结果组合进行关联，得到关联结果。
[0017]本公开实施例提供一种电子设备，包括：
[0018]存储器，用于存储计算机可执行指令；
[0019]处理器，用于执行所述存储器中存储的计算机可执行指令时，实现本公开实施例提供的图像识别方法。
[0020]本公开实施例提供一种存储介质，存储有计算机可执行指令，当计算机可执行指令被处理器执行时，使得所述处理器实现本公开实施例提供的图像识别方法。
[0021]本公开实施例提供一种计算机程序，包括计算机可执行代码，其中，当所述计算机可执行代码在设备上运行时，所述设备中的处理器执行本公开实施例提供的图像识别方法的步骤的指令。
[0022]本公开实施例具有以下有益效果：
[0023]本公开实施例中，在对待识别图像进行检测时，得到至少一个人脸检测结果、至少一个操作部位检测结果和至少一个躯干检测结果，接着利用至少一个躯干检测结果中的每个躯干检测结果，分别与各个人脸检测结果进行组合，得到至少一个第一结果组合，同时再利用每个躯干检测结果，分别和各个操作部位检测结果进行组合，得到至少一个第二结果组合，最后对至少一个第一结果整合和至少一个第二结果组合进行关联，得到关联结果。通过上述方式，判断出躯干检测结果和人脸检测结果的关系，以及躯干检测结果和操作部位检测结果的关系，从而利用躯干检测结果将人脸检测结果和操作部位检测结果进行关联，降低了判断人脸和操作部位的难度，同时不会丢失图像中人体的关键信息，提高了人脸与操作部位关联的准确度。
附图说明
[0024]图1为本公开实施例提供的图像识别场景100的示意图；
[0025]图2为本公开实施例提供的图像识别方法的一个可选的流程示意图一；
[0026]图3为本公开实施例提供的图像识别方法的一个可选的流程示意图二；
[0027]图4为本公开实施例提供的图像识别方法的一个可选的流程示意图三；
[0028]图5是本公开实施例提供的图像识别方法的一个可选的流程示意图四；
[0029]图6是本公开实施例提供的躯干检测区域的宽度、高度以及面积的示意图；
[0030]图7为本公开实施例提供的图像识别方法的一个可选的流程示意图五；
[0031]图8为本公开实施例提供的一种图像识别装置的结构示意图一；
[0032]图9为本公开实施例提供的一种电子设备的结构示意图二。
具体实施方式
[0033]下面将结合本公开实施例中的附图，对本公开实施例中的技术中的方案进行清楚、完整地描述。
[0034]本公开实施例提供一种图像识别场景，如图1所示，图1为本公开实施例提供的图像识别场景100的示意图，在图像识别场景100中，包括对待识别区域200进行图像识别的图像识别装置300，在待识别区域200中，具有至少一个人物对象(示例性的示出了人物对象400
‑
1，人物对象400
‑
2和人物对象400
‑
3)，其中，每个人物对象400都可以以人脸来进行区分。图像识别装置300可以是设置于待识别区域200的正面或侧面，以平行角度对待识别区域200进行图像识别。具体的，图像识别装置300可以先对待识别区域200进行图像采集，然后从所采集到的图像中检测出躯干检测结果500(示例性的示出了躯干检测结果500
‑
1、躯干检测结果500
‑
2和躯干检测结果500
‑
3)、人脸检测结果600(示例性的示出了人脸检测结果600
‑
1、人脸检测结果600
‑
2和人脸检测结果600
‑
3)，以及操作部位检测结果700(示例性的示出了操作部位检测结果700
‑
1、操作部位检测结果700
‑本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种图像识别方法，其特征在于，包括：对待识别图像进行图像检测，得到至少一个人脸检测结果、至少一个操作部位检测结果以及至少一个躯干检测结果；一个人脸检测结果中包括一个人脸的检测框，一个操作部位检测结果中包括一个操作部位的检测框，一个躯干检测结果中包括一个躯干的检测框；将所述至少一个躯干检测结果中的每个躯干检测结果，分别与各个人脸检测结果进行组合，得到至少一个第一结果组合；将所述每个躯干检测结果，分别和各个操作部位检测结果进行组合，得到至少一个第二结果组合；对所述至少一个第一结果组合和所述至少一个第二结果组合进行关联，得到关联结果。2.根据权利要求1所述的方法，其特征在于，所述对所述至少一个第一结果组合和所述至少一个第二结果组合进行关联，得到关联结果，包括：分别对每个躯干检测结果、每个人脸检测结果，以及每个操作部位检测结果进行特征提取，得到每个躯干检测结果对应的躯干特征序列、每个人脸检测结果对应的人脸特征序列，以及每个操作部位检测结果对应的操作部位特征序列；根据所述躯干特征序列和所述人脸特征序列，将每个第一结果组合的躯干检测结果和人脸检测结果进行关联，得到各个第一结果组合对应的第一子关联结果；根据所述躯干特征序列和所述操作部位特征序列，将每个第二结果组合的躯干检测结果和操作部位检测结果进行关联，得到各个第二结果组合对应的第二子关联结果；根据各个第一子关联结果和各个第二子关联结果确定出所述关联结果。3.根据权利要求2所述的方法，其特征在于，所述根据各个第一子关联结果和各个第二子关联结果确定出所述关联结果，包括：根据各个第一子关联结果，确定所述至少一个第一结果组合中躯干检测结果和人脸检测结果相关联的关联第一结果组合；根据各个第二子关联结果，确定所述至少一个第二结果组合中躯干检测结果和操作部位检测结果相关联的关联第二结果组合；确定具有相同躯干检测结果的关联第一结果组合和关联第二结果组合相关联，其中，一个关联第一结果组合中的人脸检测结果表征的人脸与与其相关联的关联第二结果组合中的操作部位检测结果表征的操作部位相互关联。4.根据权利要求2或3所述的方法，其特征在于，所述根据所述躯干特征序列和所述人脸特征序列，将每个第一结果组合的躯干检测结果和人脸检测结果进行关联，得到各个第一结果组合对应的第一子关联结果，包括：根据一个第一结果组合中的人脸检测结果对应的人脸特征序列，以及该第一结果组合中的躯干检测结果对应的躯干特征序列，拼接出该第一结果组合对应的第一组合特征；利用各个第一结果组合对应的第一组合特征对各个第一结果组合进行分类，得到各个第一结果组合对应的第一子关联结果。5.根据权利要求2或3所述的方法，其特征在于，所述根据所述躯干特征序列和所述操作部位特征序列，将每个第二结果组合的躯干检测结果和操作部位检测结果进行关联，得到各个第二结果组合对应的第二子关联结果，包括：
根据一个第二结果组合中的躯干检测结果对应的躯干特征序列，以及该第二结果组合中的操作部位检测结果对应的操作部位特征序列，拼接出该第二结果组合对应的第二组合特征；利用各个第二结果组合对应的第二组合特征对各个第二结果组合进行分类，得到各个第二结果组合的第二子关联结果。6.根据权利要求2所述的方法，其特征在于，所述分别对每个躯干检测结果、每个人脸检测结果，以及每个操作部位检测结果进行特征提取，得到每个躯干检测结果对应的躯干特征序列、每个人脸检测结果对应的人脸特征序列，以及每个操作部位检测结果对应的操作部位特征序列，包括：分别对所述每个躯干检测结果中的躯干图像、所述每个人脸检测结果中的人脸图像，和所述每个操作部位检测结果中的操作部位图像进行特征提取，得到每个躯干检测结果的躯干外观特征、每个人脸检测结果的人脸外观特征和每个操作部位检测结果的操作部位外观特征；根据每个躯干检测结果中的躯干检测框的坐标信息，确定每个躯干检测结果的躯干位置特征；根据每个人脸检测结果中的人脸检测框的坐标信息确定每个人脸检测结果的人脸位置特征；根据每个操作部位检测结果中的操作部位检测框的坐标信息确定每个操作部位检测结果的操作部位位置特征；利用每个躯干检测结果的躯干外观特征和躯干位置特征拼接出每个躯干检测结果的躯干特征序列，利用每个人脸检测结果的人脸外观特征和人脸位置特征拼接出每个人脸检测结果的人脸特征序列，以及利用每个操作部位检测结果的操作部位外观特征和操作部位位置特征拼接出每个操作部位检测结果的操作部位特征序列。7.根据权利要求6所述的方法，其特征在于，所述根据每个躯干检测结果中的躯干检测框的坐标信息，确定每个躯干检测结果的躯干位置特征；根据每个人脸检测结果中的人脸检测框的坐标信息确定每个人脸检测结果的人脸位置特征；根据每个操作部位检测结果中的操作部位检测框的坐标信息确定每个操作部位检测结果的操作部位位置特征，包括：根据每个躯干检测框的坐标信息，生成每个躯干检测结果的躯干区域位置参数；利用每个人脸检测框的坐标信息，生成每个人脸检测结果的人脸区域位置参数；以及采用每个操作部位检测框的坐标信息，生成每个操作部位检测结果的操作部位区域位置参数；基于预设的躯干序列位数、预设的躯干特征构造模型和躯干特征构造参数，根据每个躯干检测结果的躯干区域位置参数构造每个躯干检测结果的躯干位置序列，并根据每个躯干检测结果的躯干位置序列生成每个躯干检测结果的躯干位置特征；其中，所述躯干特征构造参数根据所述预设的躯干序列位数生成；基于预设的人脸序列位数、预设的人脸特征构造模型和人脸特征构造参数，根据每个人脸检测结果的人脸区域位置参数构造每个人脸检测结果的人脸位置序列，并根据每个人脸检测结果的人脸位置序列生成每个人脸检测结果的人脸位置特征；其中，所述人脸特征构造参数根据所述预设的人...

【专利技术属性】
技术研发人员：张明远，吴金易，赵海宇，
申请(专利权)人：商汤国际私人有限公司，
类型：发明
国别省市：