人体部位的匹配方法、装置、设备和存储介质制造方法及图纸

本发明专利技术提供一种人体部位的匹配方法、装置、设备和存储介质；人体部位的匹配方法中，获取目标图像中的人脸框及其对应的嵌入特征，目标图像中的人体框及其对应的嵌入特征；处理目标图像中的目标人体框对应的嵌入特征，和每一个人脸框对应的嵌入特征，得到目标图像中的目标人体和每一个人脸的嵌入特征距离；针对目标图像中的目标人体，选择符合条件的嵌入特征距离对应的人脸，作为目标人体的配对人脸，实现较高准确率的完成同属于一人的人体和人体的配对。配对。配对。

【技术实现步骤摘要】
人体部位的匹配方法、装置、设备和存储介质


[0001]本专利技术涉及图像处理
，尤其涉及一种人体部位的匹配方法、装置、设备和存储介质。

技术介绍

[0002]人体识别和人脸识别，属于行人识别的两种常见手段。目前，行人识别的一种实际场景中，还存在有将场景中同属于一人的人脸和人体进行配对的需求。一般情况下，先分别完成人脸检测和人体检测，之后，再采用匈牙利算法从检测到的人脸和人体中，完成同属于一人的人脸和人体的配对。
[0003]具体的，采用匈牙利算法从检测到的人脸和人体中，完成同属于一人的人脸和人体的配对的基本方式是，在发现一个人脸框在人体框中的覆盖范围超过一定程度，则认定该人脸框和人体框是属于同一人的。但是，在场景图像中包含有多个人，且多个人之间的身体重复度较高时，就会导致人脸和人体的配对错误。由此可以看出：目前方案对属于一人的人脸和人体的配对，匹配的准确率较低。

技术实现思路

[0004]有鉴于此，本专利技术实施例提供一种人体部位的匹配方法、装置、设备和存储介质，以实现较高准确率的完成同属于一人的人体和人体的配对。
[0005]为实现上述目的，本专利技术实施例提供如下技术方案：
[0006]第一方面，本申请提供了一种人体部位的匹配方法，包括：
[0007]获取目标图像中的第一部位框及其对应的嵌入特征，以及目标图像中的第二部位框及其对应的嵌入特征；其中，目标图像中的第一部位框对应的嵌入特征表征与第一部位框同属于一人的第二部位的语义信息，目标图像中的第二部位框对应的嵌入特征表征与第二部位框同属于一人的第一部位的语义信息；第一部位和所第二部位为目标图像中人体的两个不同部位；
[0008]处理目标图像中的目标第二部位框对应的嵌入特征，和每一个第一部位框对应的嵌入特征，得到目标图像中的目标第二部位和每一个第一部位的嵌入特征距离；目标第二部位框指代目标图像中的至少一个第二部位框，目标第二部位为目标第二部位框指代的第二部位，每一个第一部位为每一个第一部位框指代的第一部位；
[0009]针对目标图像中的目标第二部位，选择符合条件的嵌入特征距离所对应的第一部位，作为目标第二部位的配对第一部位。
[0010]可选地，针对目标图像中的目标第二部位，选择用于表征目标第二部位和第一部位最接近的嵌入特征距离对应的第一部位，作为目标第二部位的配对第一部位，包括：
[0011]计算目标图像中的目标第二部位和每一个第一部位的嵌入特征距离对应的相似度值；
[0012]针对目标图像中的目标第二部位，将相似度值最大的第一部位，作为目标第二部
位的配对第一部位。
[0013]可选地，获取目标图像中的第一部位框及其对应的嵌入特征，以及目标图像中的人第二部位框及其对应的嵌入特征，包括：
[0014]调用检测模型处理目标图像，得到第一部位框及其对应的嵌入特征，以及第二部位及其对应的嵌入特征。
[0015]可选地，检测模型包括：基础模块和嵌入模块；
[0016]基础模块用于处于目标图像，得到目标图像中的第一部位框和第二部位框；
[0017]嵌入模块用于处理目标图像，得到第一部位框对应的嵌入特征和第二部位框对应的嵌入特征。
[0018]可选地，检测模型为一阶段检测器，检测模型的嵌入模块，包括：四个卷积层以及在四个卷积层末端的一个膨胀卷积层；
[0019]或者，检测模型为二阶段检测器，检测模型的嵌入模块，包括：两个全连接层。
[0020]可选地，检测模型在训练过程中，针对第一部位和第二部位属于同一人的样本数据，采用促使第二部位框对应的嵌入特征和第一部位框对应的嵌入特征互相靠近的损失函数，对检测模型进行训练；针对第一部位和第二部位不属于同一人的样本数据，采用促使第二部位框对应的嵌入特征和第一部位框对应的嵌入特征互相远离的损失函数，对检测模型进行训练。
[0021]可选地，第一部位和第二部位，分别为人体、人脸、手、腿和躯干中的一个。
[0022]第二方面，本申请提供了一种人体部位的匹配装置，包括：
[0023]调用单元，用于获取目标图像中的第一部位框及其对应的嵌入特征，以及目标图像中的第二部位框及其对应的嵌入特征；其中，目标图像中的第一部位框对应的嵌入特征表征与第一部位框同属于一人的第二部位的语义信息，目标图像中的第二部位框对应的嵌入特征表征与第二部位框同属于一人的第一部位的语义信息；第一部位和第二部位为目标图像中人体的两个不同部位；
[0024]处理单元，用于处理目标图像中的目标第二部位框对应的嵌入特征，和每一个第一部位框对应的嵌入特征，得到目标图像中的目标第二部位和每一个第一部位的嵌入特征距离；目标第二部位框指代目标图像中的每一个第二部位框，目标第二部位为目标第二部位框指代的第二部位，每一个第一部位为每一个第一部位框指代的第一部位；
[0025]筛选单元，用于针对目标图像中的目标第二部位，选择用于表征目标第二部位和第一部位最接近的嵌入特征距离对应的第一部位，作为目标第二部位的配对第一部位。
[0026]可选地，调用单元执行获取目标图像中的第一部位框及其对应的嵌入特征，以及目标图像中的第二部位框及其对应的嵌入特征时，用于：
[0027]调用检测模型处理目标图像，得到第一部位框及其对应的嵌入特征，以及第二部位及其对应的嵌入特征。
[0028]可选地，检测模型包括：基础模块和嵌入模块；
[0029]基础模块用于处于目标图像，得到目标图像中的第一部位框和第二部位框；
[0030]嵌入模块用于处理目标图像，得到第一部位框对应的嵌入特征和第二部位框对应的嵌入特征。
[0031]可选地，检测模型为一阶段检测器，检测模型的嵌入模块，包括：四个卷积层以及
在四个卷积层末端的一个膨胀卷积层。
[0032]可选地，检测模型为二阶段检测器，检测模型的嵌入模块，包括：两个全连接层。
[0033]可选地，还包括模型训练单元，模型训练单元训练检测模型过程中，针对第一部位和第二部位属于同一人的样本数据，采用促使第二部位框对应的嵌入特征和第一部位框对应的嵌入特征互相靠近的损失函数，对检测模型进行训练；针对第一部位和第二部位不属于同一人的样本数据，采用促使第二部位框对应的嵌入特征和第一部位框对应的嵌入特征互相远离的损失函数，对检测模型进行训练。
[0034]第三方面，本申请提供了一种电子设备，包括：
[0035]一个或多个处理器；
[0036]存储器，其上存储有程序；
[0037]当程序被一个或多个处理器执行时，使得一个或多个处理器实现上述第一方面任意一项人体部位的匹配方法。
[0038]第四方面，本申请提供了一种电子设备，包括：
[0039]第一处理逻辑，被配置为：接收目标图像的图像数据并使用神经网络模型来处理图像数据以输出目标图像中人体部位的位置信息和嵌入特征；
[0040]其中，神经网络模型包括：
[004本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种人体部位的匹配方法，其特征在于，包括：获取目标图像中的第一部位框及其对应的嵌入特征，以及所述目标图像中的第二部位框及其对应的嵌入特征；其中，所述目标图像中的第一部位框对应的嵌入特征表征与所述第一部位框同属于一人的第二部位的语义信息，所述目标图像中的第二部位框对应的嵌入特征表征与所述第二部位框同属于一人的第一部位的语义信息；所述第一部位和所述第二部位为所述目标图像中人体的两个不同部位；处理所述目标图像中的目标第二部位框对应的嵌入特征，和每一个第一部位框对应的嵌入特征，得到所述目标图像中的目标第二部位和每一个第一部位的嵌入特征距离；所述目标第二部位框指代所述目标图像中的至少一个第二部位框，所述目标第二部位为所述目标第二部位框指代的第二部位，所述每一个第一部位为每一个所述第一部位框指代的第一部位；针对所述目标图像中的目标第二部位，选择符合条件的嵌入特征距离所对应的第一部位，作为所述目标第二部位的配对第一部位。2.根据权利要求1所述的人体部位的匹配方法，其特征在于，所述针对所述目标图像中的目标第二部位，选择符合条件的嵌入特征距离对应的第一部位，作为所述目标第二部位的配对第一部位，包括：计算所述目标图像中的目标第二部位和每一个第一部位的嵌入特征距离对应的相似度值；针对所述目标图像中的目标第二部位，将所述相似度值最大的第一部位，作为所述目标第二部位的配对第一部位。3.根据权利要求1所述的人体部位的匹配方法，其特征在于，所述获取目标图像中的第一部位框及其对应的嵌入特征，以及所述目标图像中的人第二部位框及其对应的嵌入特征，包括：调用检测模型处理所述目标图像，得到所述第一部位框及其对应的嵌入特征，以及所述第二部位及其对应的嵌入特征。4.根据权利要求3所述的人体部位的匹配方法，其特征在于，所述检测模型包括：基础模块和嵌入模块；所述基础模块用于处于所述目标图像，得到所述目标图像中的第一部位框和所述第二部位框；所述嵌入模块用于处理所述目标图像，得到所述第一部位框对应的嵌入特征和所述第二部位框对应的嵌入特征。5.根据权利要求4所述的人体部位的匹配方法，其特征在于，所述检测模型为一阶段检测器，所述检测模型的嵌入模块，包括：四个卷积层以及在四个所述卷积层末端的一个膨胀卷积层；或者，所述检测模型为二阶段检测器，所述检测模型的嵌入模块，包括：两个全连接层。6.根据权利要求3至5中任意一项所述的人体部位的匹配方法，其特征在于，所述检测模型在训练过程中，针对第一部位和第二部位属于同一人的样本数据，采用促使第二部位框对应的嵌入特征和第一部位框对应的嵌入特征互相靠近的损失函数，对所述检测模型进行训练；针对第一部位和第二部位不属于同一人的样本数据，采用促使第二部位框对应的
嵌入特征和第一部位框对应的嵌入特征互相远离的损失函数，对所述检测模型进行训练。7.根据权利要求1至5中任意一项所述的人体部位的匹配方法，其特征在于，所述第一部位和所述第二部位，分别为人体、人脸、手、腿和躯干中的一个。8.一种人体部位的匹配装置，其特征在于，包括：调用单元，用于获取目标图像中的第一部位框及其对应的嵌入特征，以及所述目标图像中的第二部位框及其对应的嵌入特征；其中，所述目标图像中的第一部位框对应的嵌入特征表征与所述第一部位框同属于一人的第二部位的语义信息，所述目标图像中的第二部位框对应的嵌入特征表征与所述第二部位框同属于一人的第一部位的语义信息；所述第一部位和所述第二部位为所述目标图像中人体的两个不同部位；处理单元...

【专利技术属性】
技术研发人员：邓江帆，周峰，万俊峰，
申请(专利权)人：北京爱笔科技有限公司，
类型：发明
国别省市：