姿态检测方法、装置、电子设备及计算机可读存储介质制造方法及图纸

本申请实施例提供了一种姿态检测方法、装置、电子设备及计算机可读存储介质，涉及计算机处理领域。该方法包括：获取目标对象对应的图像序列以及目标对象的目标部位的运动数据，确定图像序列中任一图像中目标部位的各关键点的第一三维坐标信息。根据各关键点的第一三维坐标信息，确定表征目标部位的方向的第一单位向量。基于目标部位的运动数据，确定表征目标部位的方向的第二单位向量。根据第一单位向量和第二单位向量之间的相似度，以及各关键点的第一三维坐标信息，确定目标部位的姿态。本申请通过将目标部位的第一三维坐标信息与目标部位的运动数据相结合，可以精确地确定出目标部位的姿态，提高用户感知。提高用户感知。提高用户感知。

【技术实现步骤摘要】
姿态检测方法、装置、电子设备及计算机可读存储介质


[0001]本申请涉及计算机处理领域，具体而言，本申请涉及一种姿态检测方法、装置、电子设备及计算机可读存储介质。

技术介绍

[0002]随着深度学习的发展，人体姿态估计有着越来越高的准确度，更多的应用也随之出现。例如一些终端设备支持体感游戏、AI(Artificial Intelligence，人工智能)健身等、一些直播软件提供3D(3
‑
dimension，三维)虚拟人物的驱动等。
[0003]相关技术中，基于单目视觉的深度学习算法能够适应绝大多数的场景，但是在生物体某些部位发生遮挡或者由于肢体快速移动造成画面模糊等情况下，基于深度学习算法所得到的人体姿态的精度较差，甚至会出现明显的抖动。而虽然利用惯性传感器能够解决由于生物体某些部位发生遮挡，导致人体姿态精度较差的问题，但惯性传感器的测量值会有误差，在累计惯性传感器的测量值以计算生物体的位移，或导致出现明显的偏移。可见，上述方法均无法检测出比较精确的生物体的姿态。

技术实现思路

[0004]本申请实施本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种姿态检测方法，其特征在于，包括：获取目标对象对应的图像序列以及所述目标对象的目标部位的运动数据；确定所述图像序列中任一图像中所述目标部位的各关键点的第一三维坐标信息；根据所述各关键点的第一三维坐标信息，确定表征所述目标部位的方向的第一单位向量；基于所述目标部位的运动数据，确定表征所述目标部位的方向的第二单位向量；根据所述第一单位向量和所述第二单位向量之间的相似度，以及所述各关键点的第一三维坐标信息，确定所述目标部位的姿态。2.根据权利要求1所述的方法，其特征在于，所述根据所述第一单位向量和所述第二单位向量之间的相似度，以及所述各关键点的第一三维坐标信息，确定所述目标部位的姿态，包括：若所述相似度大于或等于预设阈值，基于所述目标部位对应的各关键点的第一三维坐标信息，确定所述目标部位的姿态；若所述相似度小于所述预设阈值，基于所述目标部位对应的各关键点的初始三维坐标信息，确定所述目标部位的长度，基于所述目标部位的长度和所述第二单位向量，确定其他关键点的第二三维坐标信息；基于所述第一指定关键点的第一三维坐标信息以及所述其他关键点的第二三维坐标信息，确定所述目标部位的姿态，所述其他关键点为所述各关键点中除第一指定关键点之外的关键点。3.根据权利要求1所述的方法，其特征在于，所述目标部位包括具有连接关系的至少两个子部位，所述各关键点的第一三维坐标信息包括每个所述子部位的各关键点的第一三维坐标信息，所述目标部位的运动数据包括每个所述子部位对应的运动数据；所述根据所述各关键点的第一三维坐标信息，确定所述目标部位对应的第一单位向量，包括：对于每个所述子部位，根据该子部位的各关键点的第一三维坐标信息，确定该子部位对应的第一单位向量；所述基于所述目标部位的运动数据，确定所述目标部位对应的第二单位向量，包括：对于每个所述子部位，基于该子部位对应的运动数据，确定该子部位对应的第二单位向量；所述根据所述第一单位向量、所述第二单位向量和所述各关键点的第一三维坐标信息，确定所述目标部位的姿态，包括：对于每个所述子部位，根据该子部位对应的第一单位向量和该子部位对应的第二单位向量之间的相似度，以及该子部位的各关键点的第一三维坐标信息，确定该子部位的姿态；基于所述目标部位的各子部位的姿态，确定所述目标部位的姿态。4.根据权利要求3所述的方法，其特征在于，对于每个所述子部位，所述根据该子部位对应的第一单位向量和该子部位对应的第二单位向量之间的相似度，以及该子部位的各关键点的第一三维坐标信息，确定该子部位的姿态，包括：对于相似度大于或等于对应的预设阈值的第一子部位，基于该子部位的各关键点的第一三维坐标信息，确定该子部位的姿态；对于相似度小于对应的预设阈值的第二子部位，基于该子部位的各关键点的第一三维
坐标信息以及该子部位对应的第二单位向量，确定该子部位的各关键点的第二三维坐标信息；根据该子部位的各关键点的第二三维坐标信息，确定该子部位的姿态。5.根据权利要求4所述的方法，其特征在于，所述各关键点的初始三维坐标信息包括每个所述子部位的各关键点的初始三维坐标信息，对于所述第二子部位，所述基于该子部位的各关键点的第一三维坐标信息以及该子部位对应的第二单位向量，确定该子部位的各关键点的第二三维坐标信息，包括：基于该子部位的各关键点的初始三维坐标信息，确定该子部位的长度；若所述至少两个子部位中包括第一子部位和第二子部位，将与该子部位存在连接关系的目标第一子部位的各关键点中的第一连接关键点的第一三维坐标信息作为该子部位中该第一连接关键点的第二三维坐标信息...

【专利技术属性】
技术研发人员：金天，胥立丰，赵璐璐，丁路生，
申请(专利权)人：北京奕斯伟计算技术有限公司，
类型：发明
国别省市：