【技术实现步骤摘要】
本申请涉及行为分析，特别是涉及一种骨骼动作识别方法、设备及存储介质。
技术介绍
1、动作识别是指对给定的动作序列数据进行分析，从中识别并判断出其包含的动作类别，被广泛应用于视频监控、人机交互、增强现实、自动驾驶等领域。随着3d动作捕捉系统的快速发展和先进的实时2d/3d姿态估计算法，基于骨骼的动作识别越来越受到工业界和学术界的关注。
2、目前的骨骼动作识别方法仍存在识别精度不高的问题，因此，如何提高骨骼动作识别的精度和鲁棒性，成为了本领域技术人员亟待解决的技术问题。
技术实现思路
1、本申请至少提供一种骨骼动作识别方法、设备及存储介质。
2、本申请第一方面提供了一种骨骼动作识别方法，方法包括：获取待识别图像，待识别图像中含有目标对象；对待识别图像中的目标对象进行关键点检测，基于关键点检测结果得到目标对象的骨骼姿态信息；将骨骼姿态信息映射至预设尺寸的二维网格表达式中，得到网格映射结果；基于网格映射结果对目标对象进行动作特征提取，利用提取到的动作特征进行动作识别，得到动作识别结果。
3、在一实施例中，待识别图像由多帧视频帧组成，关键点检测结果含有多个关键点，骨骼姿态信息包括骨骼点信息、骨骼信息、骨骼点运动信息或骨骼运动信息中的一种或多种；基于关键点检测结果得到目标对象的骨骼姿态信息，包括：从多个关键点中提取出骨骼点，对每个骨骼点进行组合，得到目标对象的骨骼点信息；和/或，对相邻骨骼点进行连接得到多条骨骼连接线，对每条骨骼连接线进行组合，得到目标对象的
4、在一实施例中，将骨骼姿态信息映射至预设尺寸的二维网格表达式中，得到网格映射结果，包括：对骨骼姿态信息进行信息扩充，得到扩充骨骼姿态信息；将扩充骨骼姿态信息映射至预设尺寸的二维网格表达式中，得到网格映射结果。
5、在一实施例中，对骨骼姿态信息进行信息扩充，得到扩充骨骼姿态信息，包括：利用邻接矩阵计算骨骼姿态信息对应的插值数据，邻接矩阵含有目标对象的骨骼的拓扑结构信息；组合骨骼姿态信息和骨骼姿态信息对应的插值数据，得到扩充骨骼姿态信息。
6、在一实施例中，扩充骨骼姿态信息由多个待映射元素组成，待映射元素的数量与二维网格表达式中网格的数量相等；将扩充骨骼姿态信息映射至预设尺寸的二维网格表达式中，得到网格映射结果，包括：将扩充骨骼姿态信息中的待映射元素一一映射至二维网格表达式的网格中，得到网格映射结果。
7、在一实施例中，待识别图像由多帧视频帧组成；基于网格映射结果对目标对象进行动作特征提取，利用提取到的动作特征进行动作识别，得到动作识别结果，包括：对每个视频帧对应的网格映射结果进行空间特征提取，得到每个视频帧分别对应的空间特征；对每个空间特征进行时间特征提取，得到目标对象对应的时空特征；对时空特征进行动作识别，得到动作识别结果。
8、在一实施例中，目标对象对应有多种类型的骨骼姿态信息；基于网格映射结果对目标对象进行动作特征提取，利用提取到的动作特征进行动作识别，得到动作识别结果，包括：对每种类型的骨骼姿态信息的网格映射结果进行动作识别，得到每种类型的网格映射结果分别对应的初始识别结果；对每个初始识别结果进行融合，得到待识别图像对应的动作识别结果。
9、在一实施例中，对每个初始识别结果进行融合，得到待识别图像对应的动作识别结果，包括：获取每种类型的骨骼姿态信息对应的权重参数；利用权重参数，对每个初始识别结果进行加权求和，得到待识别图像对应的动作识别结果。
10、本申请第二方面提供了一种骨骼动作识别装置，装置包括：图像获取模块，用于获取待识别图像，待识别图像中含有目标对象；关键点检测模块，用于对待识别图像中的目标对象进行关键点检测，基于关键点检测结果得到目标对象的骨骼姿态信息；网格映射模块，用于将骨骼姿态信息映射至预设尺寸的二维网格表达式中，得到网格映射结果；动作识别模块，用于基于网格映射结果对目标对象进行动作特征提取，利用提取到的动作特征进行动作识别，得到动作识别结果。
11、本申请第三方面提供了一种电子设备，包括存储器和处理器，处理器用于执行存储器中存储的程序指令，以实现上述骨骼动作识别方法。
12、本申请第四方面提供了一种计算机可读存储介质，其上存储有程序指令，程序指令被处理器执行时实现上述骨骼动作识别方法。
13、上述方案，通过获取待识别图像，待识别图像中含有目标对象；对待识别图像中的目标对象进行关键点检测，基于关键点检测结果得到目标对象的骨骼姿态信息；将骨骼姿态信息映射至预设尺寸的二维网格表达式中，得到网格映射结果，以将不规则的骨骼姿态信息转换为规则的、紧凑的网格表达；基于网格映射结果对目标对象进行动作特征提取，利用提取到的动作特征进行动作识别，得到动作识别结果，提高骨骼特征交互的效率以及动作识别精度。
14、应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，而非限制本申请。
本文档来自技高网...【技术保护点】
1.一种骨骼动作识别方法，其特征在于，包括：
2.根据权利要求1所述的方法，其特征在于，所述待识别图像由多帧视频帧组成，所述关键点检测结果含有多个关键点，所述骨骼姿态信息包括骨骼点信息、骨骼信息、骨骼点运动信息或骨骼运动信息中的一种或多种；所述基于关键点检测结果得到所述目标对象的骨骼姿态信息，包括：
3.根据权利要求1所述的方法，其特征在于，所述将所述骨骼姿态信息映射至预设尺寸的二维网格表达式中，得到网格映射结果，包括：
4.根据权利要求3所述的方法，其特征在于，所述对所述骨骼姿态信息进行信息扩充，得到扩充骨骼姿态信息，包括：
5.根据权利要求3所述的方法，其特征在于，所述扩充骨骼姿态信息由多个待映射元素组成，所述待映射元素的数量与所述二维网格表达式中网格的数量相等；所述将所述扩充骨骼姿态信息映射至预设尺寸的二维网格表达式中，得到网格映射结果，包括：
6.根据权利要求1所述的方法，其特征在于，所述待识别图像由多帧视频帧组成；所述基于所述网格映射结果对所述目标对象进行动作特征提取，利用提取到的动作特征进行动作识别，得到动作
7.根据权利要求1至6任一项所述的方法，其特征在于，所述目标对象对应有多种类型的骨骼姿态信息；所述基于所述网格映射结果对所述目标对象进行动作特征提取，利用提取到的动作特征进行动作识别，得到动作识别结果，包括：
8.根据权利要求7所述的方法，其特征在于，所述对每个初始识别结果进行融合，得到所述待识别图像对应的动作识别结果，包括：
9.一种电子设备，其特征在于，所述电子设备包括存储器和处理器，处理器用于执行存储器中存储的程序指令，以实现如权利要求1-8任一项所述方法中的步骤。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有程序指令，所述程序指令能够被处理器执行以实现如权利要求1-8任一项所述方法中的步骤。
...【技术特征摘要】
1.一种骨骼动作识别方法，其特征在于，包括：
2.根据权利要求1所述的方法，其特征在于，所述待识别图像由多帧视频帧组成，所述关键点检测结果含有多个关键点，所述骨骼姿态信息包括骨骼点信息、骨骼信息、骨骼点运动信息或骨骼运动信息中的一种或多种；所述基于关键点检测结果得到所述目标对象的骨骼姿态信息，包括：
3.根据权利要求1所述的方法，其特征在于，所述将所述骨骼姿态信息映射至预设尺寸的二维网格表达式中，得到网格映射结果，包括：
4.根据权利要求3所述的方法，其特征在于，所述对所述骨骼姿态信息进行信息扩充，得到扩充骨骼姿态信息，包括：
5.根据权利要求3所述的方法，其特征在于，所述扩充骨骼姿态信息由多个待映射元素组成，所述待映射元素的数量与所述二维网格表达式中网格的数量相等；所述将所述扩充骨骼姿态信息映射至预设尺寸的二维网格表达式中，得到网格映射结果，包括：
6.根据权利要求1所述的...
【专利技术属性】
技术研发人员：李德财，张海涛，马子昂，
申请(专利权)人：杭州华橙软件技术有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。