运动姿态的预测方法、装置、设备及计算机可读存储介质制造方法及图纸

技术编号:40096784 阅读:25 留言:0更新日期:2024-01-23 17:03
本申请公开一种运动姿态的预测方法、装置、设备及计算机可读存储介质,应用于数据处理技术领域。对包括需要预测运动姿态的目标个体的待处理运动视频进行预处理,得到待处理运动视频数据,利用多模态特征提取及融合网络对待处理运动视频数据进行特征提取和融合,得到多模态特征,多模态特征为目标个体的关键点序列特征、运动速度差特征以及运动光影特征的融合特征;将多模态特征输入至运动姿态预测网络,得到运动姿态预测网络输出的运动预测结果。多模态特征中噪声信息较少,且在复杂应用场景及中长期预测时,能够较为准确的反映目标个体运动中的特性,则基于多模态特征进行运动姿态预测,能够提高目标个体的运动姿态的预测准确性。

【技术实现步骤摘要】

本申请涉及数据处理,具体涉及一种运动姿态的预测方法、装置、设备及计算机可读存储介质


技术介绍

1、目标个体的姿态在与外界交互的过程中起着重要作用,对目标个体的运动姿态的准确预测,在自动驾驶、人际交互、计算机动画和机器人技术等众多领域都具有十分广阔的应用前景。

2、目前可以使用循环神经网络、卷积神经网络、生成对抗网络、图卷积神经网络等多种深度学习网络模型来实现目标个体运动姿态的预测。这些方法的输入数据为单一的运动视频或者从运动视频中提取出的目标个体的关键点序列,且运动视频中包含了与运动预测不相关的噪声信息,目标个体的关键点序列存在缺失、重复、不准确的数据,在复杂应用场景下的预测结果不尽人意,存在目标个体的运动姿态的预测准确性较低的问题。


技术实现思路

1、有鉴于此,本申请提供一种运动姿态的预测方法、装置、设备及计算机可读存储介质,能够提高目标个体的运动姿态的预测准确性。

2、为解决上述问题,本申请提供的技术方案如下:

3、第一方面,本申请提供一种运动姿态的预测方法,所述方法本文档来自技高网...

【技术保护点】

1.一种运动姿态的预测方法,其特征在于,所述方法包括:

2.根据权利要求1所述的运动姿态的预测方法,其特征在于,所述利用预先构建的多模态特征提取及融合网络对所述待处理运动视频数据进行特征提取和融合,得到多模态特征,包括:

3.根据权利要求1所述的运动姿态的预测方法,其特征在于,得到多模态特征之后,所述方法还包括:

4.根据权利要求3所述的运动姿态的预测方法,其特征在于,所述将所述多模态特征输入至预先构建的运动姿态预测网络,得到所述预先构建的运动姿态预测网络输出的运动预测结果,包括:

5.一种运动姿态的预测装置,其特征在于,所述装置包括:...

【技术特征摘要】

1.一种运动姿态的预测方法,其特征在于,所述方法包括:

2.根据权利要求1所述的运动姿态的预测方法,其特征在于,所述利用预先构建的多模态特征提取及融合网络对所述待处理运动视频数据进行特征提取和融合,得到多模态特征,包括:

3.根据权利要求1所述的运动姿态的预测方法,其特征在于,得到多模态特征之后,所述方法还包括:

4.根据权利要求3所述的运动姿态的预测方法,其特征在于,所述将所述多模态特征输入至预先构建的运动姿态预测网络,得到所述预先构建的运动姿态预测网络输出的运动预测结果,包括:

5.一种运动姿态的预测装置,其特征在于,所述装置包括:

6.根据权利要求5所述的运动姿态的预测装置,其特征在于,所述...

【专利技术属性】
技术研发人员:邓博文王晓茹曲昭伟刘明时马晨阳余龙龙卞德昕李梅芳
申请(专利权)人:北京邮电大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1