评估动作质量的方法、装置、电子设备及计算机可读介质制造方法及图纸

技术编号:41004501 阅读:28 留言:0更新日期:2024-04-18 21:41
本申请提供了一种评估动作质量的方法、装置、电子设备及计算机可读介质,该申请获取包括待评估对象的动作视频;处理动作视频,生成动作视频的图像模态特征和辅助特征,其中,辅助特征包括光流模态特征和姿态模态特征中的至少一种;聚合图像模态特征和辅助特征,生成聚合动作特征;以及基于聚合动作特征与标准动作特征的相似度比较结果,生成针对待评估对象的动作质量评价信息,其中标准动作特征基于针对待评估对象在动作视频中所呈现的动作的标准动作被确定。这样的方式,能够在使用图像模态特征的基础上,联合其他模态的辅助特征来评估动作质量。由此,通过参考有关动作的更多信息,更细粒地识别图像模态特征之间差异,进而增加评估的准确性和稳定性。

【技术实现步骤摘要】

本申请涉及计算机视觉,尤其涉及一种评估动作质量的方法、装置,电子设备及计算机可读介质。


技术介绍

1、随着计算机技术的发展,基于对视频内容的分析需求,视频动作质量评估(actionquality assessment,简称aqa)技术应运而生。aqa可以对视频中特定动作的执行情况和完成质量进行评估,以辅助用户做出判断、决策。

2、例如,在医学领域aqa可以通过用户的操作视频、康复视频中的动作,来判断操作用户的操作是否符合规范、用户的康复状况等等。例如,在体育领域,aqa可以通过对视频中运动员的动作质量评估,来生成辅助信息,帮助裁判对运动员的动作进行评价、打分。由此,如何提升aqa技术中动作评估的准确性,是值得关注和迫切需求的。


技术实现思路

1、本申请的多个方面提供一种评估动作质量的方法、装置,电子设备及计算机可读存储介质,能够在使用图像模态特征的基础上,联合其他模态的辅助特征来评估动作质量。由此,通过参考有关动作的更多信息,更细粒地识别图像模态特征之间差异,解决了图像模态特征之间差异较小而无法准本文档来自技高网...

【技术保护点】

1.一种评估动作质量的方法,包括:

2.根据权利要求1所述的方法,其中所述光流模态特征包括光流场,生成所述光流模态特征,包括:

3.根据权利要求1所述的方法,其中所述姿态模态特征基于所述待评估对象的骨骼关键点被确定,生成所述姿态模态特征,包括:

4.根据权利要求1所述的方法,其中所述聚合所述图像模态特征和所述辅助特征,生成聚合动作特征,包括:

5.根据权利要求1所述的方法,其中生成所述动作视频的图像模态特征和辅助特征,包括:

6.根据权利要求5所述的方法,其中所述聚合所述图像模态特征和所述辅助特征,生成聚合动作特征,包括:...

【技术特征摘要】

1.一种评估动作质量的方法,包括:

2.根据权利要求1所述的方法,其中所述光流模态特征包括光流场,生成所述光流模态特征,包括:

3.根据权利要求1所述的方法,其中所述姿态模态特征基于所述待评估对象的骨骼关键点被确定,生成所述姿态模态特征,包括:

4.根据权利要求1所述的方法,其中所述聚合所述图像模态特征和所述辅助特征,生成聚合动作特征,包括:

5.根据权利要求1所述的方法,其中生成所述动作视...

【专利技术属性】
技术研发人员:赵俊杰熊伟徐俊高龙文
申请(专利权)人:上海哔哩哔哩科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1