视频流分析训练的人体骨骼关键点推理方法及装置制造方法及图纸

技术编号:40969195 阅读:21 留言:0更新日期:2024-04-18 20:50
本发明专利技术涉及神经网络领域,揭露一种视频流分析训练的人体骨骼关键点推理方法及装置,方法包括:从视频流中提取单帧图像,将单帧图像表征为图像向量,识别单帧图像中的第一骨骼关键点,对第一骨骼关键点进行关键点解码;判别骨骼线路是否为人体骨骼线路;计算第一骨骼关键点损失,利用第一骨骼关键点损失完成预设的骨骼关键点识别模型的骨骼关键点的识别能力训练;对单帧图像进行网格划分;对划分网格进行网格旋转平移,从相邻单帧图像中查询旋转平移网格的的相似网格;确定相似网格中的第三骨骼关键点,计算第二骨骼关键点损失,利用第二骨骼关键点损失完成视频流中骨骼关键点的运动追踪能力的训练。本发明专利技术可以降低骨骼关键点推理任务的复杂度。

【技术实现步骤摘要】

本专利技术涉及神经网络领域,尤其涉及一种视频流分析训练的人体骨骼关键点推理方法及装置


技术介绍

1、基于视频流分析训练的人体骨骼关键点推理是指在视频流中识别人体骨骼关键点和追踪骨骼关键点在视频流中的运动的过程。

2、目前,骨骼关键点的推理训练是直接在视频流中进行的,这样会使得训练的任务量庞大,且精确度不足,这是因为关键点的识别分为单帧视频图像中的识别和关键点在视频流中的追踪,若仅在追踪结束时进行损失值的计算,则损失值的计算结果往往会偏大,这是单帧视频图像中关键点的识别不准确会使得骨骼关键点在连续帧中的追踪不准确导致的,其次,损失值的计算结果偏大也会使得需要同时对关键点的识别环节的参数和骨骼关键点在连续帧中的追踪环节的参数进行调整,这样会使得训练的任务量庞大。因此,基于视频流分析训练的人体骨骼关键点推理的任务量处理较为复杂。


技术实现思路

1、为了解决上述问题,本专利技术提供了一种视频流分析训练的人体骨骼关键点推理方法及装置,可以降低基于视频流分析训练的人体骨骼关键点推理的任务量处理复杂度。...

【技术保护点】

1.一种视频流分析训练的人体骨骼关键点推理方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述编码层包括:

3.根据权利要求1所述的方法,其特征在于,所述隐藏层包括:

4.根据权利要求1所述的方法,其特征在于,所述判别所述骨骼线路是否为人体骨骼线路,包括:

5.根据权利要求1所述的方法,其特征在于,所述计算所述解码关键点与预设的真实骨骼关键点之间的第一骨骼关键点损失,包括:

6.根据权利要求1所述的方法,其特征在于,所述基于所述第二骨骼关键点在所述单帧图像中的关键点分布,对所述单帧图像进行网格划分,得...

【技术特征摘要】

1.一种视频流分析训练的人体骨骼关键点推理方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述编码层包括:

3.根据权利要求1所述的方法,其特征在于,所述隐藏层包括:

4.根据权利要求1所述的方法,其特征在于,所述判别所述骨骼线路是否为人体骨骼线路,包括:

5.根据权利要求1所述的方法,其特征在于,所述计算所述解码关键点与预设的真实骨骼关键点之间的第一骨骼关键点损失,包括:

6.根据权利要求1所述的方法,其特征在于,所述基于所述第二骨骼关键点在所述单帧图像中的关键点分布...

【专利技术属性】
技术研发人员:李强周海东杨鹏菲
申请(专利权)人:深圳力强数智科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1