一种针对RGB视频中人体空间位置估计方法及其步速导出应用技术

技术编号:42004802 阅读:20 留言:0更新日期:2024-07-12 12:26
本发明专利技术公开的一种针对RGB视频中人体空间位置估计方法及其步速导出应用,属于计算机视觉领域与速度测量技术领域,具体为:先构建由多个RGB视频组成的训练集,并获取拍摄RGB视频的摄像机相机内参;基于2D人体姿态估计网络和相对3D人体姿态估计网络,计算各RGB视频的人体空间位置矩阵;构建并训练空间位置估计网络;对待估计RGB视频处理得到其N×5的人体空间位置矩阵,输入至训练后空间位置估计网络,输出待估计RGB视频中的人体空间位置;本发明专利技术还基于人体空间位置估计,计算人体步速。本发明专利技术具有较高的估计准确性,误差极低,效果稳定。

【技术实现步骤摘要】

本专利技术属于计算机视觉领域与速度测量领域,具体涉及一种针对rgb视频中人体空间位置估计方法及其步速导出应用。


技术介绍

1、人体空间位置估计是估计视频中每一帧的人体某一固定关节点(例如髋关节点)在空间中的3d位置,是人体姿态估计的一个引申问题。人体姿态估计主要分为2d人体姿态估计与3d人体姿态估计,分别为估计图像或视频中的人体关节点的2d像素坐标位置与相机坐标系下的3d空间位置。而3d人体姿态估计又分为相对3d人体姿态估计与绝对3d人体姿态估计;其中,相对3d人体姿态估计为估计相机坐标系下无深度信息的3d人体姿态,而绝对3d人体姿态估计则会额外估计人体骨盆关节点在相机坐标系下的具体位置。

2、绝对3d人体姿态估计的主要方法有直接估计与最小化重投影误差解算。对于直接估计法,pavllo等人在《3d human pose estimation in video with temporalconvolutions and semi-supervised training》中提出了一种使用2d人体姿态直接回归3d人体姿态的方法,由于没有考虑相机内参变本文档来自技高网...

【技术保护点】

1.一种针对RGB视频中人体空间位置估计方法,其特征在于,包括以下步骤:

2.根据权利要求1所述针对RGB视频中人体空间位置估计方法,其特征在于,N=17,各人体关节点分别为髋关节、右臀关节、右膝关节、右踝关节、左臀关节、左膝关节、左踝关节、胸部脊椎关节点、颈部关节点、鼻子关节点、头部关节点、左肩关节点、左肘关节点、左手关节点、右肩关节点、右肘关节点和右手关节点。

3.根据权利要求1所述针对RGB视频中人体空间位置估计方法,其特征在于,步骤2.3中内参归一化操作的公式为:

4.根据权利要求1所述针对RGB视频中人体空间位置估计方法,其特征在于,步骤3中...

【技术特征摘要】

1.一种针对rgb视频中人体空间位置估计方法,其特征在于,包括以下步骤:

2.根据权利要求1所述针对rgb视频中人体空间位置估计方法,其特征在于,n=17,各人体关节点分别为髋关节、右臀关节、右膝关节、右踝关节、左臀关节、左膝关节、左踝关节、胸部脊椎关节点、颈部关节点、鼻子关节点、头部关节点、左肩关节点、左肘关节点、左手关节点、右肩关节点、右肘关节点和右手关节点。

3.根据权利要求1所述针对rgb视频中人体空间位置估计方法,其特征在于,步骤2.3中内参归一化操作的公式为:

4.根据权利要求1所述针对rgb视频中人体空间位置估计方法,其特征在于,步骤3中训练时输入由各rgb视频对应的人体空间位置矩阵拼接而成的t×5n的输入序列,具体拼接方法为:将n×5的人体空间位置矩阵展开为1×5n的单元序列,再对相邻帧的1×5n的单元序列进行拼接,形成多帧输入...

【专利技术属性】
技术研发人员:曾辽原陈铖刘江赵永胜
申请(专利权)人:电子科技大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1