一种高精度的多视角动作捕捉方法及系统技术方案

本发明专利技术公开了一种高精度的多视角动作捕捉方法及系统，涉及计算机视觉技术领域，本发明专利技术通过多视角数据同步采集；基于每个视角中人体二维姿态，进行初步多人三维关键点重建，其包括，多视角多人循环一致性多路匹配，人体结构约束，时空约束多目标匹配追踪优化，带置信度权重的三角测量重建；将初步三维关键点投影至各个视角下，与原始二维姿态序列归一化对齐，进行多视角视频精确化时序同步重建；根据精细化同步重建后的三维人体姿态点位，用LSTM网络预测出更符合人体运动的解剖学关键点位，应用本发明专利技术可以实现多目标三维人体关键点追踪，提高了多人多视角三维人体姿态估计的准确性和鲁棒性。

【技术实现步骤摘要】

本专利技术涉及计算机视觉，具体为一种高精度的多视角动作捕捉方法及系统。

技术介绍

1、近年来，随着深度学习的飞速发展，人体二维姿态估计已经有了精度高且有用的工作，例如hrnet,openpose等一系列开源项目实时检测人体2d关键点坐标，但是直接使用单视角的姿态检测应用于一些现实任务中依然存在许多问题，例如人体遮挡，运动物理量测量等，继而基于视觉的多视角无标记人体运动捕捉，能够从不同视角检测同一目标的姿态进行三维重建能够更好地捕捉人体运动姿态，然而，通用场景下的多人多视角动作捕捉，面临着一系列挑战，例如使用通用相机，非定制化硬件同步采集相机，采集的多视角视频的高精度同步；多视角下多目标的快速准确匹配和追踪；更符合人体解剖学的关键点位来构建人体运动的姿态等。

2、综上所述，通用应用场景下，亟需一种简单、稳定高精度的多视角动作捕捉方法及系统。

技术实现思路

1、针对以上问题，本专利技术的目的是提供一种高精度的多视角动捕方法及系统，用以实现多目标三维人体关键点追踪，提高了多人多视角三维人体姿态估计的准确本文档来自技高网...

【技术保护点】

1.一种高精度的多视角动作捕捉方法，其特征在于，包括：

2.根据权利要求1所述的一种高精度的多视角动作捕捉方法，其特征在于，步骤2）的粗糙3D关键点重建步骤包括：

3.根据权利要求2所述的一种高精度的多视角动作捕捉方法，其特征在于，多视角2D关键点循环一致性多路匹配方式包括：

4.根据权利要求3所述的一种高精度的多视角动作捕捉方法，其特征在于，步骤2）的粗糙3D关键点重建步骤还包括：

5.根据权利要求4所述的一种高精度的多视角动作捕捉方法，其特征在于，步骤2-4）进行时空约束步骤中：

6.根据权利要求5所述的一种高精度的多视角动...

【技术特征摘要】

1.一种高精度的多视角动作捕捉方法，其特征在于，包括：

2.根据权利要求1所述的一种高精度的多视角动作捕捉方法，其特征在于，步骤2）的粗糙3d关键点重建步骤包括：

3.根据权利要求2所述的一种高精度的多视角动作捕捉方法，其特征在于，多视角2d关键点循环一致性多路匹配方式包括：

4.根据权利要求3所述的一种高精度的多视角动作捕捉方法，其特征在于，步骤2）的粗糙3d关键点重建步骤还包括：

5.根据权利要求4所述的一种高精度的多视角动作捕捉方法，其特征在于，步骤2...

【专利技术属性】
技术研发人员：易典，付思超，张敏，董博雅，何麒，周东，甘一夫，冯建明，
申请(专利权)人：凝动万生医疗科技武汉有限公司，
类型：发明
国别省市：