一种基于深度学习的多人人体姿态估计方法技术

技术编号:37149043 阅读:23 留言:0更新日期:2023-04-06 22:03
本发明专利技术的目的是提供一种基于深度学习的人体姿态估计方法,属于计算机视觉领域,该方法包括:将图像输入特征提取网络获得多人人体关键点热力图;解码关键点热力图获得多人人体所有关键点位置信息;对每个关键点进行聚类操作,将同一人的关键点划为一类;结合每个人的关键点位置信息得到图像中每个人的姿态。本发明专利技术解决了目前人体姿态估计准确率不高的问题,能够精确地检测并分析多人人体姿态。能够精确地检测并分析多人人体姿态。能够精确地检测并分析多人人体姿态。

【技术实现步骤摘要】
一种基于深度学习的多人人体姿态估计方法


[0001]本专利技术主要涉及计算机视觉领域,尤其涉及一种基于深度学习的人体姿态估计方法。

技术介绍

[0002]人体姿态估计的目标是检测出数据中的人体关键节点,例如头部、肩膀及膝盖等,利用关键点信息可以确定人在当前图像数据中的空间位置,由人体关键点组成的人体姿态是人行为特征重要的一种表征。但由于人体具有相当的柔性,因此会有各种姿态和形状,其外观受穿着,姿态,视角等影响非常大,另外还面临着遮挡、光照等因素的影响,除此之外,2D人体关键点和3D人体关键点在视觉上会有明显的差异,身体不同部位都会有视觉上缩短的效果,使得人体姿态估计成为计算机视觉领域中一个极具挑战性的课题。
[0003]人体姿态估计在动作识别、人机交互、运动员辅助训练、增强现实等很多领域都有应用。通过摄像头捕捉一段时间内的人体姿态信息,从而判断人体的动作。可以用于及时检测一些异常行为,例如摔倒、斗殴等行为。同时也可判断动作是否标准以及数量统计用于辅助运动员科学训练。
[0004]随着近年来神经网络与深度学习的发展,人体骨骼关键点本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于深度学习的多人人体姿态估计方法,其特征在于,包括:将图像输入特征提取网络获得多人人体关键点热力图;解码关键点热力图获得多人人体所有关键点位置信息;对每个关键点进行聚类操作,将同一人的关键点划为一类;结合每个人的关键点位置信息得到图像中每个人的姿态。2.根据权利要求1所述的一种基于深度学习的多人人体姿态估计方法,其特征在于,所述将图像输入特征提取网络获得多人人体关键点热力图之前,还包括训练特征提取网络:通过训练尺度因子s,自适应调节高斯核标准差,生成带有尺度化的热力图用于训练过程中的监督信息,其中根据关键点位置信息和尺度因子生成热力图的公式如下:上式中i、j代表热力图中的横纵坐标,p代表第p个人,k代表第k个关键点,分别代表第p个人的第k个关键点的横纵坐标位置,σ0代表初始的高斯核标准差,s为尺度因子;对预测的尺度图增加一个正则化损失,如下式所示:上式中代表只保留高斯核覆盖的区域,总体的损失函数为热力图的L2损失加上尺度图的正则化损失,如下式所示:其中P为真值热力图,H为模型预测的热力图,μ为正则化损失的权重...

【专利技术属性】
技术研发人员:曾碧江春灵刘建圻魏鹏飞
申请(专利权)人:广东工业大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1