【技术实现步骤摘要】
一种基于关键点检测的多人行为识别系统及工作方法
本专利技术涉及计算机视觉与模式识别
，尤其涉及一种基于关键点检测的多人行为识别系统及工作方法。
技术介绍
本部分的陈述仅仅是提供了与本专利技术相关的
技术介绍
信息，不必然构成在先技术。计算机视觉是研究计算机如何能像人类的视觉系统一样对外界获取信息进行感知的一门学科，即让计算机看懂世界，而基于图像的人体行为识别是计算机视觉领域的一个研究热点。图像检测和识别是计算机视觉中的基本任务，图像识别是让计算机对图像进行一系列处理、分析，然后再识别各种不同情境下目标和对象的一门技术。图像识别技术从早期对文字进行识别、对数字进行识别逐渐发展到对物体进行识别、对场景进行识别、对人脸进行识别和对人的各种行为进行识别等日常生活的方方面面。当一个人说谎时，我们很难通过语言判断他当前的情绪状态，但是一个人的肢体语言却很难说谎，往往会表达出他们最真实的情感信息。通过检测一个人的行为动作，可以推断出他的情绪变化，并且通过不同场景的分析，比如运动场上运动员的当前动作判断出此时他参赛的项目，...
【技术保护点】
1.一种基于关键点检测的多人行为识别系统，其特征在于，包括：/n图像预处理模块，被配置为对采集到的图像进行预处理；/n关键点检测模块，被配置为提取每帧图像的关键点特征；通过关键点预测矩阵，判断图像中包含人体的个数以及每个人包含的骨骼关键点数；/n检测两相邻骨骼关键点是否在同一肢体上，对同一个人任意相邻的两个骨骼关键点间进行连接获取方向向量，依次连接同一肢体上的骨骼关键点，得到骨骼关键点向量矩阵；/n姿态估计模块，被配置为用于根据骨骼关键点向量矩阵进行姿态判断。/n
【技术特征摘要】
1.一种基于关键点检测的多人行为识别系统，其特征在于，包括：
图像预处理模块，被配置为对采集到的图像进行预处理；
关键点检测模块，被配置为提取每帧图像的关键点特征；通过关键点预测矩阵，判断图像中包含人体的个数以及每个人包含的骨骼关键点数；
检测两相邻骨骼关键点是否在同一肢体上，对同一个人任意相邻的两个骨骼关键点间进行连接获取方向向量，依次连接同一肢体上的骨骼关键点，得到骨骼关键点向量矩阵；
姿态估计模块，被配置为用于根据骨骼关键点向量矩阵进行姿态判断。
2.如权利要求1所述的一种基于关键点检测的多人行为识别系统，其特征在于，还包括：
二次特征提取模块，被配置为用于对预处理后的图像进行二次特征提取，得到行为特征矩阵；
行为估计与应用模块，被配置为根据关键点预测矩阵、骨骼关键点向量矩阵以及行为特征矩阵，利用神经网络模型进行预测，得到图像中每个人的行为以及所述行为的识别率。
3.如权利要求1所述的一种基于关键点检测的多人行为识别系统，其特征在于，所述关键点检测模块具体包括：
关键点特征提取单元，被配置为提取每帧图像的关键点特征；
关键点匹配单元，被配置为通过关键点预测矩阵，判断图像中包含人体的个数以及每个人包含的骨骼关键点数；
骨骼关键点向量检测单元，被配置为检测两相邻骨骼关键点是否在同一肢体上，对同一个人任意相邻的两个骨骼关键点间进行连接获取方向向量，依次连接同一肢体上的骨骼关键点，得到骨骼关键点向量矩阵。
4.如权利要求3所述的一种基于关键点检测的多人行为识别系统，其特征在于，所述关键点特征提取单元对每帧图像进行SIFT和SURF关键点的特征提取，得到关键点特征矩阵。
5.如权利要求4所述的一种基于关键点检测的多人行为识别工作方法，其特征在于，包括：
对预处理后的每帧图像进行SIFT和SURF关键点的特征提取；
求取关键点预测矩阵，判断图像中包含人体的个数以及每个人包含的骨骼关键点数；
检测两相邻骨骼关键点是否在同一肢体上，对同一个人任意相邻的两个骨骼关键点间进行连...
【专利技术属性】
技术研发人员：许宏吉，李梦荷，赵文杰，张贝贝，石磊鑫，
申请(专利权)人：山东大学，
类型：发明
国别省市：山东;37
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。