行为事件识别方法、装置、设备及计算机存储介质制造方法及图纸

本申请公开了一种行为事件识别方法、装置、设备及计算机存储介质，该方法包括：获取多个拍摄设备在同一时刻从不同角度拍摄同一会议场景的多个视频数据；分别对每个视频数据中目标时段的视频片段进行对象识别，得到位于目标区域中人物对象的落席席位的席位坐标；基于初始落席席位和目标落席席位的席位坐标，确定人物对象的席位变化信息；对视频片段中的人物对象进行跟踪，得到人物对象的运动轨迹信息；融合运动轨迹信息和席位变化信息，确定人物对象的行为事件。根据本申请实施例，能够更为全面的反映人物对象的视觉特征，将运动轨迹信息和席位变化信息进行融合，在解决信息融合的同时，提高了行为事件识别的准确性。提高了行为事件识别的准确性。提高了行为事件识别的准确性。

【技术实现步骤摘要】
行为事件识别方法、装置、设备及计算机存储介质


[0001]本申请属于图像识别
，尤其涉及一种行为事件识别方法、装置、设备及计算机存储介质。

技术介绍

[0002]目前，传统的目标检测和行为分析方法大多是基于单目摄像场景而言，主要针对的是目标对象在所在场景下的基本行为，通常不涉及意图行为识别和行为类别分析，而在目标对象较多且行为较为复杂的场景下，可以利用双目摄像头获取目标对象的正面、侧面或背面等不同维度的视觉特征，从而识别目标对象的行为类别。
[0003]但由于不同位置摄像头拍摄角度和拍摄距离的限制，导致目标对象的视觉特征不够清晰，从而影响了对目标对象的识别检测和行为分析的准确性，进而为识别目标对象的行为事件增加了难度。因此，如何更为准确的识别目标对象的行为事件也是本领域人员面临的挑战之一。

技术实现思路

[0004]本申请实施例提供了一种行为事件识别方法、装置、设备及计算机存储介质，能够更为全面的反映人物对象的视觉特征，将运动轨迹信息和席位变化信息进行融合，避免了由于视频存在遮挡或图像叠加所造成的识别影响，在解决信本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种行为事件识别方法，其特征在于，包括：获取多个拍摄设备在同一时刻从不同角度拍摄同一会议场景的多个视频数据；分别对每个所述视频数据中目标时段的视频片段进行对象识别，得到位于目标区域中人物对象的落席席位的席位坐标，所述落席席位包括初始落席席位和目标落席席位；基于所述初始落席席位的席位坐标和所述目标落席席位的席位坐标，确定所述人物对象的席位变化信息；对所述视频片段中的所述人物对象进行跟踪，得到所述人物对象的运动轨迹信息；融合所述运动轨迹信息和所述席位变化信息，确定所述人物对象的行为事件。2.根据权利要求1所述的方法，其特征在于，所述视频片段包括多个视频帧，所述分别对每个所述视频数据中目标时段的视频片段进行对象识别，得到位于目标区域中人物对象的落席席位的席位坐标，包括：利用目标检测模型对所述视频帧中的所述目标区域的图像进行识别，确定所述目标区域中所述人物对象的落席席位的席位坐标以及所述人物对象与落席席位重叠位置的坐标；基于所述人物对象的落席席位的席位坐标以及所述人物对象与落席席位重叠位置的坐标，确定所述人物对象与落席席位的重叠面积；基于所述人物对象与落席席位的重叠面积，确定所述人物对象的落席席位。3.根据权利要求2所述的方法，其特征在于，若所述落席席位的识别结果不唯一时，所述方法还包括：分别获取所述人物对象与第一席位的第一重叠面积，以及与第二席位的第二重叠面积，所述第一席位和所述第二席位为相邻席位；比较所述第一重叠面积、所述第二重叠面积以及预设重叠面积阈值的大小；在所述第一重叠面积均大于所述第二重叠面积和所述预设重叠面积阈值的情况下，将所述第一席位确定为所述落席席位；在所述第二重叠面积均大于所述第一重叠面积和所述预设重叠面积阈值的情况下，将所述第二席位确定为所述落席席位。4.根据权利要求1所述的方法，其特征在于，所述对所述视频片段中的所述人物对象进行跟踪，得到所述人物对象的运动轨迹信息，包括：在所述会议场景的第二目标时段内，利用目标跟踪模型对所述人物对象进行跟踪，确定所述第二目标时段内不同视频帧中所述人物对象的目标点坐标；基于所述第二目标时段内每个所述视频帧中所述人物对象的目标点坐标，得到所述人物对象的运动轨迹信息。5.根据权利要求4所述的方法...

【专利技术属性】
技术研发人员：李娇，马煜静，景昕，陶涛，黄岩，
申请(专利权)人：中国移动通信集团有限公司，
类型：发明
国别省市：