考虑动态显著帧和多粒度信息的视频群组行为识别方法技术

技术编号:41727485 阅读:32 留言:0更新日期:2024-06-19 12:50
本发明专利技术公开了一种考虑动态显著帧和多粒度信息的视频群组行为识别方法,固定间隔分割视频帧序列,构造个体的动态显著帧子集,由所有间隔的动态显著帧子集构成个体的动态显著帧集合;从个体的动态显著帧集合中提取个体的时间特征且作为个体的属性;使用个体作为信息粒度,抽取动态显著帧来更好地表征个体行为随时间的变化且弱化信息冗余,群组行为表征时在个体和群组间增加了子群组,利用子群组中个体具有更好的行为一致性或者意图一致性且子群组具有清晰语义含义的特点,使用个体、子群组和群组三个级别的信息定征群组行为来增强群组行为特征的表示力;在群组行为数据集Social‑CAD上仅使用RGB模态的数据就取得了96.7%的识别准确率,提高了识别性能。

【技术实现步骤摘要】

本专利技术涉及计算机视觉,特别涉及一种考虑动态显著帧和多粒度信息的视频群组行为识别方法


技术介绍

1、视频群组行为识别是计算机视觉领域的重要研究内容之一,旨在分析群组中所有个体所表现出的集合行为,可以应用于体育赛事分析、异常行为检测及预警领域。相比个体,群组包含更多的信息,如个体行为随时间的变化和个体行为间的彼此影响;相比人群,群组是行为相关个体的集合,表现出行为一致性或者意图相关性。

2、在定位视频中群组后可以使用时间和空间特征表征群组行为。一种方式是先定征个体行为随时间的变化且作为时间特征,然后定征个体间的关联且作为空间特征,通过时间和空间特征的连接表征群组行为;另一种方式是逐帧定征个体间的关联且作为空间特征,然后定征群组行为随时间的变化且作为时间特征,通过空间和时间特征的连接表征群组行为。不管采用哪种方式,视频帧的选择都是必须考虑的要素,目前主要采用的方法是按照时间序分割视频,在每个间隔内进行帧的随机抽取,而时间和空间特征提取或者空间和时间特征提取在视频中的所有采样帧上进行。这种采样方式的问题在于所抽取的帧对个体行为特征的表征力较小,识本文档来自技高网...

【技术保护点】

1.一种考虑动态显著帧和多粒度信息的视频群组行为识别方法,其特征在于,包括:

2.根据权利要求1所述的考虑动态显著帧和多粒度信息的视频群组行为识别方法,其特征在于,所述确定连续视频帧中个体、子群组和群组包括:

3.根据权利要求1所述的考虑动态显著帧和多粒度信息的视频群组行为识别方法,其特征在于,所述步骤二包括:

4.根据权利要求1所述的考虑动态显著帧和多粒度信息的视频群组行为识别方法,其特征在于,所述步骤三包括:

5.根据权利要求1所述的考虑动态显著帧和多粒度信息的视频群组行为识别方法,其特征在于,所述步骤四包括:>

6.根据权利...

【技术特征摘要】

1.一种考虑动态显著帧和多粒度信息的视频群组行为识别方法,其特征在于,包括:

2.根据权利要求1所述的考虑动态显著帧和多粒度信息的视频群组行为识别方法,其特征在于,所述确定连续视频帧中个体、子群组和群组包括:

3.根据权利要求1所述的考虑动态显著帧和多粒度信息的视频群组行为识别方法,其特征在于,所述步骤二包括:

4.根据权利要求1所述的考虑动态显著帧和多粒度信息的...

【专利技术属性】
技术研发人员:张刚王明辉
申请(专利权)人:沈阳工业大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1