跨模态关系感知的暴力行为检测方法及系统技术方案

本发明专利技术涉及监控视频异常检测领域，具体涉及一种跨模态关系感知的暴力行为检测方法及系统，方法包括：S1，从对应的视频片段和音频片段中提取视觉特征和音频特征S2，融合所述视觉特征和所述音频特征生成时空间注意的视觉特征向量S3，对所述时空间注意的视觉特征向量和所述音频特征进行跨模态关系增强，得到关系增强视觉特征和关系增强音频特征S4，交互所述关系增强视觉特征和所述关系增强音频特征并进行暴力行为预测，获得暴力预测分数y<supgt;S</supgt;。本发明专利技术可以同时处理视频和音频数据，并通过结合它们的视觉和音频信息来捕捉时序相关性，更全面地理解和识别视频中的暴力事件，提高暴力检测的准确性和鲁棒性。

【技术实现步骤摘要】

本专利技术涉及监控视频异常检测领域，具体涉及一种跨模态关系感知的暴力行为检测方法及系统。

技术介绍

1、随着社会不断发展和人们对公共安全的日益关注，预防和打击暴力行为的需求变得越来越迫切。辱骂、打架、斗殴和枪击等暴力行为不仅会对个人身心健康产生负面影响，而且对整个社会的公共安全构成了严重威胁。因此，对公共场所的监控侦测和防止这些犯罪行为变得越来越重要。

2、然而，现有的监控系统主要依赖人工检查，导致监测效率低下和误报率高，同时报警设备的功能也受限，长时间监控大量视频内容很容易使安保人员工作效率降低，这影响了监控的有效性。因此，应该开发高效、准确的自动暴力检测方法及系统，能够自动识别和报警针对暴力行为的事件。

技术实现思路

1、本专利技术要解决的技术问题是克服现有技术的缺陷，提供一种跨模态关系感知的暴力行为检测方法，它可以同时处理视频和音频数据，并通过结合它们的视觉和音频信息来捕捉时序相关性，更全面地理解和识别视频中的暴力事件，提高暴力检测的准确性和鲁棒性。

2、为了解决上述技术问题，本本文档来自技高网...

【技术保护点】

1.一种跨模态关系感知的暴力行为检测方法，其特征在于，

2.根据权利要求1所述的跨模态关系感知的暴力行为检测方法，其特征在于，

3.根据权利要求1所述的跨模态关系感知的暴力行为检测方法，其特征在于，

4.根据权利要求1所述的跨模态关系感知的暴力行为检测方法，其特征在于，

5.根据权利要求1所述的跨模态关系感知的暴力行为检测方法，其特征在于，

6.根据权利要求1所述的跨模态关系感知的暴力行为检测方法，其特征在于，

7.一种跨模态关系感知的暴力行为检测系统，其特征在于，

【技术特征摘要】

1.一种跨模态关系感知的暴力行为检测方法，其特征在于，

2.根据权利要求1所述的跨模态关系感知的暴力行为检测方法，其特征在于，

3.根据权利要求1所述的跨模态关系感知的暴力行为检测方法，其特征在于，

4.根据权利要求1所述的跨模态关系感...

【专利技术属性】
技术研发人员：李志新，朱子蒙，
申请(专利权)人：常州大学，
类型：发明
国别省市：