基于视频分析的人群行为异常检测制造技术

此处提出了通过分析描绘人群的图像来检测人群行为异常的方法和系统，包括：使用至少一个机器学习模型，从描绘人群的场景的一个或多个捕获图像中提取第一特征集，所述至少一个机器学习模型通过训练数据集训练，所述训练数据集包括描绘人群正常行为的多个图像；使用至少一种光流分析算法从描绘所述场景的多个连续图像中提取第二特征集，所述至少一种光流分析算法用于估计所述人群中至少部分人的运动模式；通过将所述第一特征集与所述第二特征集进行拼接，创建拼接特征集；以及检测所述人群中一人或多人的行为中的至少一个异常，所述至少一个异常由应用于所述拼接特征集的一种或多种分类算法检测到的相应的离群值所识别。多种分类算法检测到的相应的离群值所识别。多种分类算法检测到的相应的离群值所识别。

【技术实现步骤摘要】
【国外来华专利技术】基于视频分析的人群行为异常检测


[0001]本专利技术在其部分实施例中涉及基于对描绘人群的图像的分析来检测人群行为中的异常，更具体地但不限于，涉及基于对使用两个独立图像分析模型从描绘人群的图像中提取出的特征的分析来检测人群行为中的异常。

技术介绍

[0002]随着世界各地部署海量摄像头，日益迅增的摄像头被部署来监控公共区域，尤其是人群可能会聚集的区域和位置，这使得摄像头的拍摄素材非常广泛且便于访问。
[0003]因此自然需要监控这些摄像头捕获的图像，以便识别人群的异常行为和/或人群中的一人或多人的异常行为，例如暴力、蓄意破坏、恐慌性踩踏和/或汽车事故等，并相应地采取一个或多个行动。
[0004]尽管许多监控系统是由亲自观看屏幕上显示的人群图像的操作人员人工操作，但是通过分析描绘人群的图像来自动识别和/或推断人群行为的自动化方法和系统的研究、开发和部署仍在不断演变。此类方法和系统可以采用计算机视觉、图像处理和其他基于计算的方法、算法、技术和/或实现方式来分析图像。

技术实现思路

[0005]本专利技术实施例的目的在本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种通过分析描绘人群的图像来检测人群行为异常的系统，其特征在于，包括：用于执行代码的至少一个处理器，用于：使用至少一个机器学习模型，从描绘人群的场景的至少一个捕获图像中提取第一特征集，所述至少一个机器学习模型通过训练数据集训练，所述训练数据集包括描绘人群正常行为的多个图像；使用至少一种光流分析算法从描绘所述场景的多个连续图像中提取第二特征集，所述至少一种光流分析算法用于估计所述人群中至少部分人的运动模式；通过将所述第一特征集与所述第二特征集进行拼接，创建拼接特征集；检测所述人群中至少一人的行为中的至少一个异常，所述至少一个异常由应用于所述拼接特征集的至少一种分类算法检测到的相应的离群值所识别；以及输出所述至少一个异常的指示。2.根据权利要求1所述的系统，其特征在于，在使用所述训练数据集训练所述至少一个机器学习模型之前，通过使用至少一种聚类算法去除在所述至少一个图像中识别的至少一个离群值来调整所述训练数据集。3.根据权利要求1所述的系统，其特征在于，还包括：通过使用额外的人群数据集训练所述至少一个机器学习模型来提高所述至少一个机器学习模型的性能，所述额外的人群数据集包括大规模人群视频数据集，所述大规模人群视频数据集用于解释被命名为“谁在哪里做什么”(Who do What at some Where，简称WWW)的拥挤场景。4.根据前述权利要求任一项所述的系统，其特征在于，所述至少一个机器学习模型由残差卷积神经网络使用。5.根据前述权利要求任一项所述的系统，其特征在于，所述至少一个处理器用于通过将从所述至少一个训练后的机器学习模型的全局平均池化层提取的特征堆叠在一起来创建所述第一特征集。6.根据前述权利要求任一项所述的系统，其特征在于，对于所述至少一个图像，所述全局平均池化层的尺寸为2048。7.根据前述权利要求任一项所述的系统，其特征在于，所述...

【专利技术属性】
技术研发人员：米兰，
申请(专利权)人：华为技术有限公司，
类型：发明
国别省市：