一种基于PTZ摄像机巡航的智能视频分析系统及方法技术方案

本发明专利技术提供了一种基于PTZ摄像机巡航的智能视频分析系统及方法，该系统包括前端PTZ摄像机和后端服务器，后端服务器包括：巡航配置模块，用于对系统的巡航组和巡航点进行设定生成巡航列表，PTZ摄像机控制模块，对巡航列表进行分析，自动生成巡航执行列表；视频分析配置模块，用于针对各个巡航点配置相关的智能视频分析算法并配置到巡航列表中；系统控制模块，为每个巡航点进行摄像机参数标定以及调用视频拼接模块，按照巡航点的执行顺序自动生成整个巡航周期的全景拼接图；智能视频分析模块，根据相关的设定进行目标检测和事件分析，并对检测到的事件产生实时告警；告警管理模块，对告警进行相应的本地管理功能。

【技术实现步骤摘要】

本专利技术属于视频监控、视频分析、模式识别领域，尤其是涉及一种基于PTZ摄像机巡航的智能视频分析系统及方法。
技术介绍
视频监控是安全防范系统的重要组成部分，随着视频监控技术的发展，视频摄像机已经被广泛用来对各种环境、区域和场所进行实时监控。由于PTZ摄像机相比于固定摄像机具有可变视角和可变焦距等优势，具有监控场景更大、跟踪目标范围更广，已经得到越来越广泛的应用。PTZ摄像机跟踪技术是一种利用图像处理技术，实现目标发现并控制PTZ摄像机对运动目标在一定场景范围内进行定位，跟踪和抓拍的监控技术。这种技术可以用于路况监控，公共场所安全监控，森林防火等多个领域。但是在目前的监控领域，通常是一台摄像机只负责自己所监视的区域，而每台PTZ摄像机虽然可以移动，但监视范围还是很有限的，在跟踪过程中由于PTZ摄像机的PTZ三个变量的信息需要完全依赖于跟踪算法的反馈，很难准确的对PTZ摄像机进行控制，且目前自动PTZ跟踪算法对小目标和环境适应性较差，目前还无法大规模普及应用。基于静态摄像机的目标检测跟踪算法相对成熟，但是由于单摄像机的视野域有限，较大的监控视场需要多个摄像机才能实现覆盖，在实际的目标跟踪系统中，更多采用多摄像机系统，在预算一定的情况下不可避免的要加大系统的成本或者降低摄像机的品质，且由于摄像机场景固定，为了兼顾摄像机的视场覆盖，智能视频分析算法一般无法获得检测目标的细节特征，如获取跟踪的人的脸部信息和跟踪的车辆的车牌信息。鉴于之前的介绍，我们发现目前常见的系统无论是基PTZ摄像机的自动跟踪系统还是基于固定摄像机的目标检测跟踪系统都存在比较大的问题，无法满足对视频监控系统用尽量少的摄像机，实现更大范围覆盖，进行更精确的智能视频分析效果的需求，如何充分挖掘PTZ摄像机的特性，如何结合PTZ摄像机的特性进行智能视频分析系统的架构成为我们要解决的核心问题。
技术实现思路
为了解决上述问题，本专利技术提供了一种基于PTZ摄像机巡航的智能视频分析系统，该系统包括前端PTZ摄像机和后端服务器，后端服务器包括：巡航配置模块，用于对系统的巡航组和巡航点进行设定生成巡航列表，每个巡航组的巡航点对应PTZ摄像机的一个预置位，为每个巡航组的巡航点配置巡航模式及巡航时间；PTZ摄像机控制模块，对巡航列表进行分析，自动生成巡航执行列表，使PTZ摄像机按照预设的巡航顺序在各个预置位之间进行巡航检测；视频分析配置模块，用于针对各个巡航点配置相关的智能视频分析算法并配置到巡航列表中；系统控制模块，执行相关巡航点的摄像机开启功能，根据配置列表中的各个巡航点的算法配置，来启用相关巡航点的视频分析算法，为每个巡航点进行摄像机参数标定以及调用视频拼接模块，按照巡航点的执行顺序自动生成整个巡航周期的全景拼接图；智能视频分析模块，根据相关的设定进行目标检测和事件分析，并对检测到的事件产生实时告警；告警管理模块，对告警进行相应的本地管理功能。所述摄像机参数标定就是通过给定的参考物反向计算出投影矩阵P的全部或者部分参数，标定后，通过其在摄像头捕获的二维图像中的二维坐标，和获取的投影矩阵P，即可求三维中某个目标的位置信息。所述智能视频分析模块进一步包括：图像预处理模块，采用小波变换的自适应快速图像降噪算法对图像进行滤波降噪，灰度变换操作；目标检测模块，用于进行运动目标检测，目标的特征提取，行人/车辆检测，人脸/车牌检测定位，并根据目标的特征进行目标识别算法；目标跟踪模块，利用双向光流法进行目标跟踪；目标特征提取模块，对上一帧检测到的目标建立基于颜色和HOG特征的联合直方图模版，这种联合直方图结合了颜色特征和HOG的梯度特征；特征检测匹配模块，在当前帧进行搜索匹配，通过巴氏距离进行比较，即在上一帧的目标位置的周围一定半径范围内进行搜索匹配找到最佳的匹配位置即为可能的目标在当前帧的位置；事件检测模块，基于检测的目标位置变化来判断是否发生事件。所述目标检测模块是基于帧差、图像变换、混合高斯概率模型三者结合来检测目标。所述行人/车辆检测采用一种光流场相对运动和Hog+SVM模型训练相结合的方法提取指定类型的目标。所述视频拼接模块进一步被配置用来：进行特征点提取和特征点的匹配，具体为：以像素点的四个主要方向上最小灰度方差表示该像素点与邻近像素点的灰度变化情况，即像素点的兴趣值，然后在图像的局部选择具有最大的兴趣值的点作为特征点，在参考图像的重叠部分中选取4个区域，每个区域利用Moravec算子找出特征点，选取以特征点为中心的固定大小的区域，在搜索图中寻找最相似的匹配，利用匹配的特征区域的中心点，代入以下方程式求解，所求的解即为两幅图像间的变换系数M：x′y′1=Mxy1=m0m1m2m3m4m5m6m71xy1.]]>本专利技术还提供了一种基于PTZ摄像机巡航的智能视频分析方法，其包括：步骤（1）首先进行对系统的巡航组和巡航点进行设定，生成巡航列表，每个巡航组的巡航点对应PTZ摄像机的一个预置位，为每个巡航组的巡航点配置巡航模式及巡航时间；步骤（2）通过预置位调用，把PTZ摄像机移动到相应的巡航点上，系统控制模块针对当前场景为每个巡航点进行摄像机参数标定，并由视频分析配置模块配置相关的智能视频分析算法添加到巡航列表中；步骤（3）启动系统后，PTZ摄像机控制模块通过对巡航列表的分析，自动生成巡航执行列表，使PTZ摄像机按照预设的巡航顺序在各个预置位之间进行巡航检测；步骤（4）系统控制模块调用视频拼接模块，按照巡航点的执行顺序自动生成整个巡航周期的全景拼接图；步骤（5）智能视频分析模块根据相关的设定进行目标检测和事件分析，并对检测到的事件产生实时的告警。所述步骤（2）中摄像机参数标定就是通过给定的参考物反向计算出投影矩阵P的全部或者部分参数，标定后，通过其在摄像头捕获的二维图像中的二维坐标，和获取的投影矩阵P，即可求三维中某个目标的位置信息。所述步骤（5）进一步包括：采用小波变换的自适应快速图像降噪算法对图像进行滤波降噪，灰度变换操作；进行运动目标检测，目标的特征提取，行人/车辆检测，人脸/车牌检测定位，并根据目标的特征进行目标识别算法；利用双向光流法进行目标跟踪；对上一帧检测到的目标建立基于颜色和HOG特征的联合直方图模版，这种联合直方图结合了颜色特征和HOG的梯度特征；在当前帧进行搜索匹配，通过巴氏距离进行比较，即在上一帧的目标位置的周围一本文档来自技高网...

【技术保护点】
一种基于PTZ摄像机巡航的智能视频分析系统，该系统包括前端PTZ摄像机和后端服务器，其特征在于后端服务器包括：巡航配置模块，用于对系统的巡航组和巡航点进行设定生成巡航列表，每个巡航组的巡航点对应PTZ摄像机的一个预置位，为每个巡航组的巡航点配置巡航模式及巡航时间；PTZ摄像机控制模块，对巡航列表进行分析，自动生成巡航执行列表，使PTZ摄像机按照预设的巡航顺序在各个预置位之间进行巡航检测；视频分析配置模块，用于针对各个巡航点配置相关的智能视频分析算法并配置到巡航列表中；系统控制模块，执行相关巡航点的摄像机开启功能，根据配置列表中的各个巡航点的算法配置，来启用相关巡航点的视频分析算法，为每个巡航点进行摄像机参数标定以及调用视频拼接模块，按照巡航点的执行顺序自动生成整个巡航周期的全景拼接图；智能视频分析模块，根据相关的设定进行目标检测和事件分析，并对检测到的事件产生实时告警；告警管理模块，对告警进行相应的本地管理功能。

【技术特征摘要】
1.一种基于PTZ摄像机巡航的智能视频分析系统，该系统包括前端PTZ摄
像机和后端服务器，其特征在于后端服务器包括：
巡航配置模块，用于对系统的巡航组和巡航点进行设定生成巡航列表，每个
巡航组的巡航点对应PTZ摄像机的一个预置位，为每个巡航组的巡航点配置巡
航模式及巡航时间；
PTZ摄像机控制模块，对巡航列表进行分析，自动生成巡航执行列表，使PTZ
摄像机按照预设的巡航顺序在各个预置位之间进行巡航检测；
视频分析配置模块，用于针对各个巡航点配置相关的智能视频分析算法并配
置到巡航列表中；
系统控制模块，执行相关巡航点的摄像机开启功能，根据配置列表中的各个
巡航点的算法配置，来启用相关巡航点的视频分析算法，为每个巡航点进行摄像
机参数标定以及调用视频拼接模块，按照巡航点的执行顺序自动生成整个巡航周
期的全景拼接图；
智能视频分析模块，根据相关的设定进行目标检测和事件分析，并对检测到
的事件产生实时告警；
告警管理模块，对告警进行相应的本地管理功能。
2.根据权利要求1所述的系统，其特征在于：
所述摄像机参数标定就是通过给定的参考物反向计算出投影矩阵P的全部
或者部分参数，标定后，通过其在摄像头捕获的二维图像中的二维坐标，和获取
的投影矩阵P，即可求三维中某个目标的位置信息。
3.根据权利要求1所述的系统，其特征在于所述智能视频分析模块进一步
包括：
图像预处理模块，采用小波变换的自适应快速图像降噪算法对图像进行滤波
降噪，灰度变换操作；
目标检测模块，用于进行运动目标检测，目标的特征提取，行人/车辆检测，
人脸/车牌检测定位，并根据目标的特征进行目标识别算法；
目标跟踪模块，利用双向光流法进行目标跟踪；
目标特征提取模块，对上一帧检测到的目标建立基于颜色和HOG特征的联
合直方图模版，这种联合直方图结合了颜色特征和HOG的梯度特征；
特征检测匹配模块，在当前帧进行搜索匹配，通过巴氏距离进行比较，即在
上一帧的目标位置的周围一定半径范围内进行搜索匹配找到最佳的匹配位置即
为可能的目标在当前帧的位置；
事件检测模块，基于检测的目标位置变化来判断是否发生事件。
4.根据权利要求3所述的系统，其特征在于所述目标检测模块是基于帧差、
图像变换、混合高斯概率模型三者结合来检测目标。
5.根据权利要求3所述的系统，其特征在于：所述行人/车辆检测采用一种
光流场相对运动和Hog+SVM模型训练相结合的方法提取指定类型的目标。
6.根据权利要求1所述的系统，其特征在于：所述视频拼接模块进一步被
配置用来：进行特征点提取和特征点的匹配，具体为：以像素点的四个主要方向
上最小灰度方差表示该像素点与邻近像素点的灰度变化情况，即像素点的兴趣值，
然后在图像的局部选择具有最大的兴趣值的点作为特征点，在参考图像的重叠部
分中选取4个区域，每个区域利用Moravec算子找出特征点，选取以特征点为中
心的固定大小的区域，在搜索图中寻找最相似的匹配，利用匹配的特征区域的中
心点，代入以下方程式求解，所求的解即为两幅图像间...

【专利技术属性】
技术研发人员：张永亮，王巍，顾威威，肖道宽，卢彦全，
申请(专利权)人：北京博思廷科技有限公司，
类型：发明
国别省市：北京;11