一种基于计算机视觉检测的电梯乘客危险行为智能识别预警系统技术方案

本发明专利技术提供一种基于计算机视觉检测的电梯乘客危险行为智能识别预警系统，包括电梯门开关检测模块、图像采集模块、人体危险行为检测模块、控制模块。本发明专利技术通过检测电梯桥厢固定区域中乘坐人员有无危险行为，然后通过互联网把危险情况发送给控制模块对电梯桥厢内的人员发出语音提醒，使电梯以更高的安全系数服务于用户；可快速判定桥厢内是否有乘客停留在厅门和桥门之间、依靠在电梯门上、用手、脚、棍棒等物品阻碍关门、在桥厢中跳跃等危险行为，从而可以快速的进行语音提醒，避免发生意外。

【技术实现步骤摘要】
一种基于计算机视觉检测的电梯乘客危险行为智能识别预警系统
本专利技术涉及视频监控
，具体涉及一种基于计算机视觉检测的电梯乘客危险行为智能识别预警系统。
技术介绍
电梯给人们的生活带来了便捷，但是也对人们的安全发出了挑战。很多时候，人们在乘坐电梯的时候都会做出危险的行为，很容易出现意外。比如说，有很多乘客喜欢依靠在电梯门上，停留在厅门和桥门之间，在电梯桥厢内跳跃，用手、脚等阻碍电梯关门等等，这些都是危险行为，都很容易导致意外的发生。为了一个安全的生活环境，在很多小区、宾馆、大厦的电梯桥厢内都安装了视频监控装置。然而目前这些安装在电梯桥厢的视频监控系统和城市中很多地方安装的大部分视频监控系统一样，只是简单的录像；对于乘客在电梯桥厢中做出危险的行为，无法实时做出提醒。传统的视频监控系统有以下缺点：1)功能单一，只是简单的录像，存储，回放等功能，无法对监控场景进行实时的分析与处理；2)需要监控室内的监控人员长时间观看视频图像来对电梯桥厢内进行监控，但人眼具有容易疲劳的缺点，不可能时刻都保持警戒；3)有些大型小区的监控视频有几十甚至上百台摄像机，工作人员根本无法监看和管理；4)在一些人流量较大的商场里面，乘客较多情况下，安保人员很难实时监控和管理；5)大部分事件都是事后反应，没有在发现问题的时候及时提醒；6)目前电梯桥厢内几乎没有危险提醒，很多乘客会忽略自己的一些危险行为，这样很容易出现意外。专利201510771338.1，公开了一种智能识别平台视频监控预警系统，包括前端设备摄像、分发服务中转、视频解码程序、视频分析程序、资源服务器、接收程序处理、数据库和FTP服务器、业务端显示。该视频监控预警系统采用霍夫直线检测，分类器+方向梯度直方图特征识别刀、棍，方向梯度直方图特征+分类器行人的识别的联合系统，确保在稍微复杂的环境中可以较为准确地检测到危险的刀或者棍，进而识别危险行为。上述专利采用事件检测，事件预警，事件查看联动的功能，实现了快捷、方便、高效的预警方式；采用社会力模型，实现了群体行为检测；采用颜色模型，运动模型结合的方式，针对视频监控系统开发的智能分析模块可同时对多种场合进行多样化多规则的智能分析；但是针对计算机视觉检测的电梯乘客危险行为并没有给出相应的技术方案。
技术实现思路
(一)解决的技术问题本专利技术的为了克服上述现有技术的缺陷问题，本专利技术提供一种基于计算机视觉检测的电梯乘客危险行为智能识别预警系统，通过检测电梯桥厢内乘客的行为，智能识别危险行为，智能的控制广播系统发出语音提醒，使电梯以更高的安全性服务用户。(二)技术方案为实现以上目的，本专利技术通过以下技术方案予以实现：一种基于计算机视觉检测的电梯乘客危险行为智能识别预警系统，包括电梯门开关检测模块、图像采集模块、人体危险行为检测模块、控制模块；所述电梯门开关检测模块用于检测电梯门处于什么状态，并将信息传送给图像采集模块；所述图像采集模块用于收集电梯桥厢内部的视频信息，并将视频信息发送给人体危险行为检测模块；所述人体危险行为检测模块针对视频对人体行为检测，获得是否有乘客作出危险行为的信息，将信息发送给控制模块；所述控制模块根据实时获得的危险情况信息，控制电梯桥箱内部的广播系统发出语音提醒。进一步地，所述人体危险行为检测模块包括视频预处理机构和人体行为分类器机构；所述视频预处理机构将图像采集模块获取的原始视频信息处理成固定频率的灰度视频，并利用高斯滤波方法进行去噪处理，生成预处理视频，并将生成的预处理视频发送给人体行为分类器机构；所述人体行为分类器机构对预处理视频依据实际摄像头下监控区域环境进行ROI操作，提取出仅包含需要检测的人体的监控视频区域的视频；针对视频中的每帧图像通过用当前的该视频里的图像减去背景图像以去掉视频中无用的背景信息，再根据分块大小自适应选取阈值对图像进行分块，完成对人体目标的细分割，分离出人体区域和非人体区域；针对分割出来的人体区域进行边缘检测，再将边缘检测结果和背景差分结果进行“与”运算，从而提取出人体的前景轮廓模型；针对每一张图像提取人体前景轮廓模型，与人体危险行为图像模板库进行模板匹配，确定电梯桥厢中是否有乘客做出危险行为，并将信息通过互联网发送给控制模块。进一步地，所述人体行为分类器机构工作包括以下步骤：S1、前景提取；S1.1、当接收到视频预处理机构发送来的预处理视频后，通过背景差分法，将当前视频IK的前后两帧与背景模型BK先做差分运算得到DK-1(x,y)和DK+1(x,y)，然后再做“或”运算，从而获得人体目标区域图像DK(x,y)；所述背景模型BK是桥厢封闭且空置时桥厢内安装位置固定的摄像头拍摄的图像；其中：式中(x,y)为像素点的坐标，IK(x,y)为当前视频帧，BK(x,y)为背景图像模型，DK-1(x,y)和DK+1(x,y)表示当前帧的相邻两帧与固定的背景模型的二值化图像，DK(x,y)为人体目标区域图像，T表示阈值；S1.2、对人体目标图像DK进行形态学膨胀等方法的处理，得到图像D′K；S1.3、将差分结果图像DK-1(x,y)分成多个子模块，每个子模块大小为m×n,表示为DK(i,j),其中i＝1，2，…int(M/m),j＝1,2…,int(N/n)。通过比较每一块差分子模块的所有像素值总和与阈值T1的大小，判断整个子模块是属于人体目标还是背景，如果像素值总和大于阈值，则判决为背景，否则为人体目标,其中：式中，DK(p,q)表示每一个查分子模块在(p,q)点的像素值，D′(i-j)表示查分图像第i行，第j列个子模块的所有像素值总和，T1为阈值；S1.4、采用Canny算子对图像分块提取的运动目标区域进行边缘检测，获得图像D″k；S2、轮廓提取；将前面获取的图像D′K和D″k进行“与”运算，从而获得最终的前景轮廓图Rk；S3、模板匹配；对提取的前景轮廓采用模板匹配算法与人体危险行为图像模板库进行对比。进一步地，所述步骤S3中的人体危险行为图像模板库是根据实景拍摄图像以所述边缘轮廓的形式对乘客在桥厢中的危险行为的图像进行的建模。进一步地，所述步骤S3模板匹配包括以下步骤：S3.1、根据实景拍摄图像以所述边缘轮廓的形式对乘客在桥厢中的危险行为的前景图像作为关键帧模板，求出人体的最小外接矩形，然后将最小外接矩形均匀划分为10*10个的分块用如下的公式计算每一个分块矩形中前景像素所占该块像素数的比例V，将得到的100个比列值作为该模板的特征向量。这样每个样本的二值图像模板就被量化编码为一个特征向量Vtest＝[v1,….,v100]；S3.2、测试模板的特征向量Vtest和每个标记过的待匹配模板的特征向量Vdata,可以通过如下公式计算Vtest与Vdata之间的相关性，其中:n为特征向量的个数；S3.3、计算测试模板与待匹配模板之间的相似度P：S3.4、根据贝叶斯最大后验概率决策准测选取相似度最大的模板作为所对应的危险行为识别的结果：识别结果＝argmax(P)。进一步地，如果最大相似度argmax(P)<0.5，则判断该乘客没有做出危险动作；如果最大相似度argmax(P)≥0.5，则判断该乘客做出了危险动作。进一步地，所述步骤S3.2中n为100。(三)有益效果本专利技术的有益效果：本文档来自技高网...

【技术保护点】
一种基于计算机视觉检测的电梯乘客危险行为智能识别预警系统，其特征在于：包括电梯门开关检测模块、图像采集模块、人体危险行为检测模块、控制模块；所述电梯门开关检测模块用于检测电梯门处于什么状态，并将信息传送给图像采集模块；所述图像采集模块用于收集电梯桥厢内部的视频信息，并将视频信息发送给人体危险行为检测模块；所述人体危险行为检测模块针对视频对人体行为检测，获得是否有乘客作出危险行为的信息，将信息发送给控制模块；所述控制模块根据实时获得的危险情况信息，控制电梯桥箱内部的广播系统发出语音提醒。

【技术特征摘要】
1.一种基于计算机视觉检测的电梯乘客危险行为智能识别预警系统，其特征在于：包括电梯门开关检测模块、图像采集模块、人体危险行为检测模块、控制模块；所述电梯门开关检测模块用于检测电梯门处于什么状态，并将信息传送给图像采集模块；所述图像采集模块用于收集电梯桥厢内部的视频信息，并将视频信息发送给人体危险行为检测模块；所述人体危险行为检测模块针对视频对人体行为检测，获得是否有乘客作出危险行为的信息，将信息发送给控制模块；所述控制模块根据实时获得的危险情况信息，控制电梯桥箱内部的广播系统发出语音提醒。2.如权利要求1所述的一种基于计算机视觉检测的电梯乘客危险行为智能识别预警系统，其特征在于，所述人体危险行为检测模块包括视频预处理机构和人体行为分类器机构；所述视频预处理机构将图像采集模块获取的原始视频信息处理成固定频率的灰度视频，并利用高斯滤波方法进行去噪处理，生成预处理视频，并将生成的预处理视频发送给人体行为分类器机构；所述人体行为分类器机构对预处理视频依据实际摄像头下监控区域环境进行ROI操作，提取出仅包含需要检测的人体的监控视频区域的视频；针对视频中的每帧图像通过用当前的该视频里的图像减去背景图像以去掉视频中无用的背景信息，再根据分块大小自适应选取阈值对图像进行分块，完成对人体目标的细分割，分离出人体区域和非人体区域；针对分割出来的人体区域进行边缘检测，再将边缘检测结果和背景差分结果进行“与”运算，从而提取出人体的前景轮廓模型；针对每一张图像提取人体前景轮廓模型，与人体危险行为图像模板库进行模板匹配，确定电梯桥厢中是否有乘客做出危险行为，并将信息通过互联网发送给控制模块。3.如权利要求2所述的一种基于计算机视觉检测的电梯乘客危险行为智能识别预警系统，其特征在于，所述人体行为分类器机构工作包括以下步骤：S1、前景提取；S1.1、当接收到视频预处理机构发送来的预处理视频后，通过背景差分法，将当前视频IK的前后两帧与背景模型BK先做差分运算得到DK-1(x,y)和DK+1(x,y)，然后再做“或”运算，从而获得人体目标区域图像DK(x,y)；所述背景模型BK是桥厢封闭且空置时桥厢内安装位置固定的摄像头拍摄的图像；其中：式中(x,y)为像素点的坐标，IK(x,y)为当前视频帧，BK(x,y)为背景图像模型，DK-1(x,y)和DK+1(x,y)表示当前帧的相邻两帧与固定的背景模型的二值化图像，DK(x,y)为人体目标区域图像，T表示阈值；S1.2、对人体目标图像DK进行形态学膨胀等方法的处理，得到图像D′K；S1.3、将差分结果图像DK-1(x,y)分成多个子模块，每个子模块大小为m×n,表示为DK(i,j),其中i＝1，2，…int(M/m),j＝1,2…,int(N/n)，通过比较每一块差分子模块的所有像素值总和与阈值...

【专利技术属性】
技术研发人员：李佳伟，范洪辉，叶飞跃，朱洪锦，
申请(专利权)人：江苏理工学院，
类型：发明
国别省市：江苏,32