基于图像的掘进机异常工作及灾害报警系统技术方案

本发明专利技术公开了一种基于图像的掘进机异常工作及灾害报警系统。在煤矿井下掘进巷道顶部中间均匀安装多部摄像机，并在掘进机上安装摄像机，摄像机采集视频信息；视频服务器上传数字视频流，掘进机控制器上传掘进机状态数据和水系统喷雾信息，掘进机监测服务器对视频图像进行处理，监测摄像机视频图像中设定区域，并参考存储服务器存储的相应掘进机状态数据，如满足报警条件则向监控终端输出掘进机异常工作及灾害报警信号，生产管理人员可通过监控终端查看现场实时和历史视频，并做出相应处理；本报警系统充分考虑了煤矿掘进机工作特点，实施简单，自动及时采取相应措施，可第一时间准确地对掘进机异常工作及灾害进行报警。

【技术实现步骤摘要】
基于图像的掘进机异常工作及灾害报警系统
本专利技术涉及一种基于图像的掘进机异常工作及灾害报警系统，该系统涉及图像跟踪和通信等领域。
技术介绍
煤炭是我国重要的基础能源和原料，以煤为主的能源结构在相当长时间内不会改变，随着国民经济的发展，煤炭的需求量越来越大，伴随的煤矿安全事故也在不断增多。煤炭资源安全高效开发利用技术成为了国内外学者研究的热点领域。最有效的解决方案之一是实现煤矿生产装备机械化及自动化，从而实现井下无人或少人开采。随着煤矿安全重要性的提高和煤炭开采技术的发展，井下采煤工作面实现少人或者无人开采是必然趋势，实现井下少人或者无人开采的必要条件是井下采煤装备机械化、自动化和对其的实时监控。掘进机是综采工作面最重要的设备之一，其正常运行是整个综采工作面完成采掘作业的基础，故对掘进机工作状态的监测是煤矿井下综采工作面的一项重要任务。目前掘进机监控功能多由传感器实现完成。现有传感器模式绝大部分采用有线连接，在实际应用中由于空间有限、工况恶劣，在工程布置及维护中会投入较多精力，且往往会因为机械运动产生连接线路的损坏，影响传感器的精度。在机器开始工作中，会产生大量的电磁干扰，影响通信信号的传播。同时，在实际掘进情况下，伴随着大量的煤块坠落，安装在掘进机上的传感器不可避免的会受到碰撞，虽然有相应的防护措施，但长时间的碰撞仍然会影响传感器的精度。为避免碰撞、机械振动带来的影响，需要新的煤矿井下掘进机异常工作监测报警系统，可第一时间准确地对掘进机异常工作进行报警，为井下掘进机安全作业提供一份保障。因此本专利技术提出一种基于掘进机监测服务器的掘进机异常工作及灾害报警系统，根据掘进机的不同异常工作状态，该系统可发出不同报警信号，包括：偏离工作轨道报警信号；切割受阻报警信号。根据掘进机跟踪丢失后监测画面灰度值处理结果，该系统可发出不同报警信号，包括：突发水灾报警信号；瓦斯泄露报警信号。
技术实现思路
本专利技术提出一种基于图像的掘进机异常工作及灾害报警系统，所述系统主要包括：摄像机、视频服务器、掘进机控制器、分站、矿用以太网、存储服务器、掘进机监测服务器、监控终端；其中摄像机、视频服务器、分站和掘进机控制器在井下安装，存储服务器、掘进机监测服务器和监控终端安装于井上；摄像机分别安装于煤矿井下掘进巷道顶部中间和掘进机上，摄像机采集掘进工作面现场视频模拟图像；掘进机监测服务器将安装于巷道顶部的多部摄像机采集的图像拼接为一幅图像，跟踪监测掘进机工作状态；掘进机监测服务器接收安装于掘进机上的摄像机采集的视频，跟踪监测切割头的工作状态；该系统根据掘进机跟踪监测结果进行判断，若判断掘进机异常工作，则发出报警信号；该系统根据掘进机跟踪丢失后监测画面灰度值处理结果进行突发灾害判断，若判断有突发灾害，则发出报警信号；报警信号通过矿用以太网传输至井上监控终端；监控终端负责显示报警信息，通过访问视频服务器获得现场视频，通过访问存储服务器获得历史现场视频。具体方法包括：1.在煤矿井下掘进巷道顶部中间均匀安装多部摄像机，在掘进机上安装摄像机；在摄像机旁安装辅助光源，光投射方向与摄像机视频采集方向一致。2.掘进机控制器采集掘进机设置数据和水系统喷雾数据，分站接收掘进机控制器上传的数据，通过矿用以太网上传至掘进机服务器、存储服务器和监控终端。3.掘进机监测服务器位于井上，将接收到的数字视频数据和掘进机设置数据输出到核心处理器，处理器将采集的图像拼接为一幅图像，并存储在存储模块中。4.分别对摄像机监控范围内的掘进机一运部位置A进行设定，设为IA；对摄像机监控范围内的掘进机本体部B进行设定，设为IB；对摄像机监控范围内的掘进机切割头O进行设定，设为IO；k帧时，分别在IA、IB、IO周围采集两个样本集Dα＝{z|||IN-Iz||<α}和Dδ,β＝{z|δ<||IN-Iz||<β}，其中，α<δ<β，Iz表示样本位置，IN表示在IA、IB、IO周围采集的样本位置；令Dα为正样本(滚筒图像)，Dδ，β为负样本(背景图像)，根据下列公式计算随机测量矩阵：rij表示随机测量矩阵的元素、s取2或者3，均表示概率；然后对样本图像进行多尺度变换，计算类Harr特征，通过上述测量矩阵对多尺度图像特征进行降维，计算降维后的正负样本特征的期望和标准差，并用其来训练朴素贝叶斯分类器；k+1帧的时候，分别对图像设定区域A、B、O内上一帧跟踪到的目标位置的周围采样n个扫描窗口，通过同样的稀疏测量矩阵对采样的窗口降维，提取特征，然后用k帧训练好的朴素贝叶斯分类器进行分类，令分类分数最大的窗口记作目标窗口，并分别更新IA、IB、IO。5.掘进机监测服务器跟踪监测掘进机一运部位置IA，跟踪监测掘进机本体部位置IB，建立数学模型，每间隔时间T0，计算掘进机偏离工作轨道距离d，该系统根据掘进机偏离工作轨道距离d监测结果进行判断，若判断掘进机工作轨道偏离，则发出偏离工作轨道报警信号；T0通过测量设定或人为设定。6.掘进机监测服务器接收安装于掘进机上的摄像机采集的视频，跟踪监测切割头的位置IO，该系统根据监测切割头位置进行切割受阻判读，若判断切割受阻，则发出切割受阻报警信号。7.掘进机切割头跟踪丢失后，对随后的图像进行灰度值提取与计算，根据计算结果，判断是否发生水灾、瓦斯泄露，根据判断结果，该系统可发出不同类型的报警信号。8.报警信号包括：偏离工作轨道报警信号；切割受阻报警信号；突发水灾报警信号；瓦斯泄露报警信号。附图说明图1基于图像的掘进机异常工作及灾害报警系统示意图。图2掘进机异常工作及灾害报警系统的工作流程示意图。图3掘进机监测服务器监测流程示意图。具体实施方式如图1所示，基于掘进机监测服务器的掘进机异常工作报警系统组成主要包括：1.摄像机(101)，采用符合煤矿隔爆要求的矿用摄像机，带有辅助光源，安装在煤矿井下掘进巷道顶部中间和掘进机上，通过同轴电缆与视频服务器(104)连接。2.掘进机控制器(102)，负责采集掘进机设置数据，数据通过工业以太网传输至存储服务器，采用可编程控制器(PLC)，可编程控制器具有通信接口或通信模块。在本实施方案中使用西门子SIMATICS7-300。3.分站(103)，也称数据采集站，负责接收掘进机控制器(102)上传的掘进机设置数据，并将数据上传至存储服务器、掘进机监测服务器和监控终端。分站与掘进机控制器(102)采用RS-485标准通过双绞线通信；分站通过双绞线或光缆与最近的井下交换机连接，采用TCP方式与井上的存储服务器通信，具有隔爆外壳，符合煤矿井下隔爆要求。4.视频服务器(104)，也称视频编码器，接收由摄像机(101)输出的模拟视频信号，将其数字化并压缩编码，通过矿用以太网向井上存储服务器、掘进机监测服务器和监控终端传输视频数据。在本实施方案中选用海康DS-6701HW单路网络视频服务器，设置为组播方式。5.井下交换机(105)，是矿用以太网的井下接入设备，串接形成环网，负责视频服务器和其它通过网络通信设备的接入和数据交换，设备接入端一般为RJ45接口，环网接续端为光接口，具有隔爆外壳，符合煤矿井下隔爆要求。6.网络交换机(106)，是矿用以太网的核心管理设备，负责所有接入网络的设备的管理和数据交换。7.存储服本文档来自技高网...

【技术保护点】
本专利技术提出一种基于图像的掘进机异常工作及灾害报警系统，所述系统主要包括：摄像机、视频服务器、掘进机控制器、分站、矿用以太网、存储服务器、掘进机监测服务器、监控终端；其中摄像机、视频服务器、分站和掘进机控制器在井下安装，存储服务器、掘进机监测服务器和监控终端安装于井上；摄像机分别安装于煤矿井下掘进巷道顶部中间和掘进机上，摄像机采集掘进工作面现场视频模拟图像；掘进机监测服务器将安装于巷道顶部的多部摄像机采集的图像拼接为一幅图像，跟踪监测掘进机工作状态；掘进机监测服务器接收安装于掘进机上的摄像机采集的视频，跟踪监测切割头的工作状态；该系统根据掘进机跟踪监测结果进行判断，若判断掘进机异常工作，则发出报警信号；该系统根据掘进机跟踪丢失后监测画面灰度值处理结果进行突发灾害判断，若判断有突发灾害，则发出报警信号；报警信号通过矿用以太网传输至井上监控终端；监控终端负责显示报警信息，通过访问视频服务器获得现场视频，通过访问存储服务器获得历史现场视频。

【技术特征摘要】
1.本发明提出一种基于图像的掘进机异常工作及灾害报警系统，所述系统主要包括：摄像机、视频服务器、掘进机控制器、分站、矿用以太网、存储服务器、掘进机监测服务器、监控终端；其中摄像机、视频服务器、分站和掘进机控制器在井下安装，存储服务器、掘进机监测服务器和监控终端安装于井上；摄像机分别安装于煤矿井下掘进巷道顶部中间和掘进机上，摄像机采集掘进工作面现场视频模拟图像；掘进机监测服务器将安装于巷道顶部的多部摄像机采集的图像拼接为一幅图像，跟踪监测掘进机工作状态；掘进机监测服务器接收安装于掘进机上的摄像机采集的视频，跟踪监测切割头的工作状态；该系统根据掘进机跟踪监测结果进行判断，若判断掘进机异常工作，则发出报警信号；该系统根据掘进机跟踪丢失后监测画面灰度值处理结果进行突发灾害判断，若判断有突发灾害，则发出报警信号；报警信号通过矿用以太网传输至井上监控终端；监控终端负责显示报警信息，通过访问视频服务器获得现场视频，通过访问存储服务器获得历史现场视频。2.如权利要求1所述的报警系统，其特征在于：在煤矿井下掘进巷道顶部中间均匀安装多部摄像机，在掘进机上安装摄像机；在摄像机旁安装辅助光源，光投射方向与摄像机视频采集方向一致。3.如权利要求1所述的报警系统，其特征在于：掘进机控制器采集掘进机设置数据和水系统喷雾数据，分站接收掘进机控制器上传的数据，通过矿用以太网上传至掘进机服务器、存储服务器和监控终端。4.如权利要求1所述的报警系统，其特征在于：掘进机监测服务器位于井上，将接收到的数字视频数据和掘进机设置数据输出到核心处理器，处理器将采集的图像拼接为一幅图像，并存储在存储模块中。5.如权利要求1所述的报警系统，其特征在于：分别对摄像机监控范围内的掘进机一运部位置A进行设定，设为IA；对摄像机监控范围内的掘进机本体部B进行设定，设为IB；对摄像机监控范围内的掘进机切割头O进行设定，设为IO；k帧时，分别在IA、IB、I...

【专利技术属性】
技术研发人员：孙继平，邵子佩，刘毅，
申请(专利权)人：中国矿业大学北京，
类型：发明
国别省市：北京,11