一种矿工下井前防护设备佩戴的检测方法技术

本发明专利技术公开了一种矿工下井前防护设备佩戴的检测方法，包括以下步骤：a、实时的从矿井入口监测区域的视频监控设备中采集视频序列。b、提取各监控设备视频中相应的视频帧。c、对采集到的前后两组视频帧计算视频中各防护设备与矿工佩戴位置的相对空间距离信息。d、对视频帧检测防护设备是否齐全，若不齐全则向监控中心发出警报，之后转入b继续实现矿工防护设备佩戴检测。e、若防护设备齐全则根据检测到的防护设备与矿工应佩戴设备的空间距离判断矿工是否规范佩戴防护设备，若佩戴不规范则发出警报，之后转入步骤b继续实现矿工防护设备佩戴检测。本发明专利技术有效解决在2D图像中只检测局部HSV空间的灰度像素判定是否佩戴防护设备的不规范性。

A Detection Method for Miners'Wearing Protective Equipment before Downhole

【技术实现步骤摘要】
一种矿工下井前防护设备佩戴的检测方法
本专利技术涉及矿山生产
，特别是涉及一种矿工下井前防护设备佩戴的检测方法。
技术介绍
在矿山生产中，防护设备是对矿工生命的一种保障，能够有效地减少或防止外来危险对矿工造成的伤害。然而，即使是矿井安全守则的再三强调，仍有部分矿工不遵守规则，在下矿时不佩戴防护设备，增加了作业风险。由于非矿山人员不懂得作业流程与相关规章制度，同样增加安全隐患。但是矿山环境恶劣，场景复杂，主要是通过观察视频监控画面或井口安排人员检查，这样不仅效率低下而且也会因为观察人员疲劳与疏忽造成安全隐患，实现以物联网为核心的矿工下井前防护设备佩戴自动检测的研究引起广大学者的兴趣。随着计算机视觉领域的研究不断发展，越来越多研究人员开始研究基于视频的安全帽佩戴检测方法。中国专利CN107679524通过计算两帧灰度差值找出运动区域，明确运动区域头部区域，在HSV颜色空间下判断是否佩戴安全帽，由于使用颜色特征敏感度较强且受背景干扰较大且过程繁琐计算量较大，容易导致误判现象严重，因此不利于实际应用；现有研究技术主要针对安全帽佩戴检测，矿工在施工区域需要佩戴多种防护设备，所以单纯的安全帽佩戴检测不能满足实际应用。
技术实现思路
为了克服上述现有技术的不足，本专利技术提供了一种矿工下井前防护设备佩戴的检测方法，用于检测矿井出入口人员防护设备(安全帽、矿灯、自救器等)佩戴的情况，通过发出警报的方式协助监控中心检测，防止未佩戴防护设备人员进入矿井施工区域。本专利技术所采用的技术方案是：一种矿工下井前防护设备佩戴的检测方法，包括以下步骤：a、实时的从矿井入口监测区域的视频监控设备中采集视频序列。b、对采集到的视频序列均基于HOG特征检测当前区域是否有行人，若前后两组所有监控设备的视频中均检测到当前视频帧中出现矿工，则提取各监控设备视频中相应的视频帧。c、对采集到的前后两组视频帧分别进行双目视频融合计算深度信息，以计算出视频中各防护设备与矿工应佩戴身体部位的相对空间距离信息。d、对融合后的视频帧使用模板匹配法检测防护设备是否齐全，若不齐全则向监控中心发出警报，之后转入b继续实现矿工防护设备佩戴检测。e、若防护设备齐全则计算检测到的防护设备与矿工应佩戴身体部位的相对空间距离信息，根据检测到的防护设备与矿工应佩戴身体部位的相对空间距离信息判断矿工是否规范佩戴防护设备，若防护设备佩戴不规范则发出警报，之后转入步骤b继续实现矿工防护设备佩戴检测。进一步地，所述步骤a中的视频监控设备为分别安装在矿井入口正前上方和矿井入口正后上方的两组监控设备，并且前后两组监控设备的监控区域存在交叉区域；所述一组监控设备分布两个高清摄像头并且两个高清摄像头在一条水平线上，所述两个高清摄像头的监控区域存在交叉区域。进一步地，所述步骤b中的行人检测基于HOG特征，将提取到的HOG特征向量送入SVM训练分类器检测行人，训练时随机抽取训练数据集的5％样本作为测试集，训练步数与准确率同时达到指定阈值则停止训练。进一步地，所述步骤c中的双目视频融合技术固定摄像头的角度与位置不变，即背景不发生变化，根据摄像头的内外参数计算两个视频帧的相对深度信息，内外参数包括两个摄像头的距离、摄像头的焦距、旋转矩阵和位移等。进一步地，所述步骤c中的双目视频融合技术中寻找两个视频帧中具有相同值的像素点，依次计算两帧的视觉差，当视差越大则前景越近，公式为:Z＝f*T/d,d＝XR-XL；其中Z表示深度信息，记Z深度处有一点P,f表示摄像头焦距，T表示左右摄像头基线，d为视差，XR为点P在右成像上与摄像头的水平距离，XL为点P在左成像上与摄像头的水平距离；采用该技术的前提条件是固定两个摄像头之间的距离来计算变换矩阵，所以角度不发生变化的视频序列使用该算法无法计算出绝对深度信息。进一步地，所述步骤d中计算防护设备与矿工应佩戴身体部位的距离信息，通过计算防护设备与矿工应佩戴身体部位的距离信息是否上下偏差，以及与关键位置的相对空间距离判断是否手持设备以及佩戴是否规范。与现有技术相比，本专利技术的有益效果是：1、能够对矿井入口的矿工防护设备佩戴情况进行实时且准确的检测。2、使用多目视频技术能够提高检测精度，减小背景干扰。3、有效解决在2D图像中只检测局部HSV空间的灰度像素判定是否佩戴防护设备的不规范性，例如将设备放在关键部位附近并未规范佩戴。附图说明图1为本专利技术矿工下井前防护设备佩戴的检测方法的流程图；图2为本专利技术矿井入口监控设备安装位置示意图；图3为本专利技术双目融合技术原理图。其中：1-右图像，2-左图像，M-物体点，M1-物体M在右图像中的像点，M2-物体M在左图像中的像点，O1-右成像点坐标,O2-左成像点坐标,I1-右摄像头坐标，I2-左摄像头坐标。具体实施方式为了加深对本专利技术的理解，下面结合附图和实施例对本专利技术进一步说明，该实施例仅用于解释本专利技术，并不对本专利技术的保护范围构成限定。如图1、图2和图3所示，一种矿工下井前防护设备佩戴的检测方法，包括以下步骤：a：实时的从矿井入口监测区域的视频监控设备中采集视频序列并统一所有视频帧图像大小。b:采集行人识别分类器的训练数据集。识别行人使用的HOG特征提取方法就是将image灰度化，采用Gamma校正法对输入图像进行颜色空间的标准化，其中I(x,y)＝I(x,y)gamma；然后计算每个像素的梯度，将图像划分成许多个cell,统计每个cell的梯度直方图，将每几个cell组成一个block,然后将image内的所有block的HOG特征串联起来，这就是要提取的HOG特征向量；将提取到的所有特征向量送入SVM分类器训练得到识别模型，在前后两组监测设备中同时使用训练后的识别模型检测视频帧中是否出现矿工，若同时检测到当前帧中出现矿工，则提取四个监控设备中相应的视频帧。c：对提取到的前后两组视频帧分别进行多目融合。多目视频融合技术固定摄像头的角度与位置不变，即背景不发生变化，根据摄像头的内外参数计算两个视频帧的相对深度信息，内外参数包括两个摄像头的距离，摄像头的焦距、旋转矩阵和位移等。算法原理类似于人眼观察事物机制，假设远处有一点M，I1表示右摄像头的坐标，I2表示左摄像头的坐标，O1表示右摄像头的成像点坐标，O2表示左摄像头成像点坐标，M1表示物体M在右图像1中的像点，M2表示物体M在左图像2中的像点，其中|I1-I2|是两个摄像头之间的距离。一般来说人体都不是匀速速度，且行走路线通常是曲线，这里需要在同一时刻通过两个距离固定的摄像头获取到的视频帧来计算深度信息，其中|I1-I2|是两个摄像头之间的距离。算法原理类似于人眼观察事物机制，寻找两个视频帧中具有相同值的像素点，依次计算两帧的视觉差，当视差越大则前景越近，公式为:Z＝f*T/d,d＝XR-XL，其中Z表示深度信息，记Z深度处有一点P,f表示摄像头焦距，T表示左右摄像头基线，d为视差，XR为点P在右成像上与摄像头的水平距离，XL为点P在左成像上与摄像头的水平距离，算法的前提条件是固定两个摄像头之间的距离来计算变换矩阵，所以角度不发生变化的视频使用该算法无法计算出绝对深度信息。d：对融合后的视频帧使用模板匹配法检查矿工防护设备佩戴是否齐全，若检测发现视频帧中的安全帽、矿灯、自救器等防护设备本文档来自技高网...

【技术保护点】
1.一种矿工下井前防护设备佩戴的检测方法，其特征在于，包括以下步骤：a、实时的从矿井入口监测区域的视频监控设备中采集视频序列。b、对采集到的视频序列均基于HOG特征检测当前区域是否有行人，若前后两组所有监控设备的视频中均检测到当前视频帧中出现矿工，则提取各监控设备视频中相应的视频帧。c、对采集到的前后两组视频帧分别进行双目视频融合计算深度信息，以计算出视频中各防护设备与矿工应佩戴身体部位的相对空间距离信息。d、对融合后的视频帧使用模板匹配法检测防护设备是否齐全，若不齐全则向监控中心发出警报，之后转入b继续实现矿工防护设备佩戴检测。e、若防护设备齐全则计算检测到的防护设备与矿工应佩戴身体部位的相对空间距离信息，根据检测到的防护设备与矿工应佩戴身体部位的相对空间距离信息判断矿工是否规范佩戴防护设备，若防护设备佩戴不规范则发出警报，之后转入步骤b继续实现矿工防护设备佩戴检测。

【技术特征摘要】
1.一种矿工下井前防护设备佩戴的检测方法，其特征在于，包括以下步骤：a、实时的从矿井入口监测区域的视频监控设备中采集视频序列。b、对采集到的视频序列均基于HOG特征检测当前区域是否有行人，若前后两组所有监控设备的视频中均检测到当前视频帧中出现矿工，则提取各监控设备视频中相应的视频帧。c、对采集到的前后两组视频帧分别进行双目视频融合计算深度信息，以计算出视频中各防护设备与矿工应佩戴身体部位的相对空间距离信息。d、对融合后的视频帧使用模板匹配法检测防护设备是否齐全，若不齐全则向监控中心发出警报，之后转入b继续实现矿工防护设备佩戴检测。e、若防护设备齐全则计算检测到的防护设备与矿工应佩戴身体部位的相对空间距离信息，根据检测到的防护设备与矿工应佩戴身体部位的相对空间距离信息判断矿工是否规范佩戴防护设备，若防护设备佩戴不规范则发出警报，之后转入步骤b继续实现矿工防护设备佩戴检测。2.根据权利要求1所述的矿工下井前防护设备佩戴的检测方法，其特征在于：所述步骤a中的视频监控设备为分别安装在矿井入口正前上方和矿井入口正后上方的两组监控设备，并且前后两组监控设备的监控区域存在交叉区域；所述一组监控设备分布两个高清摄像头并且两个高清摄像头在一条水平线上，所述两个高清摄像头的监控区域存在交叉区域。3.根据权利要求1所述的矿工下井前防护设...

【专利技术属性】
技术研发人员：仝泽友，丁恩杰，侯晓晴，冯仕民，
申请(专利权)人：中国矿业大学，
类型：发明
国别省市：江苏,32