一种基于深度学习与地域特征的秸秆燃烧检测方法技术

本发明专利技术属于环保领域，公开了一种基于深度学习与地域特征的秸秆燃烧检测方法，包括：在观测处采集不同视角的场景的图像，对无烟区进行标定；从拍摄的实时图像序列中获取图像；利用烟雾检测神经网络模型对疑似烟雾图像中的疑似烟雾区域进行识别和定位；对疑似烟雾图像进行视角识别，相对于相同视角的无烟区进行位置重合率计算，进行疑似烟雾候选区的过滤。本发明专利技术的烟雾识别方法先利用模型对图像进行检测，再利用视角识别及相同视角的场景的图像中的无烟区进行过滤，提高了烟雾检测的效率，减小了误报率。

【技术实现步骤摘要】
一种基于深度学习与地域特征的秸秆燃烧检测方法
本专利技术属于环保领域，具体涉及一种基于深度学习与地域特征的秸秆燃烧检测方法。
技术介绍
秸秆的露天焚烧属于低温焚烧，燃烧不完全，其烟气中含有大量的一氧化碳、二氧化碳、氮氧化物、光化学氧化剂和悬浮颗粒物等造成大气污染，且会在一定程度上加重雾霾的发生。计算机视觉技术飞速发展，计算机能够识别的场景越来越多，因此越来越多的场合开始使用基于视频分析的检测技术。近年来，出现了基于视频分析的烟雾检测方法。公开号为CN109389185A的中国专利“使用三维卷积神经网络的视频烟雾识别方法”是通过在FasterR-CNN处理得到疑似烟雾区域结果框及烟雾评分，收集目标帧前后一定数量的图像为连续视频帧，再用三维卷积神经网络对视屏帧进行三维特征提取，将提取到的特征向量与结果框的烟雾评分组成新的输入到SVM分类器中，进行是否为烟雾的分类。这种方法复杂度高，需要较大的运算和存储成本，且在秸秆燃烧的检测领域并不一定适用。申请号为CN109490930A的中国专利“一种秸秆燃烧定位系统及方法”采用监控中心，定位检测节点，路由检测节点，移动检测节点及移动检测节点和匹配的无人机进行秸秆燃烧的检测。这个方法不能实时的检测秸秆燃烧的情况，同时也需要较大的成本。
技术实现思路
本专利技术的技术问题是现有的采用神经网络的烟雾识别方法复杂度高，计算量大，误报率高，现有的采用无人机的秸秆燃烧检测方法成本大，实时性不好。本专利技术的目的是解决上述问题，提供一种基于深度学习与地域特征的秸秆燃烧检测方法，判断神经网络模型识别出的疑似烟雾候选区与相同视角的无烟区的重合率，对疑似烟雾候选区进行过滤，从而提高烟雾检测的效率，并减小误报率，用于秸秆燃烧的实时检测。本专利技术的技术方案是一种基于深度学习与地域特征的秸秆燃烧检测方法，利用烟雾检测神经网络模型判断实时拍摄的图像是否含有疑似烟雾区域，并利用无烟区对模型检测出的包含有疑似烟雾区域的烟雾图像进行过滤，减小模型的误报率，所述秸秆燃烧检测方法包括以下步骤，步骤1：在观测处采集不同视角的场景的图像，并对每个视角的场景的图像中不可能出现烟雾的区域进行标定，设为无烟区；步骤2：从拍摄的实时图像序列中获取图像；步骤3：利用烟雾检测神经网络模型对步骤2的图像进行烟雾识别并定位出图像中的疑似烟雾区域；步骤4：将包含有疑似烟雾区域的图像进行视角识别，确定视角后，利用相同视角的无烟区进行位置重合率计算，从而进行疑似烟雾候选区的过滤。所述位置重合率判断，若疑似烟雾候选区与无烟区的重合率超过阈值R，则判断疑似烟雾候选区为无效的候选区。无烟区为不会产生烟雾的地面客体对象在图像中的位置，不会产生烟雾的地面客体对象包括房屋、湖泊、河流。优选地，所述烟雾检测神经网络模型包括依次连接的卷积神经网络、RPN网络和全连接层，卷积神经网络用于提取输入图片的特征，RPN网络用于推荐候选区域，并利用RoIPooling层将输出转换为固定大小。卷积神经网络包括10个conv层、10个rule层，4个Pooling层。优选的，所述视角识别，将包含有疑似烟雾区域的图像与步骤1的每个视角的场景的图像进行匹配，利用像素点的对比度、亮度，进行相似度计算，找到最相似的场景的图像，确定包含有疑似烟雾区域的图像的视角。利用像素点的方法如峰值信噪比、结构相似性、直方图方法、矩阵分解法。优选的，所述重合率计算，利用疑似烟雾区域的坐标值与相同视角的无烟区的坐标值进行计算，得到重合区域的坐标值，根据重合区域的面积与无烟区面积的比值即重合区域的占比进行重合率的计算。优选地，所述阈值R为0.3。相比现有技术，本专利技术的有益效果：1）本专利技术的烟雾识别方法对神经网络识别出的疑似烟雾候选区进行过滤，提高了烟雾检测的效率，减小了误报率；2）本专利技术利用卷积神经网络提取特征图，利用RPN网络进行推荐候选区域，优化了烟雾检测神经网络模型的结构，使得烟雾检测神经网络模型的烟雾检测更高效、可靠；3）本专利技术的方法采用少量样本对烟雾检测神经网络模型进行训练即能保证秸秆燃烧的烟雾识别的准确率，解决了样本不充足的问题；4）本专利技术方法对采集的烟雾检测区域的视频中的图像进行实时的秸秆燃烧的烟雾检测，实时性好。附图说明下面结合附图和实施例对本专利技术作进一步说明。图1为基于深度学习与地域特征的秸秆燃烧检测方法的流程示意图。图2为场景图像包括无烟区房屋的示意图。图3为为场景图像包括无烟区单元楼的示意图。图4为实施例中检测出的包含有疑似烟雾区域的烟雾图像示意图。图5为实施例中检测出的疑似烟雾区域与无烟区重合的示意图。图6为实施例的烟雾检测神经网络模型的结构示意图。具体实施方式实施例选择30米高的通信塔塔顶作为观测处，在通信塔塔顶安装摄像机，摄像机的镜头可围绕摄像机云台的纵轴水平地旋转以改变摄像机拍摄的视角，摄像机的镜头一次旋转60゜，6次旋转回归到初始视角，拍摄时通过旋转摄像机镜头采集6个不同的视角的场景的图像，摄像机拍摄时采用固定焦距。如图1所示，一种基于深度学习与地域特征的秸秆燃烧检测方法，采用像素坐标系，判断烟雾检测神经网络模型识别出的疑似烟雾候选区与相同视角的无烟区的重合率，无烟区为不会产生烟雾的地面客体对象在图像中的位置，对疑似烟雾候选区进行过滤，所述秸秆燃烧检测方法包括以下步骤，步骤1：从不同视角对进行秸杆燃烧检测的户外场景拍摄图像，设定视角序号，对每个视角的场景图像中不可能出现烟雾的区域进行标定，设为无烟区，如图2、图3所示；步骤2：从拍摄的实时图像序列中获取图像；步骤3：利用烟雾检测神经网络模型对步骤2的图像进行烟雾识别并定位出图像中的疑似烟雾区域，如图4所示；步骤4：将包含有疑似烟雾区域的图像进行视角识别，确定视角后，利用相同视角的无烟区进行位置重合率计算，从而进行疑似烟雾候选区的过滤。步骤4的位置重合率判断，若疑似烟雾候选区与无烟对象的目标框的重合率超过0.3，则判断疑似烟雾候选区为无效的候选区。无烟区的对象包括房屋、湖泊、河流。步骤4中，视角识别是将包含有疑似烟雾区域的图像与步骤1的每个视角的场景图像进行匹配，利用像素点的对比度、亮度，进行相似度计算，找到最相似的场景图像，确定包含有疑似烟雾区域的图像的视角。利用像素点的方法如峰值信噪比、结构相似性、直方图方法、矩阵分解法。步骤4的重合率计算，利用疑似烟雾区域的坐标值与相同视角无烟区的坐标值进行计算，得到重合的区域的坐标值，根据重合区域的面积与无烟区面积的比值进行重合率的计算。如图5所示，实施例中识别出的疑似烟雾区与无烟区出现大面积重合，识别出的疑似烟雾区被过滤掉。如图6所示，实施例的烟雾检测神经网络模型包括依次连接的卷积神经网络、RPN网络和全连接层，卷积神经网络用于提取输入图片的特征，RPN网络用于推荐候选区域，并利用R本文档来自技高网...

【技术保护点】
1.一种基于深度学习与地域特征的秸秆燃烧检测方法，其特征在于，在户外观测处采集不同视角的场景的图像，利用烟雾检测神经网络模型判断出实时的场景图像中的疑似烟雾区域，并利用无烟区对模型检测出的包含有疑似烟雾区域的烟雾图像进行过滤，减小模型的误报率，所述秸秆燃烧检测方法包括以下步骤，/n步骤1：在观测处采集不同视角的场景的图像，并对每个视角的场景的图像中不可能出现烟雾的区域进行标定，设为无烟区；/n步骤2：从拍摄的实时图像序列中获取图像；/n步骤3：利用烟雾检测神经网络模型对步骤2的图像进行烟雾识别并定位出图像中的疑似烟雾区域；/n步骤4：将包含有疑似烟雾区域的图像进行视角识别，确定视角后，相对于相同视角的无烟区进行位置重合率计算，从而进行疑似烟雾候选区的过滤。/n

【技术特征摘要】
20191101 CN 20191105787011.一种基于深度学习与地域特征的秸秆燃烧检测方法，其特征在于，在户外观测处采集不同视角的场景的图像，利用烟雾检测神经网络模型判断出实时的场景图像中的疑似烟雾区域，并利用无烟区对模型检测出的包含有疑似烟雾区域的烟雾图像进行过滤，减小模型的误报率，所述秸秆燃烧检测方法包括以下步骤，
步骤1：在观测处采集不同视角的场景的图像，并对每个视角的场景的图像中不可能出现烟雾的区域进行标定，设为无烟区；
步骤2：从拍摄的实时图像序列中获取图像；
步骤3：利用烟雾检测神经网络模型对步骤2的图像进行烟雾识别并定位出图像中的疑似烟雾区域；
步骤4：将包含有疑似烟雾区域的图像进行视角识别，确定视角后，相对于相同视角的无烟区进行位置重合率计算，从而进行疑似烟雾候选区的过滤。


2.根据权利要求1所述的基于深度学习与地域特征的秸秆燃烧检测方法，其特征在于，所述位置重合率判断，若疑似烟雾候选区与无烟区的重合率超过阈值R，则判断疑似烟雾候选区为无效的候选区。


3.根据权利要求1所述的基于深度学习与地域特征的秸秆燃烧检测方法，其...

【专利技术属性】
技术研发人员：余锋，姜明华，周昌龙，马乐，宋坤芳，
申请(专利权)人：武汉纺织大学，
类型：发明
国别省市：湖北;42