一种基于深度学习的电力设备红外图像多目标定位方法技术

本发明专利技术公开了一种基于深度学习的电力设备红外图像多目标定位方法，包括步骤：1)通过变电站设备检测装置获取标准化的电力设备红外图像；2)建立电力设备红外图像样本库，提取训练集、验证集和测试集；3)建立FASTER‑RCNN深度目标检测神经网络，使用样本库的训练集对所建立的FASTER‑RCNN深度目标检测神经网络进行训练，并通过验证集对模型的过拟合程度进行验证；4)利用训练建立的网络模型，对测试集中的红外图像进行多目标识别与定位，并产生识别结果。本发明专利技术利用深度学习算法对输入红外图像进行深度特征挖掘，不依赖于手工提取特征参数，能够有效的并准确的识别并定位各类电力主干设备的区域和位置，从而在一定程度上，缩减人工劳动量。

A multi target location method for infrared images of power equipment based on deep learning

The invention discloses a multi-target positioning method for infrared image of electric power equipment based on depth learning, which comprises the following steps: 1) acquiring standardized infrared image of electric power equipment through substation equipment detection device; 2) establishing infrared image sample library of electric power equipment, extracting training set, verification set and test set; 3) establishing FASTER_RCNN depth. Degree target detection neural network trains FASTER_RCNN depth target detection neural network with training set of sample library, and verifies the over-fitting degree of the model through verification set. 4) Using the network model established by training, the infrared image in the test set is identified and positioned for multi-target, and the product is produced. Student identification results. The depth learning algorithm is used to mine the depth feature of the input infrared image, which does not depend on manual extraction of feature parameters, and can effectively and accurately identify and locate the area and position of various power backbone equipment, thereby reducing the labor to a certain extent.

【技术实现步骤摘要】
一种基于深度学习的电力设备红外图像多目标定位方法
本专利技术涉及电力设备红外图像识别与定位的
，尤其是指一种基于深度学习的电力设备红外图像多目标定位方法。
技术介绍
电力设备红外图像是由红外技术通过探测电力设备发出的红外辐射能量，并转化为相应的电信号，经过电信号处理后获得电力设备表面热图像。红外检测技术具有远距离、不接触、不取样、不解体、准确、快速、直观等特点，广泛用于电力设备过热缺陷检测和诊断中，对提高电力系统的稳定性具有重要意义。因此，高效而准确地识别电力设备红外图像中的电力主干设备的区域和位置便成为了红外技术在电力系统中应用的关键一环。在红外图像故障诊断中，需要能够在红外图像中获得多个目标区域(比如三相设备或同类设备所在的位置)，在每个区域提取最高温度信息，通过温度比较电力设备的状态。图像分割和图像匹配是目标定位中的两种常见方法，其中大津法和分水岭法作为图像分割法的代表，通过对电力设备红外图像进行阈值分割达到目标识别效果。图像匹配是计算机视觉、图像处理和模式识别领域的研究热点，方法大体分为两类：基于区域的匹配方法和基于特征的匹配方法。但是，红外图像是一种伪色彩图像，它反映了物体表面温度的高低及分布，具有强度集中和对比度低等特性。并且受红外成像仪技术的限制，红外图像的质量通常不高。因此图像分割方法往往不能把目标和背景分割出来，对于多目标分割更是困难。此外，红外图像数据量大且形式多变，图像匹配法容易受限于单一的匹配模板从而导致通用性不强。为了实现电力设备红外图像多目标识别与定位，本专利技术创新的将深度学习应用到图像处理中，显著提升了识别效率和准确性。深学习作为机器学习一个分支，它旨在构建更深层的结构来加强模型在海量数据中捕捉隐含特征的能力。与传统的浅层神经网络比较而言，深度学习有一系列能够进行非线性变换的隐含层，从而能够挑战更加复杂的环境与问题。就红外图像目标识别与定位问题而言，深度学习中的卷积神经网络能够获取图像更深层的特征表述。因此，将深度学习理论应用到电力系统领域，是能源电力转型发展的重要支撑，也是电网技术发展的重要趋势。
技术实现思路
本专利技术的目的在于克服现有技术的缺点与不足，提出了一种基于深度学习的电力设备红外图像多目标定位方法，基于深度学习中的FASTER-RCNN深度目标检测神经网络来构建端到端训练的深层神经网络模型，能够更加准确且高效地识别电力设备红外图像中的电力主干设备的区域和位置。为实现上述目的，本专利技术所提供的技术方案为：一种基于深度学习的电力设备红外图像多目标定位方法，包括以下步骤：步骤1：通过变电站设备检测装置获取标准化的电力设备红外图像；步骤2：建立电力设备红外图像样本库，提取训练集、验证集和测试集；步骤3：建立FASTER-RCNN深度目标检测神经网络，使用样本库的训练集对所建立的FASTER-RCNN深度目标检测神经网络进行训练，并通过验证集对模型的过拟合程度进行验证，不断调试后得到网络模型的连接权值和偏置参数；步骤4：利用训练建立的网络模型，对测试集中的红外图像进行多目标识别，对红外图谱中主干电力设备的区域和位置进行提取，并产生电力设备红外图像的识别结果。在步骤1中，通过变电站技术人员手持热像仪现场采集图片或变电站巡检机器人携带红外热像仪在巡检轨道上拍摄红外图像，其中所采集的红外图像中包含的电力设备有：电力变压器、断路器、避雷器、电压传感器、电流传感器。在步骤2中，将采集到的电力设备红外图像按照预设比例分为训练集、验证集和测试集，并对训练集和验证集中的红外图像添加标签，制作成PASCALVOC格式的数据集，其中，测试集的样本图像要求不能与训练集与验证集中的图像重叠，且不需要添加标签。在步骤3中，所建立的FASTER-RCNN深度目标检测神经网络包括：用于提取图像特征并生成特征图谱的卷积神经网络(ConvolutionalNeuralNetwork,CNN)，用于对特征图谱中的每一个像素点生成候选区域的区域候选网络(RegionProposalNetwork,RPN)，以及将图像特征与所选的候选区域相结合的兴趣区域池化层(RegionOfInterests，ROI)；最后通过边框回归法(Bounding-Box,Bbox)选择出最优的区域，进而完成目标识别与分类。在步骤4中，将测试集中的红外图像输入步骤3所搭建的FASTER-RCNN深度目标检测神经网络，对红外图像中电力主干设备的区域和位置进行提取并得到电力设备红外图像的识别结果。组成FASTER-RCNN的卷积神经网络结构由Imagenet训练集进行预训练，其相应的卷积层激活函数为线性修正单元函数(RectifiedLinearUnit，ReLU)。所述FASTER-RCNN深度目标检测神经网络采用的梯度优化算法为适应性矩估计算法(AdaptiveMomentEstimation，Adam)，在迭代过程中，观察损失函数值的变化判断收敛情况，调整学习率，并且在该网络中采用dropout方法来减少训练过程中的过拟合现象。本专利技术与现有技术相比，具有如下优点与有益效果：本专利技术通过使用卷积神经网络对输入红外图像进行深度特征挖掘，不依赖于手工特征提取参数，并通过引入dropout技术来减少训练过程中的过拟合现象，从而能够有效并准确的识别并定位各类电力主干设备的区域和位置，进而在一定程度上减少了对人工识别的依赖，缩减人工劳动量。附图说明图1为本专利技术方法的总体流程图。图2为一个二维卷积神经网络的基本结构示意图。图3为FASTER-RCNN深度目标检测神经网络的结构图。具体实施方式下面结合具体实施例对本专利技术作进一步说明。本专利技术针对当前电力设备红外图像定位与识别准确度不高、多目标识别困难、人工依赖程度高等问题，提出了一种基于深度学习的电力设备红外图像多目标定位方法。在实施例中，将电力设备红外图像作为输入，通过深度学习方法对电力主干设备的区域和位置进行定位与识别，下面将实施的方案进行详细描述。如图1所示，所述基于深度学习的电力设备红外图像多目标定位方法，包括以下步骤：步骤1：通过变电站设备检测装置获取标准化的电力设备红外图像；其中，通过变电站技术人员手持热像仪现场采集图片或变电站巡检机器人携带红外热像仪在巡检轨道上拍摄红外图像，具体的，所采集的红外图像中包含的电力设备有：电力变压器、断路器、避雷器、电压传感器、电流传感器。步骤2：建立电力设备红外图像样本库，提取训练集验、证集和测试集；其中，将采集到的电力设备红外图像按照一定比例分为训练集、验证集和测试集，并对训练集和验证集中的红外图像添加标签，制作成PASCALVOC格式的数据集，测试集的样本图像要求不能与训练集与验证集中的图像重叠，且不需要添加标签。步骤3：建立FASTER-RCNN深度目标检测神经网络；使用样本库的训练集对所建立的FASTER-RCNN深度目标检测神经网络进行训练，并通过验证集对模型的过拟合程度进行验证，不断调试后得到网络模型的连接权值和偏置参数。如图2所示，为FASTER-RCNN深度目标检测神经网络的基本结构图，其建立步骤如下：步骤3.1：通过深度卷积神经网络(CNN)提取图像特征并生成特征图谱。参见图3所示，为一个二维卷积神经网络的基本结构示意图：每一层本文档来自技高网...

【技术保护点】
1.一种基于深度学习的电力设备红外图像多目标定位方法，其特征在于，包括以下步骤：步骤1：通过变电站设备检测装置获取标准化的电力设备红外图像；步骤2：建立电力设备红外图像样本库，提取训练集、验证集和测试集；步骤3：建立FASTER‑RCNN深度目标检测神经网络，使用样本库的训练集对所建立的FASTER‑RCNN深度目标检测神经网络进行训练，并通过验证集对模型的过拟合程度进行验证，不断调试后得到网络模型的连接权值和偏置参数；步骤4：利用训练建立的网络模型，对测试集中的红外图像进行多目标识别，对红外图谱中主干电力设备的区域和位置进行提取，并产生电力设备红外图像的识别结果。

【技术特征摘要】
1.一种基于深度学习的电力设备红外图像多目标定位方法，其特征在于，包括以下步骤：步骤1：通过变电站设备检测装置获取标准化的电力设备红外图像；步骤2：建立电力设备红外图像样本库，提取训练集、验证集和测试集；步骤3：建立FASTER-RCNN深度目标检测神经网络，使用样本库的训练集对所建立的FASTER-RCNN深度目标检测神经网络进行训练，并通过验证集对模型的过拟合程度进行验证，不断调试后得到网络模型的连接权值和偏置参数；步骤4：利用训练建立的网络模型，对测试集中的红外图像进行多目标识别，对红外图谱中主干电力设备的区域和位置进行提取，并产生电力设备红外图像的识别结果。2.根据权利要求1所述的一种基于深度学习的电力设备红外图像多目标定位方法，其特征在于：在步骤1中，通过变电站技术人员手持热像仪现场采集图片或变电站巡检机器人携带红外热像仪在巡检轨道上拍摄红外图像，其中所采集的红外图像中包含的电力设备有：电力变压器、断路器、避雷器、电压传感器、电流传感器。3.根据权利要求1所述的一种基于深度学习的电力设备红外图像多目标定位方法，其特征在于：在步骤2中，将采集到的电力设备红外图像按照预设比例分为训练集、验证集和测试集，并对训练集和验证集中的红外图像添加标签，制作成PASCALVOC格式的数据集，其中，测试集的样本图像要求不能与训练集与验证集中的图像...

【专利技术属性】
技术研发人员：唐文虎，牛哲文，杨毅豪，冯志颖，
申请(专利权)人：华南理工大学，
类型：发明
国别省市：广东,44