基于无人机3D激光扫描技术的电力塔自动检测方法及系统技术方案

本发明专利技术公开了基于无人机3D激光扫描技术的电力塔自动检测方法及系统，利用激光点云技术以及激光点云与可见光图像配准技术提取识别电力塔地方法。本发明专利技术利用对称函数及人眼视觉显著性检测技术提取图像中的电力塔区域，根据K‑means聚类提取电力塔、根据线特征匹配及互信息值的图像配准技术融合电力塔图像进而检测电力塔。本发明专利技术提出的基于无人机3D激光扫描技术的电力塔自动检测系统及方法，能准确地识别定位电力塔，满足无人机对电力塔安全自动检测与跟踪的要求。

【技术实现步骤摘要】
基于无人机3D激光扫描技术的电力塔自动检测方法及系统
本专利技术涉及输电线路巡检领域，具体涉及基于无人机3D激光扫描技术的电力塔自动检测方法及系统。
技术介绍
电力塔是电力系统的重要组成部分。随着智慧电网技术的发展，人们对电网的管理能力和安全性提出了更高的要求，电力塔良好的设施状态对电网平稳运行具有十分重要的意义。由于地理环境复杂、恶劣，电力塔在长时间运行后，由于各种力的长期作用，可能发生杆塔构件缺失、杆塔倾斜等情况，而通过人工巡检的方式不仅消耗了大量的人力物力，还可能带来很多安全隐患，使得更多深入的工作无法有效开展。传统的无人飞行器巡检方式是把小型摄像机固定在无人机吊舱内，对输电线路进行摄像，将视频传输到控制中心，技术人员对全过程进行观察，定位视频到电力塔部分进行分析判断，这种方法的执行仍需依赖大量人力物力，无法实时、高效、智能完成巡检工作，不满足现阶段“智能电网”的发展需求。因此，目前的无人飞行器巡检解决了“有无问题”，而未解决“高效率”问题。
技术实现思路
本专利技术针对现存识别电力塔困难且效果不稳定的问题，提供了一种基于无人机3D激光扫描的电力塔自动检测方法及系统，结合无人机机载的双目摄像机和3D激光扫描系统，采用激光点云与可见光图像配准技术实现电力塔检测及电力塔提取、识别。为实现上述技术目的，本专利技术采用了以下的技术方案：在一方面，本专利技术提供了基于无人机3D激光扫描的电力塔自动检测方法，包括基于获得的包括电力塔的激光扫描点云数据识别电力塔点云数据，其特征在于，具体包括以下步骤：将电力塔点云数据生成点云深度图像，将三维数据转换为二维数据；对电力塔二维数据与预先获得的包括电力塔的可见光图像进行粗配准和精匹配，包括利用互信息作为配准过程的相似性测度，选择两点步长共轭算法作为配准策略，计算激光点云深度图像与可见光图像的互信息值，解算全局最优配准参数，获得电力塔图像。进一步地，基于获得的电力塔激光扫描点云数据识别电力塔的点云数据具体包括以下步骤：使用对称函数逐点扫描获得的包括电力塔的激光扫描点云数据，提取顺序无关的信息，来近似点云的全局信息；使用层级结构对点云的全局信息提取局部相关性特征；对得到的影像进行预设次数的膨胀运算，直到恢复电力塔和其他物体的边界；扫描获得的最终影像，对所有黑点进行K-means聚类，得到不同地物的聚类；对获得的聚类结果进行影像点的点数统计，若点数大于设定阈值范围，则视为电力塔，反之视为潜在危险地物。进一步地，将电力塔点云数据与预先获得的包括电力塔的可见光图像进行匹配包括首先将两者进行粗配准，包括以下步骤：利用配准后图像上的像点坐标求出相对应的待配准的图像上的坐标；采用特征提取—直线跟踪的方法提取序列图像中的直线段特征，对于参考图像中每一条直线段，计算该线段中点与待配准图像中所有直线段重点的距离，将待配准图像中距离值小于阈值M的所有线段作为候选的匹配直线段。再进一步地，将电力塔点云数据与预先获得的包括电力塔的可见光图像进行匹配包括首先将两者进行精配准，包括以下步骤：输入候选的匹配直线段和可见光图像；计算可见光图像和候选的匹配直线段的互信息梯度值；将互信息梯度值作为两点步长共轭算法的输入，得到步长。进一步地，所述方法还包括：无人机将录制的双目视频结合GPS信息利用4G网络无线传输回地面。进一步地，所述预先获得的包括电力塔的可见光图像为采用双目相机拍摄的双目图像，对所述双目图像根据确定的相机参数对图像进行矫正与校正处理。再进一步地，所述相机参数包括该相机的焦距、基线距、旋转矩阵和平移矩阵。在另一方面，本专利技术提供了基于无人机3D激光扫描的电力塔自动检测系统，所述电力塔自动检测系统装载在无人机上，其特征在于，包括：激光扫描仪、航空数码相机和控制系统；所述激光扫描仪，用于拍摄包括电力塔的激光扫描点云数据；所述航空数码相机，用于拍摄包括电力塔的包括电力塔的可见光图像；所述控制系统，用于将电力塔点云数据生成点云深度图像，将三维数据转换为二维数据；对电力塔二维数据与预先获得的包括电力塔的可见光图像进行粗配准和精匹配，包括利用互信息作为配准过程的相似性测度，选择两点步长共轭算法作为配准策略，计算激光点云深度图像与可见光图像的互信息值，解算全局最优配准参数，获得电力塔图像。本专利技术所取得的有益技术效果：与现有技术相比，本专利技术实现无人机对电力塔自动的跟踪定位，本专利技术有益效果是，能自动检测电力塔位置、快速定位电力塔、精准显示电力塔细节，应用范围大幅提升，并将地理位置、双目视频、配准图像等信息传输回地面，为进一步的电力塔障碍检测等功能预留接口；本专利技术采用对称函数逐点扫描获得的包括电力塔的激光扫描点云数据，方法实现简单不需过多外部设备。附图说明图1为本专利技术具体实施例系统结构图；图2为本专利技术具体实施例识别电力塔算法流程图；图3为本专利技术具体实施例图像配准算法流程图；图4为本专利技术具体实施例图原理示意图。具体实施方式为了使本专利技术的目的、技术方案及优点更加清楚明白，以下结合附图，对本专利技术进行进一步的详细说明。实施例1：基于无人机3D激光扫描的电力塔自动检测系统，该电力塔自动检测系统装载在无人机上，包括：激光扫描仪、航空数码相机和控制系统、GPS模块、无线传输模块、激光扫描系统的云台模块。在本实施例中，航空数码相机采用双目摄像头获得的包括电力塔的可见光双目图像。采用激光点云与可见光图像配准技术实现电力塔检测及电力塔提取、识别，如图1所示。激光扫描仪，用于拍摄包括电力塔的激光扫描点云数据；云台控制模块与激光扫描仪连接，用于控制激光扫描仪调整角度和方向；航空数码相机，用于拍摄包括电力塔的包括电力塔的可见光图像；控制系统，用于将电力塔点云数据生成点云深度图像，将三维数据转换为二维数据；对电力塔二维数据与预先获得的包括电力塔的可见光图像进行粗配准和精匹配，包括利用互信息作为配准过程的相似性测度，选择两点步长共轭算法作为配准策略，计算激光点云深度图像与可见光图像的互信息值，解算全局最优配准参数，获得电力塔图像。在具体实施例中，优选地，在以上实施例基础上，本专利技术提供的基于无人机3D激光扫描的电力塔自动检测系统，还包括定位定姿态系统B(POS系统)和地面DPS基站E，定位定姿态系统B确定无人机航迹的三维坐标、确定无人机现在的状态并传到地面DPS基站E；实施例2：如图2所示，基于无人机3D激光扫描的电力塔自动检测方法，包括以下步骤：利用激光扫描仪获取电力塔附近的激光点云传到控制系统；基于获得的包括电力塔的激光扫描点云数据识别电力塔点云数据；将电力塔点云数据生成点云深度图像，将三维数据转换为二维数据；对电力塔二维数据与预先获得的包括电力塔的可见光图像进行粗配准和精匹配，包括利用互信息作为配准过程的相似性测度，选择两点步长共轭算法作为配准策略，计本文档来自技高网...

【技术保护点】
1.基于无人机3D激光扫描的电力塔自动检测方法，包括基于获得的包括电力塔的激光扫描点云数据识别电力塔点云数据，其特征在于，具体包括以下步骤：/n将电力塔点云数据生成点云深度图像，将三维数据转换为二维数据；/n对电力塔二维数据与预先获得的包括电力塔的可见光图像进行粗配准和精匹配，包括利用互信息作为配准过程的相似性测度，选择两点步长共轭算法作为配准策略，计算激光点云深度图像与可见光图像的互信息值，解算全局最优配准参数，获得电力塔图像。/n

【技术特征摘要】
1.基于无人机3D激光扫描的电力塔自动检测方法，包括基于获得的包括电力塔的激光扫描点云数据识别电力塔点云数据，其特征在于，具体包括以下步骤：
将电力塔点云数据生成点云深度图像，将三维数据转换为二维数据；
对电力塔二维数据与预先获得的包括电力塔的可见光图像进行粗配准和精匹配，包括利用互信息作为配准过程的相似性测度，选择两点步长共轭算法作为配准策略，计算激光点云深度图像与可见光图像的互信息值，解算全局最优配准参数，获得电力塔图像。


2.根据权利要求1所述的基于无人机3D激光扫描的电力塔自动检测方法，其特征在于，基于获得的电力塔激光扫描点云数据识别电力塔的点云数据具体包括以下步骤：
使用对称函数逐点扫描获得的包括电力塔的激光扫描点云数据，提取顺序无关的信息，来近似点云的全局信息；
使用层级结构对点云的全局信息提取局部相关性特征；对得到的影像进行预设次数的膨胀运算，直到恢复电力塔和其他物体的边界；
扫描获得的最终影像，对所有黑点进行K-means聚类，得到不同地物的聚类；对获得的聚类结果进行影像点的点数统计，若点数大于设定阈值范围，则视为电力塔，反之视为潜在危险地物。


3.根据权利要求1所述的基于无人机3D激光扫描的电力塔自动检测方法，其特征在于，将电力塔点云数据与预先获得的包括电力塔的可见光图像进行匹配包括首先将两者进行粗配准，包括以下步骤：
利用配准后图像上的像点坐标求出相对应的待配准的图像上的坐标；
采用特征提取—直线跟踪的方法提取序列图像中的直线段特征，对于参考图像中每一条直线段，计算该线段中点与待配准图像中所有直线段重点的距离，将待配准图像中距离值小于阈值M的所有线段作为候选的匹配直线段。


4.根据权利要求3所述的基于无人机3D激光扫描的电力塔自动检测方法，其特征在于，将电力塔点云数据与预先获得的包括电力塔的可见光图像进行匹配包括...

【专利技术属性】
技术研发人员：王肖霖，侯晓妍，李庆武，徐畅，马云鹏，周亚琴，段军雨，
申请(专利权)人：河海大学常州校区，
类型：发明
国别省市：江苏;32