一种机场跑道外来物识别图像处理装置和方法制造方法及图纸

本发明专利技术提供一种机场跑道外来物识别图像处理装置和方法，包括高清网络摄像头；与高清网络摄像头连接的FPGA；FPGA连接中控台。通过雷达获取机场跑道的外来物位置信息，并根据外来物位置信息将设置在机场跑道外部的高清网络摄像头的视轴转向外来物所在的区域；高清网络摄像头对外来物所在的区域进行视频采集，处理模块计算接收的当前帧图像的灰度均值，并根据灰度均值与判断是否需要开启激光照明单元；同时根据外来物的位置信息，将外来物在图像上的区域标识出；通过大气湍流图像复原算法对图像进行复原。本发明专利技术具备在中弱大气湍流下实现退化图像的清晰复原，提高机场跑道外来物检测系统环境适应能力。

An image recognition device and method for identification of foreign objects in airport runway

The invention provides an image processing device and method for recognizing foreign objects on an airport runway, including a high-definition network camera, a FPGA connected with a high-definition network camera, and a central console connected with a FPGA. The location information of foreign objects on the airport runway is acquired by radar, and the view axis of the high-definition network camera set outside the airport runway is turned to the area where the foreign objects are located according to the location information. The high-definition network camera collects the video of the area where the foreign objects are located, and the processing module calculates the current frame image received. Mean gray level, and according to the mean gray level and judgment whether the laser illumination unit needs to be turned on; at the same time, according to the location information of foreign objects, the region of foreign objects on the image is identified; the image is restored by atmospheric turbulence image restoration algorithm. The invention has the advantages of clear restoration of degraded images under moderate and weak atmospheric turbulence, and improving the environmental adaptability of the airport runway foreign object detection system.

【技术实现步骤摘要】
一种机场跑道外来物识别图像处理装置和方法
本专利技术涉及一种机场跑道外来物识别图像处理装置好而方法，采用GPU+FPGA技术，通过一种适应于跑道使用环境的外来物目标识别算法，在不同天气条件下完成对外来物的高精度探测，并在中弱大气湍流下实现退化图像的清晰复原，提高机场跑道外来物检测系统环境适应能力。
技术介绍
典型的FOD目标有金属器件（螺钉、螺帽、垫圈、钉子和保险丝等）、机械工具、飞行物品（私人物品、钢笔、铅笔和纽扣等）、混凝土沥青碎块、橡胶碎片、塑料制品和动植物等。当前国内机场跑道巡检主要依赖道面巡查人员完成，在道面巡查时将关闭跑道，这使得航班通行能力大大降低。
技术实现思路
本专利技术提供一种机场跑道外来物识别图像处理装置和方法，以解决现有技术存在的问题。本专利技术采用以下技术方案：一种机场跑道外来物识别图像处理装置，包括：获取机场跑道图像信息的高清网络摄像头；通过以太网接口模块接收高清网络摄像头的图像的FPGA；所述FPGA上连接有远端的中控台；接收FPGA处理后的图像的GPU模块。所述GPU具有256个通用处理单元，FPGA发送给GPU的图像分为至少9个宏块，每个宏块均发送给不同的通用处理单元上进行并行处理。所述FPGA与远端的中控台连接的串口上连接有磁耦合电路。一种机场跑道外来物识别图像处理方法，S1：通过雷达获取机场跑道的外来物位置信息，并根据外来物位置信息将设置在机场跑道外部的高清网络摄像头的视轴转向外来物所在的大致区域；S2：高清网络摄像头对外来物所在的区域进行视频采集，并将采集的视频数据通过以太网接收模块传输给后续的处理模块，后续的处理模块接收到视频图像后，计算接收的当前帧图像的平均灰度均值，并将灰度均值与设定的灰度阈值比较，若灰度均值大于设定的阈值，则关闭用于补光的激光照明单元；若灰度均值小于设定的阈值，则打开用于补光的激光照明单元；S3：根据外来物的位置信息，将外来物在图像上的区域标识出；S4：通过大气湍流图像复原算法对图像进行复原。所述S2中，若灰度均值小于设定的阈值，打开用于补光的激光照明单元，然后通过处理模块与远端的中控台连接，获取当前的天气气象信息，使用图像光照补偿算法对图像进行光照补偿。所述处理模块包括FPFA和与FPGA连接的GPU，FPGA对图像进行滤波和积分图处理后，将处理后的图像发送给GPU。本专利技术的有益效果：本专利技术采用磁耦合隔离技术提高抗雷击和浪涌等能力，可承受±15kV高压而不损坏，电源部分前向主回路的AC-DC变换器具有软启动电路确保后级计算单元稳定供电。具备在中弱大气湍流下实现退化图像的清晰复原，提高机场跑道外来物检测系统环境适应能力。附图说明图1为本专利技术涉及硬件原理框图；图2为本专利技术涉及的“防浪涌”串口422部分电路原理图；图3为本专利技术涉及的图像处理算法流程图。具体实施方式下面结合附图和具体实施方式对本专利技术作进一步详细说明。本专利技术提供一种机场跑道外来物识别图像处理装置，能够使光电探测系统能在雷击、大气湍流等复杂环境下使用。如图1所示，本专利技术的装置包括获取机场跑道图像信息的高清网络摄像头；通过以太网接口模块接收高清网络摄像头的图像的FPGA，FPGA通过422串口与远端的中控台通信，且通过VGA通道传输图像；FPGA处理后的图像发送给GPU模块。高清网络摄像头对外来物进行采样后，通过以太网转换模块高速下传至FPGA缓存内，FPGA采用XILINXXC7K325T3FFG900I芯片，考虑高速信号时钟可能不同步的问题，在该款FPGA接口控制电路上，通过采用基于FIFO的动态相位校正确保时钟高度同步。且为提高目标信噪比SNR，采用中值滤波进行滤波降噪处理，结合实际外场图像特征，其二维模板W按3×3区域选取。通过积分图中图像平均灰度动态调整增益系数g，g按[-3-2-10123]进行选取。预处理完成后交GPU进行处理。如图2所示，针对机场可能出现雷击和浪涌等影响，本专利技术的装置与外部通信的接口如串口422采用ADM2682EBRIZ的磁耦合技术，起到隔离的作用，可承受±15kV高压而不损坏。而本专利技术通过电源模块连接外部电源为装置的用电元件供电，电源模块通过AC-DC变换器连接用电元件，AC-DC变换器具有软启动电路，DC出口采用点解电容阵列确保后级计算单元稳定供电。软启动可以直接阻止浪涌现象；电容阵列可以吸收电压波动保障后级计算单元的稳定供电。如图1所示，本专利技术算法采用基于GPU的宏块处理方法，并将各宏块安排到不同的独立通用处理单元上去执行，GPU采用NVIDEATX2，具有256个独立通用处理单元，可在CUDA环境下拥有256个独立运行的线程，即Cuda_Thread，采用Linux编程平台实现对NVIDEATX2的在线编程，将图像分成100个宏块，每个宏块被安排到GPU不同的独立通用处理单元上进行并行处理，降低图像处理延迟。GPU对图像处理后，使用大气湍流复原算法将退化图像复原后通过FPGA的VGA模块输出到中控台。本专利技术还提供一种机场跑道外来物识别图像处理方法，具体包括以下步骤：S1：通过雷达获取机场跑道的外来物位置信息，并根据外来物位置信息将设置在机场跑道外部的高清网络摄像头的视轴转向外来物所在的区域；S2：高清网络摄像头对外来物所在的区域进行视频采集，并将采集的视频数据通过以太网接收模块传输给后续的处理模块，后续的处理模块接收到视频图像后，计算接收的当前帧图像的灰度均值，并将灰度均值与设定的灰度阈值比较，若灰度均值大于设定的阈值，则关闭用于补光的激光照明单元；若灰度均值小于设定的阈值，则打开用于补光的激光照明单元；处理模块包括FPFA和与FPGA连接的GPU。S3：根据外来物的位置信息，将外来物在图像上的区域标识出；该区域为外来物在图像上的大致区域，即需要实现设定需要标注的范围的大小。S4：通过大气湍流复原算法进行图像复原。通过获取连续多帧图像的边缘梯度，自动判断大气湍流强度，若为弱湍流，则采用现有的图像增强算法，否则启动Brenner算法进行清晰度判断获取最清晰图像，在此基础上通过小波变换实现对图像进行清晰复原。S2中，若灰度均值小于设定的阈值，打开用于补光的激光照明单元，然后通过处理模块与远端的中控台连接，获取当前的天气气象信息，使用图像光照补偿算法对图像进行光照补偿。下面给出上述算法的具体实施过程：Step1：利用VideoCapture类调用摄像头进行视频采集。Step2：定义一个Mat变量，用于存储每一帧的图像，接着读取当前帧到Mat变量中。只需当前帧读取到mat变量中，以此帧为原始图片进行后续的图像处理，最终显示处理后的图片。Step3：读取当前图像平均强度LaserPowerOnThreshold（）,图像直方图描绘了图像中每个亮度值的像素数，表示图像中亮度的分布。对Step2中当前帧的图像进行颜色灰度统计，计算整幅图像的灰度强度均值，与设定的阈值进行比较。若灰度平均强度大于设定的阈值，则发送激光主动照明使能关闭信号（即判定为日照白天，不需激光照明），进行高斯滤波处理。若灰度平均强度小于设定的阈值，则发送激光主动照明使能打开信号（黑夜或天气灰暗，需激光照明辅助），进行步骤Step4。Step4：读取当天气象信息，自动切换相适应的图像补偿算法本文档来自技高网...

【技术保护点】
1.一种机场跑道外来物识别图像处理装置，其特征在于，包括：获取机场跑道图像信息的高清网络摄像头；通过以太网接口模块接收高清网络摄像头的图像的FPGA；所述FPGA上连接有远端的中控台；接收FPGA处理后的图像的GPU模块。

【技术特征摘要】
1.一种机场跑道外来物识别图像处理装置，其特征在于，包括：获取机场跑道图像信息的高清网络摄像头；通过以太网接口模块接收高清网络摄像头的图像的FPGA；所述FPGA上连接有远端的中控台；接收FPGA处理后的图像的GPU模块。2.根据权利要求1所述的装置，其特征在于：所述GPU具有256个通用处理单元，FPGA发送给GPU的图像分为至少9个宏块，每个宏块均发送给不同的通用处理单元上进行并行处理。3.根据权利要求1所述的装置，其特征在于：所述FPGA与远端的中控台连接的串口上连接有磁耦合电路。4.一种机场跑道外来物识别图像处理方法，其特征在于：S1：通过雷达获取机场跑道的外来物位置信息，并根据外来物位置信息将设置在机场跑道外部的高清网络摄像头的视轴转向外来物所在的大致区域；S2：高清网络摄像头对外来物所在的区域进行视频采集，并将采...

【专利技术属性】
技术研发人员：叶德茂，马锦山，李莎莎，张振岭，张泽南，王宇慧，
申请(专利权)人：中国船舶重工集团公司第七一三研究所，
类型：发明
国别省市：河南,41