一种基于生成对抗网络的气体湍流模糊图像重建方法技术

本发明专利技术公开了一种一种基于生成对抗网络的气体湍流模糊图像重建方法，包括以下步骤：S101构建试验装置：试验装置包括加热设备、图形采集设备和图像处理设备，图像采集设备用于采集目标图像，图像处理设备与图像采集设备电连接，加热设备用于对图像采集设备至目标图像的路径上产生加热空气的湍流；S102将采集到的受加热空气的湍流影响的模糊图像与清晰图像进行比对，以判别模糊图像的真伪；S103当判断模糊图像为真时，根据清晰图像对模糊图像进行优化，直至图像处理设备对模糊图像与清晰图像无法区分为止。本发明专利技术的技术方案有效地解决了由于气体湍流造成的图像模糊的问题。由于气体湍流造成的图像模糊的问题。由于气体湍流造成的图像模糊的问题。

【技术实现步骤摘要】
一种基于生成对抗网络的气体湍流模糊图像重建方法


[0001]本专利技术涉及图像处理的
，具体而言，涉及一种基于生成对抗网络的气体湍流模糊图像重建方法。

技术介绍

[0002]由于气体温度的变化引起的气体湍流运动会使大气的密度发生变化，进而导致大气折射率的变化。这种变化会对光学系统的远距离成像的成像质量造成严重的影响。针对成像质量的下降，传统图像复原技术主要是通过确定图像退化模型，即先确定点扩散函数等参数，然后利用维纳滤波、反卷积等方式进行复原。但是由于气体湍流造成的影响复杂多变且标定困难，确定其退化模型十分困难。通过上述可知，现有技术的大气湍流模糊图像的复原方法依赖求解多帧图像的偏位方程来对图像进行重建，但此类方法受方程精度和多帧图像质量影响，重建图像效果不稳定。

技术实现思路

[0003]本专利技术目的在于提供一种基于生成对抗网络的气体湍流模糊图像重建方法，解决由于气体湍流造成的图像模糊的问题。
[0004]有鉴于此，本专利技术提供一种基于生成对抗网络的气体湍流模糊图像重建方法，包括以下步骤：S101构建试验装置：试验装置包括加热设备、图形采集设备和图像处理设备，图像采集设备用于采集目标图像，图像处理设备与图像采集设备电连接，加热设备用于对图像采集设备至目标图像的路径上产生加热空气的湍流；S102将采集到的受加热空气的湍流影响的模糊图像与清晰图像进行比对，以判别模糊图像的真伪；S103当判断模糊图像为真时，根据清晰图像对模糊图像进行优化，直至图像处理设备对模糊图像与清晰图像无法区分为止。
[0005]进一步地，在S103步骤中，使用神经网络根据清晰图像对模糊图像进行优化，神经网络包括一个普通卷积模块，两个步长为1/2的卷积单元、9个残差模块、两个反卷积单元以及一个普通卷积模块；前14个模块都由一个卷积层、实例归一化层和ReLU激活函数组成，最后一个模块由卷积层和tanh激活函数构成。
[0006]进一步地，神经网络还包括损失函数，损失函数包括对抗损失和内容损失，λ取100；
[0007]L
total
＝L
adv
+，λL
cont
ꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀ
(4)。
[0008]进一步地，在S103步骤中，优化的具体过程为：采用NVIDIA2080ti来训练模型，mini
‑
batch大小设置为128；训练批次设为100次，学习率0.001，衰减0.0005；训练时交替更新生成器和鉴别器网络，即更新比率设置为1。
[0009]本专利技术实现了以下显著的有益效果：
[0010]本专利技术的技术方案，提出一种基于生成对抗网络的大气湍流模糊图像的重建方法，解决由于气体湍流造成的图像模糊的问题。
附图说明
[0011]图1是本专利技术的基于生成对抗网络的气体湍流模糊图像重建方法的数据集采集装置的结构示意图；
[0012]图2是图1的基于生成对抗网络的气体湍流模糊图像重建方法的生成对抗网络的示意图；
[0013]图3是图1的基于生成对抗网络的气体湍流模糊图像重建方法的生成器网络的示意图；
[0014]图4是图1的基于生成对抗网络的气体湍流模糊图像重建方法的判别器网络的示意图；
具体实施方式
[0015]需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本申请。
[0016]应该指出，以下详细说明都是例示性的，旨在对本申请提供进一步的说明。除非另有指明，本文使用的所有技术和科学术语具有与本申请所属
的普通技术人员通常理解的相同含义。
[0017]为了便于描述，在这里可以使用空间相对术语，如“在
……
之上”、“在
……
上方”、“在
……
上表面”、“上面的”等，用来描述如在图中所示的一个器件或特征与其他器件或特征的空间位置关系。应当理解的是，空间相对术语旨在包含除了器件在图中所描述的方位之外的在使用或操作中的不同方位。例如，如果附图中的器件被倒置，则描述为“在其他器件或构造上方”或“在其他器件或构造之上”的器件之后将被定位为“在其他器件或构造下方”或“在其他器件或构造之下”。因而，示例性术语“在
……
上方”可以包括“在
……
上方”和“在
……
下方”两种方位。该器件也可以其他不同方式定位(旋转90度或处于其他方位)，并且对这里所使用的空间相对描述作出相应解释。
[0018]现在，将参照附图更详细地描述根据本申请的示例性实施方式。然而，这些示例性实施方式可以由多种不同的形式来实施，并且不应当被解释为只限于这里所阐述的实施方式。应当理解的是，提供这些实施方式是为了使得本申请的公开彻底且完整，并且将这些示例性实施方式的构思充分传达给本领域普通技术人员，在附图中，为了清楚起见，扩大了层和区域的厚度，并且使用相同的附图标记表示相同的器件，因而将省略对它们的描述。
[0019]请参照图1至图4，本实施例的大气湍流图像的采集：
[0020]为保证图像重建结果的准确性，需要采集大气湍流图像数据集。数据集需要同时获取统一目标场景在有大气湍流和无大气湍流情况下的图像，其中无大气湍流情况下的图像作为重建的真值。搭建如图1所示的模拟大气湍流的实验系统。为了模拟大气湍流，使用四个加热器，加热空气产生湍流。通过相机采集开启和关闭加热器时的目标图像，通过搭建不同的目标场景来丰富数据集。
[0021]生成对抗网络：
[0022]生成对抗网络模型基本框架如图2所示，将由大气湍流的模糊图像输入到生成器得到生成图像，生成图像与清晰图像一同输入判别器中，分别将其映射为一个判别器，以判别为真的概率值。生成对抗网络是一个互相博弈的过程，生成器依据判别器的判别结果进
行优化，而判别器则努力去判别清晰图像与生成图像，直到判别器无法区分清晰图像与生成图像为止，时生成器的去模糊效果达到最好。
[0023]生成器网络主要由空间特征提取与融合模块，它的主要功能是浅层特征提取，基于深度残差网络的深层特征提取，空间信息的融合，以及图像重建。完整生成器网络结构包含一个普通卷积模块，两个步长为1/2的卷积单元(Conv)、9个残差模块(Residual)、两个反卷积单元(convTrans)以及一个普通卷积模块(conv3d)。前14个模块都由一个卷积层、实例归一化层和ReLU激活函数组成，最后一个模块由卷积层和tanh激活函数构成。在输入图像的后端引入全局跳跃连接使生成器可从模糊图像学习到残差校正。它的网络结构图如下：
[0024]判别器是在生成器训练完毕后对生成器生成的图像判定为真的概率。当概率大于0.5时，将输入图像判为清晰图像，反之将其判定为生成图像。判别器网络前面由5个卷积块组成，卷积层、实例归一化层和ReLU激活函数组成。
[0025]此神经网络的本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于生成对抗网络的气体湍流模糊图像重建方法，其特征在于，包括以下步骤：S101构建试验装置：所述试验装置包括加热设备、图形采集设备和图像处理设备，所述图像采集设备用于采集目标图像，所述图像处理设备与所述图像采集设备电连接，所述加热设备用于对所述图像采集设备至所述目标图像的路径上产生加热空气的湍流；S102将采集到的受加热空气的湍流影响的模糊图像与清晰图像进行比对，以判别模糊图像的真伪；S103当判断所述模糊图像为真时，根据所述清晰图像对所述模糊图像进行优化，直至所述图像处理设备对所述模糊图像与所述清晰图像无法区分为止。2.根据权利要求1所述的基于生成对抗网络的气体湍流模糊图像重建方法，其特征在于，在S103步骤中，使用神经网络根据所述清晰图像对所述模糊图像进行优化，所述神经网络包括一个普通卷积模块，两个步长为1/2的卷积单元、9个残差模块、两个反卷积单元以及一个普通卷积模块；前...

【专利技术属性】
技术研发人员：赵文超，张樯，李斌，
申请(专利权)人：北京环境特性研究所，
类型：发明
国别省市：