基于深度学习的散射成像装置和方法制造方法及图纸

本发明专利技术公开了一种基于深度学习的散射成像装置，包括准直光源、第一透镜、第二透镜、线偏振片、空间光调制器、分束镜、第三透镜、散射介质、光电探测器、图像重建模块；所述准直光源、第一透镜、第二透镜、线偏振片、分束镜依次沿第一光轴设置，所述空间光调制器、第三透镜、散射介质、光电探测器沿第二光轴设置，第一光轴与第二光轴在分束镜处相交且第二光轴垂直于第一光轴方向，其中，散射介质设置在第三透镜的焦平面上；图像重建模块用于根据光电探测器记录的散斑信息对散斑图像重建。本发明专利技术的光路结构简单，对光路准确度的要求不高，构建的神经网络能够自动补偿光路中存在的各类误差。

Scattering imaging device and method based on depth learning

【技术实现步骤摘要】
基于深度学习的散射成像装置和方法
本专利技术属于散射成像技术，具体为一种基于深度学习的散射成像装置和方法。
技术介绍
生活中，散射介质无处不在。光波在散射介质中传播时，介质内部无序的散射颗粒将会阻碍光波的自由传播，并且使光波矢方向和相位随机改变。因此光波在经过无序介质后，会呈现出随机散斑图样。这些散斑图样，看似已经失去了原先光场的稳定分布和相关性，但是研究表明，散斑中的弹道光依然保留了部分相干性，因此这些散斑图案中仍然有足够的信息来重建物体的图像。实现散射成像的方法主要有：(1)基于反馈控制的波前整形法(2)相位共轭法(3)基于散斑关联特性的记忆效应法等。但是以上方法各有优缺点和适用条件，波前整形法和相位共轭法成像校准时间很长，难以应对动态或变化较快的无序介质环境；基于散斑关联特性的记忆效应法面对较厚的散射介质时会失效，且由于它是一种介观效应，当被观察物体尺寸较大时也会失效。同时，以上方法都对光路的准确度要求极高，实现的光路也较为复杂。
技术实现思路
本专利技术的目的在于提出了一种基于深度学习的散射成像装置。实现本专利技术目的的技术解决方案为：一种基于深度学习的散射成像装置，包括准直光源、第一透镜、第二透镜、线偏振片、空间光调制器、分束镜、第三透镜、散射介质、光电探测器、图像重建模块；所述准直光源、第一透镜、第二透镜、线偏振片、分束镜依次沿第一光轴设置，所述空间光调制器、第三透镜、散射介质、光电探测器沿第二光轴设置，第一光轴与第二光轴在分束镜处相交且第二光轴垂直于第一光轴方向，其中，散射介质设置在第三透镜的焦平面上；图像重建模块用于根据光电探测器记录的散斑信息对散斑图像重建。优选地，所述图像重建模块由混合神经网络构成，所述混合神经网络包括依次连接的第一卷积层、第一池化层、第二卷积层、第二池化层、第三卷积层、第三池化层、第一重构层、第一丢弃层、第一全连接层、第二丢弃层、第二全连接层、上采样层、第四卷积层、第五卷积层和第六卷积层。优选地，所述第一卷积层采用3*3的卷积核，对输入散斑图提取特征边缘、线条和角等层级，所述第一池化层对第一卷积层提取的特征图进行压缩，得到32*32*16的三维特征图；所述第二卷积层采用3*3的卷积核，从第一卷积层提取的特征中迭代提取特征，并经过第二池化层压缩，得到16*16*32的三维特征图；第三卷积层采用3*3的卷积核，从第二卷积层提取的特征中迭代提取特征，并经第三池化层压缩得到8*8*64的三维特征图；所述第一重构层将8*8*64的三维特征图拉直成1*4096的向量，所述第一丢弃层，通过忽略全连接层中的部分神经元节点，有效防止神经网络过拟合现象；所述第一全连接层设置1024个神经元，后面紧接第二丢弃层，用来防止神经网络过拟合；所述第二全连接层设置196个神经元；第二全连接层中的每个神经元与其前一层的所有神经元进行全连接，用于整合卷积层和池化层中具有类别区分性的局部信息，最终得到1*196向量；第二重构层将1*196向量变为14*14*1的三维特征图；上采样层将14*14*1的三维特征图放大为28*28*1的三维特征图；第四卷积层，采用3*3的卷积核，从28*28*1的三维特征图提取抽象特征，得到28*28*32的三维特征图；第五卷积层采用1*1的卷积核，对第四卷积层输出的28*28*64三维特征图进行降维，得到28*28*16的三维特征图；第六卷积层采用1*1的卷积核，对第五卷积层输出的28*28*16的三维特征图再次降维，得到28*28像素的图片输出。优选地，所述混合神经网络为训练完成的混合神经网络，训练过程具体为：将光电探测器采集的前2000张散斑图作为训练集散斑图对应的2000张MNIST手写数字原始图片作为标签集，计算损失函数，采用Adam算法优化神经网络，其中，损失函数为：其中，y表示真实值，pred表示预测值，N表示样本数量。优选地，所述准直光源为连续型激光器。优选地，所述散射介质为毛玻璃。一种基于深度学习的散射成像方法，具体为：步骤1、将2100张MNIST手写数字图片逐张加载在空间光调制器上，进行幅度调制，用光电探测器逐个记录每张图片对应的散斑图案；步骤2、将光电探测器记录的前2000张散斑图片信息作为混合神经网络的输入，把每张散斑对应的原始图片作为标签，并将损失函数设置为MSE函数：其中，y表示真实值，pred表示预测值，N表示样本数量；采用Adam优化器对神经网络进行训练并保存最优权重。步骤3、将待重建图片加载在空间光调制器上，进行幅度调制，用光电探测器记录待重建图片对应的散斑图案，将散斑图案输入训练好的混合神经网络，获得重建图片。本专利技术与现有技术相比，其显著优点为：(1)本专利技术的光路结构简单，对光路准确度的要求不高，构建的神经网络能够自动补偿光路中存在的各类误差；(2)本专利技术在完成神经网络的训练后，成像速度极快，每张散斑图恢复原始物体的时间不到1s，且成像效果较好；(3)本专利技术构建的混合神经网络结构简单，所需要的训练样本数量较少，大大减少了计算机的运行负担和训练神经网络所花费的时间。下面结合附图对本专利技术做进一步详细的描述。附图说明图1是基于深度学习的散射成像装置示意图图2是构建的混合神经网络结构示意图。图3是利用构建的混合神经网络恢复的结果图，图3(a)为散斑图，图3(b)为混合神经网络恢复的结果图，图3(c)为原始物体图片。具体实施方式如图1所示，一种基于深度学习的散射成像装置，包括准直光源1、第一透镜2、第二透镜3、线偏振片4、空间光调制器5、分束镜6、第三透镜7、散射介质8、光电探测器9、图像重建模块10；所述准直光源1、第一透镜2、第二透镜3、线偏振片4、分束镜6依次沿第一光轴设置，所述空间光调制器5、第三透镜7、散射介质8、光电探测器9沿第二光轴设置，第一光轴与第二光轴在分束镜6处相交且第二光轴垂直于第一光轴方向，其中散射介质8设置在第三透镜7的焦平面上；准直光源1发出的光经过第一透镜2、第二透镜3扩束，经线偏振片4后由分束镜6分束，反射光照射在空间光调制器5上进行调制，调制后的光透过分束镜，经过第三透镜7、散射介质8后，出射的散射光被光电探测器9接收；图像重建模块10用于根据光电探测器9记录的散斑信息对散斑图像重建。进一步的实施例中，所述图像重建模块10由混合神经网络构成，如图2所示，本专利技术的混合神经网络包括依次连接的第一卷积层、第一池化层、第二卷积层、第二池化层、第三卷积层、第三池化层、第一重构层、第一丢弃层、第一全连接层、第二丢弃层、第二全连接层、上采样层、第四卷积层、第五卷积层和第六卷积层。采集得到的散斑图，任意提取64*64像素作为神经网络的输入，第一卷积层采用3*3的卷积核，对输入散斑图提取一些低级的特征边缘、线条和角等层级后，第一池化层对第一卷积层提取的特征图进行压缩，去除冗余信本文档来自技高网...

【技术保护点】
1.一种基于深度学习的散射成像装置，其特征在于，包括准直光源(1)、第一透镜(2)、第二透镜(3)、线偏振片(4)、空间光调制器(5)、分束镜(6)、第三透镜(7)、散射介质(8)、光电探测器(9)、图像重建模块(10)；/n所述准直光源(1)、第一透镜(2)、第二透镜(3)、线偏振片(4)、分束镜(6)依次沿第一光轴设置，所述空间光调制器(5)、第三透镜(7)、散射介质(8)、光电探测器(9)沿第二光轴设置，第一光轴与第二光轴在分束镜(6)处相交且第二光轴垂直于第一光轴方向，其中，散射介质(8)设置在第三透镜(7)的焦平面上；/n图像重建模块(10)用于根据光电探测器(9)记录的散斑信息对散斑图像重建。/n

【技术特征摘要】
1.一种基于深度学习的散射成像装置，其特征在于，包括准直光源(1)、第一透镜(2)、第二透镜(3)、线偏振片(4)、空间光调制器(5)、分束镜(6)、第三透镜(7)、散射介质(8)、光电探测器(9)、图像重建模块(10)；
所述准直光源(1)、第一透镜(2)、第二透镜(3)、线偏振片(4)、分束镜(6)依次沿第一光轴设置，所述空间光调制器(5)、第三透镜(7)、散射介质(8)、光电探测器(9)沿第二光轴设置，第一光轴与第二光轴在分束镜(6)处相交且第二光轴垂直于第一光轴方向，其中，散射介质(8)设置在第三透镜(7)的焦平面上；
图像重建模块(10)用于根据光电探测器(9)记录的散斑信息对散斑图像重建。


2.根据权利要求1所述的基于深度学习的散射成像装置，其特征在于，所述图像重建模块(10)由混合神经网络构成，所述混合神经网络包括依次连接的第一卷积层、第一池化层、第二卷积层、第二池化层、第三卷积层、第三池化层、第一重构层、第一丢弃层、第一全连接层、第二丢弃层、第二全连接层、上采样层、第四卷积层、第五卷积层和第六卷积层。


3.根据权利要求2所述的基于深度学习的散射成像装置，其特征在于，所述第一卷积层采用3*3的卷积核，对输入散斑图提取特征边缘、线条和角等层级，所述第一池化层对第一卷积层提取的特征图进行压缩，得到32*32*16的三维特征图；所述第二卷积层采用3*3的卷积核，从第一卷积层提取的特征中迭代提取特征，并经过第二池化层压缩，得到16*16*32的三维特征图；第三卷积层采用3*3的卷积核，从第二卷积层提取的特征中迭代提取特征，并经第三池化层压缩得到8*8*64的三维特征图；所述第一重构层将8*8*64的三维特征图拉直成1*4096的向量，所述第一丢弃层，通过忽略全连接层中的部分神经元节点，有效防止神经网络过拟合现象；所述第一全连接层设置1024个神经元，后面紧接第二丢弃层，用来防止神经网络过拟合；所述第二全连接层设置196个神经元；第二全连接层中的每个神经元与其前一层的所有神经元进行全连接，用于整合卷积层和池化层中具有类别区分性的局部信息，最终得...

【专利技术属性】
技术研发人员：辛煜，庄秋实，
申请(专利权)人：南京理工大学，
类型：发明
国别省市：江苏;32