【技术实现步骤摘要】
基于深度学习的光场图像雪花或雨带检测去除方法及设备
本专利技术涉及计算机图像处理
，尤其涉及一种基于深度学习的光场图像雪花或雨带检测去除方法及设备。
技术介绍
随着计算机科学领域在高精尖技术支持下取得巨大发展，计算机视觉领域的研究也获得了巨大的进步。在计算机视觉领域，光场成像技术应用非常广泛。相比于传统相机，光场相机通过单次曝光即可获取场景的四维信息，包括两维空间信息和两维角度信息,因而在图像重建过程中，能够获得更加丰富的图像信息，此外，还能通过数字重聚焦技术解决特殊场合图像的失焦、背景目标过多等问题；通过合成孔径技术实现“透视”监视；在与显微技术融合后，还能得到多视角大景深显微图像，以及重建后的三维立体图。随着对光场技术的深入研究，光场图像处理渐渐被国内外的专家学者所关注，被自动驾驶为代表的工业界用来作为三维场景感知的重要技术手段。光场图像处理的研究重点为深度估计、超分辨率及图像修复等方面。在计算机视觉领域，由于光照、遮挡以及雪花或雨带自身形状和颜色的复杂性，单幅图上的雪花或雨带去除算法只能依据图像中的颜色和...
【技术保护点】
1.一种基于深度学习的光场图像雪花或雨带检测与去除方法，其特征在于，包括：/n步骤S11、检测器利用3D残差网络，检测获取的第一光场图像中雪花或雨带的位置及尺寸；/n步骤S13、生成器采用3D U型网络，通过自学习将检测出的第一光场图像中的雪花或雨带去除，得到第二光场图像；/n步骤S15、判别器获取第二光场图像与第三光场图像，通过判断区分第二光场图像与第三光场图像的真伪来优化判别器的目标函数；/n步骤S17、通过峰值信噪比和结构相似性来评估生成的第二光场图像的质量，若评估结果不符合要求，再次执行步骤S11,S13,S15，直至评估结果满足要求；/n其中，第三光场图像为与第一...
【技术特征摘要】
1.一种基于深度学习的光场图像雪花或雨带检测与去除方法，其特征在于，包括：
步骤S11、检测器利用3D残差网络，检测获取的第一光场图像中雪花或雨带的位置及尺寸；
步骤S13、生成器采用3DU型网络，通过自学习将检测出的第一光场图像中的雪花或雨带去除，得到第二光场图像；
步骤S15、判别器获取第二光场图像与第三光场图像，通过判断区分第二光场图像与第三光场图像的真伪来优化判别器的目标函数；
步骤S17、通过峰值信噪比和结构相似性来评估生成的第二光场图像的质量，若评估结果不符合要求，再次执行步骤S11,S13,S15，直至评估结果满足要求；
其中，第三光场图像为与第一光场图像在同一场景下的无雪花或雨带的光场图像。
2.根据权利要求1所述的方法，其特征在于，在所述步骤S11之前，还包括：
采集第一光场图像及第三光场图像。
3.根据权利要求1所述的方法，其特征在于，所述利用3D残差网络，检测获取的第一光场图像中雪花或雨带的位置及尺寸，包括：
利用3D残差网络，得到第一光场图像的雪花或雨带数据的掩膜。
4.根据权利要求3所述的方法，其特征在于，所述利用3D残差网络，得到第一光场图像的雪花或雨带数据的掩膜，包括：
根据3D残差网络设定残差块；
设定第一、第二卷积层参数，每个残差块分别使用第一卷积层及第二卷积层；
其中，在使用第一卷积层及第二卷积层之后，添加标准化操作和长短时记忆网络，得到第一光场图像的雪花或雨带数据的掩膜。
5.根据权利要求4所述的方法，其特征在于，所述采用3DU型网络，将检测出的第一光场图像中的雪花或雨带去除，得到第二光场图像，包括：
根据所述掩膜，利用3DU型网络去除第一光场图像中的雪花或雨带，得到第二光场图像。
6.根据权利要求5所述的方法，其特征在于，所述利用3DU型网络去除第一光场图像中的雪花或雨带，得到第二光场图像，包括：
根据位置关系，将3DU型网络分为编码器网络与解码器网络；
分别采用编码器网络及解码...
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。