当前位置: 首页 > 专利查询>三峡大学专利>正文

一种用于昼夜图像转换的Forkgan神经网络的构建方法技术

技术编号:43879628 阅读:25 留言:0更新日期:2024-12-31 19:02
一种用于昼夜图像转换的Forkgan神经网络的构建方法,包括以下步骤:步骤1:建立训练图像数据集,所述图像数据集包括黑夜交通图像数据集和白天交通图像数据集;步骤2:构建改进后的Forkgan网络模型包含了本发明专利技术提出的三个改进模块;步骤3:基于损失,网络收敛。本发明专利技术的目的是为了解决现有昼夜图像转换中所存在的像素空间距离描述度差、高层特征细节丧失、反卷积会因为局部信息完全丢失造成棋盘效应,导致的图像容易丢失细节信息的技术问题,而提出的一种用于昼夜图像转换的Forkgan神经网络的构建方法。

【技术实现步骤摘要】

本专利技术涉及图像处理,具体是涉及用于昼夜图像转换的forkgan神经网络的构建方法。


技术介绍

1、夜间视觉任务是深度学习领域的众多挑战之一。在某个领域的数据集上训练的网络模型通常在其他领域下会面临性能下降的问题,即数据偏差。以昼夜两种情况的目标检测为例,一个在白天数据集上训练的目标检测模型,若放在夜间图像上一般会出现30%-50%的准确度下降。最直接的解决方法是在夜间条件下收集更多带标签的数据,然后重新训练,但这种方法成本高,耗时长,而且没有从根本上解决数据偏差的问题。更好的方法是领域自适应,即利用某一领域的图像自动合成另一领域的图像。在昼夜转换领域下,研究者们通常有两种策略:一种是数据增强方法,人工处理白天图片为夜晚图片,再利用白天图片作为标签训练网络,这种方法要求数据集中白天和夜晚图片成对出现,这无疑加大了数据准备的难度,也无法解决一些复杂的图像转换问题,如昼夜转换中的光照变化;另一种则根据夜间图像的域不变特征,使用生成式网络生成白天的图像,这种方法不强制要求配对的数据集,而且能捕捉昼夜两种情况下光照和颜色等细微的差异。

2、针对像素空本文档来自技高网...

【技术保护点】

1.一种用于昼夜图像转换的Forkgan神经网络的构建方法,其特征在于,包括以下步骤:

2.根据权利要求1所述的方法,其特征在于,在步骤2中,所述改进后的Forkgan网络模型具体包括两部分:

3.根据权利要求2所述的方法,其特征在于,所述多尺度特征融合模块具体为:

4.根据权利要求3所述的方法,其特征在于,所述位置注意力机制模块PAM具体为:

5.根据权利要求3所述的方法,其特征在于,所述卷积块注意力机制模块CBAM具体为:

6.根据权利要求2所述的方法,其特征在于,所述卷积上采样模块的结构示意图,卷积上采样模块的结构为:原图...

【技术特征摘要】

1.一种用于昼夜图像转换的forkgan神经网络的构建方法,其特征在于,包括以下步骤:

2.根据权利要求1所述的方法,其特征在于,在步骤2中,所述改进后的forkgan网络模型具体包括两部分:

3.根据权利要求2所述的方法,其特征在于,所述多尺度特征融合模块具体为:

4.根据权利要求3所述的方法,其特征在于,所述位置注意力机制模块pam具体为:

5.根据权利要求3所述的方法,其特征在于,所述卷积块注意力机制模块cbam具体为:

6.根据权利要求2所述的方法,其特征在于,所述卷积上采样模块的结构示意图,卷积上采样模块的结构为:原图大小为的图像输入编码器输出形状的低分辨率特征图,低分辨率特征图输入卷积、批量归一化、relu激活函数的输出通过pixelshuffle方法对特征图进行像素重排,将特征图的通道信息重新排列到空间维度,从而实现上采样;其中,pixelshuffle方法对特征图进行像素重排的具体原理为:原图大小为h×w×3,经过编码器后得到h×w×...

【专利技术属性】
技术研发人员:雷帮军艾博文
申请(专利权)人:三峡大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1