基于双重注意融合模态和特定模态联合网络的土地覆盖分类方法技术

技术编号:40379746 阅读:20 留言:0更新日期:2024-02-20 22:18
本发明专利技术公开一种基于双重注意融合模态和特定模态联合网络的土地覆盖分类方法,具体地,该方法提出了新颖的编码级融合和解码级融合的双重注意融合模态和特定模态联合网络,以获得优秀的多源土地覆盖分类图。该网络架构不仅提高了多源遥感影像土地覆盖分类性能,还改善了单源遥感影像土地覆盖分类精度。此外,为更合理地聚合光学影像和SAR影像的异构特征,本发明专利技术设计了一种多模态双重注意融合模块。本发明专利技术在DFC2020数据集上进行了广泛的实验,其中对比实验评价了本发明专利技术方法的优越性能,消融实验验证了所提架构和模块的有效性。

【技术实现步骤摘要】

本专利技术涉及土地覆盖分类,尤其涉及一种基于双重注意融合模态和特定模态联合网络的土地覆盖分类方法


技术介绍

1、随着对地观测技术的高速发展,大量的搭载着不同类型传感器的遥感卫星被运行以稳定地周期性地观察地球。因此,地球上的大部分区域都可以获得多源遥感影像,例如,包含丰富的光谱和空间信息的光学影像和具有全天时全天候能力的合成孔径雷达影像。这种多源遥感影像可以提供关于土地属性的各种互补信息。具有高空间分辨率的光学影像不仅可以提供丰富的纹理信息,还可以通过其包含的多个不同波段的特性呈现地物的本质特征。然而,因光学传感器是被动式成像,受自然气候的影响,光学影像不能总是获得。相反,主动式成像的sar不受天气环境的限制,并能提供独特的地物目标的散射和几何特征,但受固有的斑点噪声的影响,sar影像的分辨率、信噪比相对较低、语义相对难解释。这就鼓励研究人员在一些应用中,联合使用互为补充的光学影像和sar影像。许多研究已表明,融合光学影像的光谱信息和sar影像的散射(振幅)信息有利于土地覆盖分类,在农业资源统计、生态环境监测、城市建设规划等方面发挥着重要作用。

...

【技术保护点】

1.一种基于双重注意融合模态和特定模态联合网络的土地覆盖分类方法,其特征在于,包括:

2.根据权利要求1所述的基于双重注意融合模态和特定模态联合网络的土地覆盖分类方法,其特征在于,所述双重注意融合模态和特定模态联合网络包括融合模态和特定模态联合学习的编码级特征融合架构,融合模态和特定模态联合学习的解码级特征融合架构。

3.根据权利要求2所述的基于双重注意融合模态和特定模态联合网络的土地覆盖分类方法,其特征在于,所述融合模态和特定模态联合学习的编码级特征融合架构由两个编码器、一个特征融合模块、三个串联的解码器和分割头组成,该两个编码器分别用于对输入的光学影像和SAR...

【技术特征摘要】

1.一种基于双重注意融合模态和特定模态联合网络的土地覆盖分类方法,其特征在于,包括:

2.根据权利要求1所述的基于双重注意融合模态和特定模态联合网络的土地覆盖分类方法,其特征在于,所述双重注意融合模态和特定模态联合网络包括融合模态和特定模态联合学习的编码级特征融合架构,融合模态和特定模态联合学习的解码级特征融合架构。

3.根据权利要求2所述的基于双重注意融合模态和特定模态联合网络的土地覆盖分类方法,其特征在于,所述融合模态和特定模态联合学习的编码级特征融合架构由两个编码器、一个特征融合模块、三个串联的解码器和分割头组成,该两个编码器分别用于对输入的光学影像和sar影像进行编码。

4.根据权利要求3所述的基于双重注意融合模态和特定模态联合网络的土地覆盖分类方法,其特征在于,所述融合模态和特定模态联合学习的解码级特征融合架构由两个编码器-解码器、一个特征融合模块和三个分割头组成,该两个编码器-解码器分别用于对输入的光学影像和sar影像进行编解码。

5.根据权利要求4所述的基于双重注意融合模态和特定模态联合网络的土地覆盖分类方法,其特征在于,使用由imagenet初始化...

【专利技术属性】
技术研发人员:刘智刘潇王淑香林雨准芮杰左溪冰杨小兵王番邹慧君金飞
申请(专利权)人:中国人民解放军战略支援部队信息工程大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1