基于语义分割驱动的SAR-光学图像转换方法技术

本发明专利技术提供了一种基于语义分割驱动的SAR‑光学图像转换方法。首先，收集SAR和光学图像数据，并制作其语义分割标签；然后，分别利用SAR与光学图像各自训练得到对应的语义分割模型；接着，通过在现有转换模型基础框架下增加两条下游任务分支，构建得到基于语义分割任务驱动的转换模型，设计模型的损失函数，并利用收集的数据对模型进行训练；最后，利用训练好的模型将输入的SAR图像转换为光学图像。由于将语义分割任务引入到转换模型中，在模型训练时能够不断为其提供指引信息并进行反馈，使得转换得到的光学图像中目标的完整性、清晰度等得到提升，具有更好的图像转换效果。

【技术实现步骤摘要】

本专利技术属计算机视觉、图像转换、sar图像解译，具体涉及一种基于语义分割驱动的sar-光学图像转换方法。

技术介绍

1、在遥感图像技术的演进过程中，可见光主导的光学遥感成像和基于电磁波的合成孔径雷达(sar)成像，成为对地观测不可或缺的两大技术。sar成像以其主动式探测和不受天气限制的成像特性，使得它能在任何时间和天气条件下进行成像，这无疑为众多应用领域带来了重要价值。然而，其复杂的成像机制导致sar图像的解读变得相当困难，这也制约了其在实际应用中的广泛运用。

2、与此同时，光学遥感图像凭借其高空间分辨率和丰富的色彩信息而备受青睐，但不幸的是，它们容易受到恶劣天气的干扰，这在一定程度上限制了其应用范围。尽管如此，sar图像与光学图像在许多应用场景中却具有互补性。然而，由于两者在物理属性和成像原理上存在显著差异，导致它们之间存在明显的区别。

3、近年来，随着图像转换技术的迅猛发展，特别是基于生成对抗网络的sar到光学图像转换(s2oit)技术，为sar图像的解读提供了新的视角。为了结合sar和光学图像的优势，研究人员们提出了一系列图本文档来自技高网...

【技术保护点】

1.一种基于语义分割驱动的SAR-光学图像转换方法，其特征在于步骤如下：

2.如权利要求1所述的一种基于语义分割驱动的SAR-光学图像转换方法，其特征在于：从公开数据集、卫星图像数据库或自行采集获取SAR图像和光学图像。

3.如权利要求1所述的一种基于语义分割驱动的SAR-光学图像转换方法，其特征在于：所述的为数据集中的图像制作像素级二分类语义分割标签采用人工制作或机器制作方式，其中，机器制作是指采用包括EISeg在内的相关软件工具进行制作。

4.如权利要求1所述的一种基于语义分割驱动的SAR-光学图像转换方法，其特征在于：所述的数据预处理包括图像放缩...

【技术特征摘要】

1.一种基于语义分割驱动的sar-光学图像转换方法，其特征在于步骤如下：

2.如权利要求1所述的一种基于语义分割驱动的sar-光学图像转换方法，其特征在于：从公开数据集、卫星图像数据库或自行采集获取sar图像和光学图像。

3.如权利要求1所述的一种基于语义分割驱动的sar-光学图像转换方法，其特征在于：所述的为数据集中的图像制作像素级二分类语义分割标签采用人工制作或机器制作方式，其中，机器制作是指采用包括eiseg在内的相关软件工具进行制作。

4.如权利要求1所述的一种基于语义分割驱动的sar-光学图像转换方法，其特征在于：所述的数据预处理...

【专利技术属性】
技术研发人员：李晖晖，柳洲，刘航，
申请(专利权)人：西北工业大学，
类型：发明
国别省市：