基于可见光图像增强的红外图像分割方法及装置制造方法及图纸

技术编号:41344661 阅读:16 留言:0更新日期:2024-05-20 10:00
本发明专利技术提供一种基于可见光图像增强的红外图像分割方法及装置,该方法包括:将待分割红外图像输入红外图像分割模型中的红外图像编码器中,得到红外图像编码器输出的待分割红外图像的特征;确定待分割红外图像的特征与预设目标类别的参考可见光图像的特征之间的相似度图,参考可见光图像的特征预先基于红外图像分割模型中的可见光图像编码器得到;将待分割红外图像的特征和相似度图输入红外图像分割模型中的红外图像解码器中,得到红外图像解码器输出的待分割红外图像的预测分割结果。本发明专利技术仅需一定量有标注的红外图像和预设目标类别的少量可见光图像训练模型,在测试阶段只需提供红外图像作为输入,降低测试复杂度,提高测试效率。

【技术实现步骤摘要】

本专利技术涉及图像处理,尤其涉及一种基于可见光图像增强的红外图像分割方法及装置


技术介绍

1、相比于可见光成像,红外成像技术在恶劣天气条件(雨、雪、雾、霾等)和恶劣成像条件(反光、暗光等)下具有天然的优势。然而,由于红外图像分辨率低、纹理信息弱、缺乏颜色信息,红外图像分割具有极大的挑战性。

2、为进一步提升红外图像分割的精度,现有技术中出现两种新的研究思路。一种方法是将可见光图像作为额外的模态,在神经网络的不同层将红外和可见光模态的特征进行融合。该类方法在测试阶段需要同时输入红外和可见光图像,并且需要它们之间严格配准。在测试阶段需要同时提供可见光和红外图像,无法用于仅有红外图像可用的场合。

3、另一种方法仅在训练时利用可见光图像的信息,并将可见光域的知识迁移到红外域。这类方法在测试阶段无需可见光图像,但需要提供大量无标签的红外数据,然而对于有些应用场景(例如军事)难以满足该要求,而且需要提供一定数量精确配准的红外和可见光数据,这在大部分情况下也难以满足。


技术实现思路

1、本专利技术本文档来自技高网...

【技术保护点】

1.一种基于可见光图像增强的红外图像分割方法,其特征在于,包括:

2.根据权利要求1所述的基于可见光图像增强的红外图像分割方法,其特征在于,在所述将待分割红外图像输入红外图像分割模型中的红外图像编码器中,得到所述红外图像编码器输出的所述待分割红外图像的特征之前,还包括:

3.根据权利要求2所述的基于可见光图像增强的红外图像分割方法,其特征在于,所述确定所述第一红外图像样本的特征和所述可见光图像样本的特征之间的损失,包括:

4.根据权利要求2所述的基于可见光图像增强的红外图像分割方法,其特征在于,所述将所述第一红外图像样本输入所述红外图像编码器中,得到所...

【技术特征摘要】

1.一种基于可见光图像增强的红外图像分割方法,其特征在于,包括:

2.根据权利要求1所述的基于可见光图像增强的红外图像分割方法,其特征在于,在所述将待分割红外图像输入红外图像分割模型中的红外图像编码器中,得到所述红外图像编码器输出的所述待分割红外图像的特征之前,还包括:

3.根据权利要求2所述的基于可见光图像增强的红外图像分割方法,其特征在于,所述确定所述第一红外图像样本的特征和所述可见光图像样本的特征之间的损失,包括:

4.根据权利要求2所述的基于可见光图像增强的红外图像分割方法,其特征在于,所述将所述第一红外图像样本输入所述红外图像编码器中,得到所述红外图像编码器输出的所述第一红外图像样本的特征;将所述可见光图像样本输入所述可见光图像编码器中,得到所述可见光图像编码器输出的所述可见光图像样本的特征,包括:

5.根据权利要求4所述的基于可见光图像增强的红外图像分割方法,其特征在于,所述将所述第一红外图像样本和所述可见光图像样本进行融合,得...

【专利技术属性】
技术研发人员:丁昆张好剑孟高峰潘春洪
申请(专利权)人:中国科学院自动化研究所
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1