图像配准融合方法、装置、设备及介质制造方法及图纸

技术编号:42653805 阅读:33 留言:0更新日期:2024-09-06 01:45
本发明专利技术涉及图像处理技术领域,公开了一种图像配准融合方法、装置、设备及介质,包括:获取同一场景下的初始红外图像与初始可见光图像;对初始红外图像与初始可见光图像进行初步配准;训练用于预测不同模态图像空间位置误差的多模态空间评估器,并通过最小化多模态空间评估器预测的误差值来训练配准模型;将初步配准的红外图像和可见光图像输入至训练好的配准模型中进行二次配准,输出二次配准好的红外图像和可见光图像;对二次配准好的红外图像和可见光图像进行融合处理。这样极大降低了配准任务的难度,能够快速对双光图像进行配准并融合,既弥补了传统算法的效果不足,又降低了深度学习算法的算力要求,进而显著提升图像融合效果。

【技术实现步骤摘要】

本专利技术涉及图像处理,特别是涉及一种图像配准融合方法、装置、设备及介质


技术介绍

1、红外热成像和可见光成像作为两种最为重要的探测手段,在军用装备和民用场合都有着广泛的应用。由于红外图像和可见光图像的成像机理和应用场景不同,因此具有天然的互补性,将二者配准融合可以提高图像信息丰富度。

2、然而图像在融合前需要保证空间位置上的严格配准,否则将导致融合后图像出现闪烁噪声以及重影现象。目前主流的配准算法主要可以分为传统算法配准和深度学习算法配准。传统算法采用基于靶标标定的仿射配准,对每台设备提前标定不同远近距离的靶标数据来生成相应的仿射配准参数,从而达到算法耗时少,实用性好等目的;但是该方法的配准需要人工手动调整待配准的物体距离,无法对整个场景下的物体进行配准。而深度学习算法通常将多模态图像转换到单一模态下,使用单一模态图像配准方法,可以使全场景下的物体都配准;但是该方法复杂度高,耗时长,一般难以部署到终端设备,且配准效果极大地依赖于模态转换是否正确。

3、由此可见,如何有效解决红外图像和可见光图像的配准问题,是本领域人员亟需解决的技本文档来自技高网...

【技术保护点】

1.一种图像配准融合方法,其特征在于,所述方法包括:

2.根据权利要求1所述的图像配准融合方法,其特征在于,训练用于预测不同模态图像空间位置误差的多模态空间评估器,包括:

3.根据权利要求1所述的图像配准融合方法,其特征在于,对所述二次配准好的红外图像和可见光图像进行融合处理,包括:

4.根据权利要求3所述的图像配准融合方法,其特征在于,在采用所述双路径特征提取模块提取所述二次配准好的红外图像和可见光图像的目标特征之后,还包括:

5.根据权利要求4所述的图像配准融合方法,其特征在于,采用下述公式校正目标特征的响应:>

6.根据权利...

【技术特征摘要】

1.一种图像配准融合方法,其特征在于,所述方法包括:

2.根据权利要求1所述的图像配准融合方法,其特征在于,训练用于预测不同模态图像空间位置误差的多模态空间评估器,包括:

3.根据权利要求1所述的图像配准融合方法,其特征在于,对所述二次配准好的红外图像和可见光图像进行融合处理,包括:

4.根据权利要求3所述的图像配准融合方法,其特征在于,在采用所述双路径特征提取模块提取所述二次配准好的红外图像和可见光图像的目标特征之后,还包括:

5.根据权利要求4所述的图像配准融合方法,其特征在于,采用下述公式校正目标特征的响应:

【专利技术属性】
技术研发人员:杨礼吉
申请(专利权)人:苏州睿新微系统技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1