一种双模信息增强的图像融合方法、系统及设备技术方案

本发明专利技术公开一种双模信息增强的图像融合方法、系统及设备，包括以下步骤：将红外图像和可见光图像分别进行Gabor滤波器进行滤波，构建包括高频信息处理支路和低频信息处理支路的融合网络模型；计算融合网络模型输出的融合图像与输入的高频特征和低频特征之间的损失函数，对融合网络模型进行训练。本发明专利技术采用光谱平衡损失函数和像素损失函数的组合作为损失函数，用于训练融合网络。能够提高融合网络的稳定性和鲁棒性。通过多次训练迭代计算损失函数值，可以有效地优化模型参数，使其更加稳定性和鲁棒性。在面对一些噪声、失真或变化较大的图像情况下，融合网络仍能够产生具有较高质量和可靠性的融合图像，提高图像融合的实用性和适用范围。

【技术实现步骤摘要】

本专利技术涉及图像融合，尤其涉及一种双模信息增强的图像融合方法、系统及设备。

技术介绍

1、在当今信息化时代，图像处理技术在多个领域中扮演着至关重要的角色，尤其是在军事侦察、医疗诊断、安全监控以及遥感科学中。图像融合技术作为一种重要的图像处理技术，通过将来自多个源的图像数据综合起来，形成一幅新的图像，旨在更有效地提取目标信息和增强图像质量。

2、传统的图像融合技术主要关注于单一模态的图像处理，以提高图像的清晰度或改善其表现形式。然而，这类方法通常无法处理或融合来自不同传感器的数据，如红外与可见光图像的融合，这限制了图像融合技术在实际应用中的广泛性和有效性。随着技术的进步，双模信息增强的图像融合方法应运而生。这种方法不仅关注传统的图像清晰度和视觉效果的提升，更重要的是，它能够处理并融合来自不同模态的信息，如红外图像与可见光图像的结合。红外图像能够显示物体的热分布情况，而可见光图像则提供丰富的颜色和细节信息。通过双模融合，可以在一个图像中同时获取温度信息和视觉细节，极大地增强了图像的信息量和应用价值。尽管双模信息增强的图像融合技术已经取得了显著进展本文档来自技高网...

【技术保护点】

1.一种双模信息增强的图像融合方法，其特征在于，包括以下步骤：

2.根据权利要求1所述的双模信息增强的图像融合方法，其特征在于，所述步骤（1）中，Gabor滤波器的核函数倾斜角度为180°，设置8个不同大小的滤波器，每种图像可以得到8个不同的高频信息，使用原图分别减去8个高频信息，可以得到8个不同的低频信息。

3.根据权利要求1所述的双模信息增强的图像融合方法，其特征在于，所述步骤（2）中，每个卷积块由卷积层和激活函数组成；其中，第一个卷积块使用线性整流激活函数，第一个卷积块的卷积核大小为n1×n1，第二到第四个卷积块使用HardSwish激活函数，第二到第四个卷...

【技术特征摘要】

1.一种双模信息增强的图像融合方法，其特征在于，包括以下步骤：

2.根据权利要求1所述的双模信息增强的图像融合方法，其特征在于，所述步骤（1）中，gabor滤波器的核函数倾斜角度为180°，设置8个不同大小的滤波器，每种图像可以得到8个不同的高频信息，使用原图分别减去8个高频信息，可以得到8个不同的低频信息。

3.根据权利要求1所述的双模信息增强的图像融合方法，其特征在于，所述步骤（2）中，每个卷积块由卷积层和激活函数组成；其中，第一个卷积块使用线性整流激活函数，第一个卷积块的卷积核大小为n1×n1，第二到第四个卷积块使用hardswish激活函数，第二到第四个卷积块的卷积核大小为n2×n2，第五个...

【专利技术属性】
技术研发人员：朱德鹏，詹伟达，李国宁，蒋一纯，郭金鑫，唐雁峰，李锐，郝子强，葛微，
申请(专利权)人：长春理工大学，
类型：发明
国别省市：