一种图像融合方法及装置制造方法及图纸

本申请提供一种图像融合方法及装置，通过获取同一场景下采集的RGB图像和IR图像；获取RGB图像的图像增强权重集；并利用图像增强权重集对RGB图像和IR图像进行融合，生成目标图像的方式，使得在利用RGB图像和IR图像生成目标图像的过程中，实现通过单一格式的IR图像的自身特性(如，成像明亮、图像细节清楚)弥补单一格式的RGB图像的缺陷(如，成像较暗、细节不清楚)的目的，进而保证了RGB图像和IR图像融合生成的目标图像可有效避免现有技术单一格式的RGB图像/IR图像存在缺陷的问题。

【技术实现步骤摘要】

本申请涉及图像融合
，特别是涉及一种图像融合方法及装置。
技术介绍
现有技术中，彩色图像(RGB)和红外图像(IR)技术，均只能单独成像，且彩色图像技术所生成的RGB图像和红外图像技术所生成的IR图像均存在一定的缺陷。例如，RGB图像通常存在成像较暗、图像细节不清楚的问题；IR图像虽然不存在成像较暗、图像细节不清楚的问题，但其通常存在成像与人眼的视觉不匹配，显示不自然的问题。
技术实现思路
有鉴于此，本申请提供一种图像融合方法及装置，通过对RGB图像和IR图像的融合，解决现有单一格式的RGB图像/IR图像存在缺陷的问题。为了实现上述目的，本专利技术实施例提供的技术方案如下：一种图像融合方法，包括：获取同一场景下采集的RGB图像和IR图像；获取所述RGB图像的图像增强权重集；利用所述图像增强权重集对所述RGB图像和IR图像进行融合，生成目标图像。优选的，所述获取同一场景下采集的RGB图像和IR图像的过程包括：获取同一场景下采集的原始RGB图像和原始IR图像；利用预设图像匹配算法，消除所述原始RGB图像和所述原始IR图像之间的视差，生成RGB图像和IR图像。优选的，所述获取所述RGB图像的图像增强权重集之前，该方法还包括：对所述RGB图像进行平滑降噪，生成平滑降噪后的RGB图像。优选的，所述利用所述图像增强权重集对所述RGB图像和IR图像进行融合，生成目标图像之前，该方法还包括：对所述IR图像进行平滑降噪，生成平滑降噪后的IR图像。优选的，所述获取所述RGB图像的图像增强权重集的过程包括：对所述RGB图像进行加权掩膜计算，生成所述RGB图像的加权掩膜，将所述加权掩膜中的各个元素组成的集合称为图像增强权重集。优选的，所述利用所述图像增强权重集对所述RGB图像和IR图像进行融合，生成目标图像的过程包括：对所述RGB图像进行小波变换，生成RGB图像第一尺度层次、RGB图像第二尺度层次、RGB图像第三尺度层次和RGB图像第四尺度层次；对所述IR图像进行小波变换，生成IR图像第一尺度层次、IR图像第二尺度层次、IR图像第三尺度层次和IR图像第四尺度层次；利用所述图像增强权重集对所述RGB图像第一尺度层次和IR图像第一尺度层次进行融合，生成目标第一尺度层次；利用所述图像增强权重集对所述RGB图像第二尺度层次和IR图像第二尺度层次进行融合，生成目标第二尺度层次；利用所述图像增强权重集对所述RGB图像第三尺度层次和IR图像第三尺度层次进行融合，生成目标第三尺度层次；利用所述图像增强权重集对所述RGB图像第四尺度层次和IR图像第四尺度层次进行融合，生成目标第四尺度层次；将所述目标第一尺度层次、目标第二尺度层次、目标第三尺度层次和目标第四尺度层次进行小波反变换，生成目标图像。一种图像融合装置，包括：图像获取单元，用于获取同一场景下采集的RGB图像和IR图像；图像增强权重集获取单元，用于获取所述RGB图像的图像增强权重集；图像融合单元，用于利用所述图像增强权重集对所述RGB图像和IR图像进行融合，生成目标图像。优选的，所述图像获取单元包括：图像获取子单元，用于获取同一场景下采集的原始RGB图像和原始IR图像；图像视差消除单元，用于利用预设图像匹配算法，消除所述原始RGB图像和所述原始IR图像之间的视差，生成RGB图像和IR图像。优选的，还包括第一平滑降噪单元，所述第一平滑降噪单元，用于在获取所述RGB图像的图像增强权重集之前，对所述RGB图像进行平滑降噪，生成平滑降噪后的RGB图像。优选的，还包括第二平滑降噪单元，所述第二平滑降噪单元，用于在利用所述图像增强权重集对所述RGB图像和IR图像进行融合，生成目标图像之前，对所述IR图像进行平滑降噪，生成平滑降噪后的IR图像。优选的，所述图像增强权重集获取单元对所述RGB图像进行加权掩膜计算，生成所述RGB图像的加权掩膜，将所述加权掩膜中的各个元素组成的集合称为图像增强权重集。优选的，所述融合单元包括：第一小波变换单元，用于对所述RGB图像进行小波变换，生成RGB图像第一尺度层次、RGB图像第二尺度层次、RGB图像第三尺度层次和RGB图像第四尺度层次；第二小波变换单元，用于对所述IR图像进行小波变换，生成IR图像第一尺度层次、IR图像第二尺度层次、IR图像第三尺度层次和IR图像第四尺度层次；第一图像融合单元，用于利用所述图像增强权重集对所述RGB图像第一尺度层次和IR图像第一尺度层次进行融合，生成目标第一尺度层次；第二图像融合单元，用于利用所述图像增强权重集对所述RGB图像第二尺度层次和IR图像第二尺度层次进行融合，生成目标第二尺度层次；第三图像融合单元，用于利用所述图像增强权重集对所述RGB图像第三尺度层次和IR图像第三尺度层次进行融合，生成目标第三尺度层次；第四图像融合单元，用于利用所述图像增强权重集对所述RGB图像第四尺度层次和IR图像第四尺度层次进行融合，生成目标第四尺度层次；小波反变换单元，用于将所述目标第一尺度层次、目标第二尺度层次、目标第三尺度层次和目标第四尺度层次进行小波反变换，生成目标图像。本申请提供一种图像融合方法及装置，通过获取同一场景下采集的RGB图像和IR图像；获取RGB图像的图像增强权重集；并利用图像增强权重集对RGB图像和IR图像进行融合，生成目标图像的方式，使得在利用RGB图像和IR图像生成目标图像的过程中，实现通过单一格式的IR图像的自身特性(如，成像明亮、图像细节清楚)弥补单一格式的RGB图像的缺陷(如，成像较暗、细节不清楚)的目的，进而保证了RGB图像和IR图像融合生成的目标图像可有效避免现有技术单一格式的RGB图像/IR图像存在缺陷的问题。附图说明为了更清楚地说明本专利技术实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本专利技术的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。图1为本申请实施例一提供的一种图像融合方法流程图；图2为本申请实施例一提供的一种获取同一场景下采集的RGB图像和IR图像的方法流程图；图3为本申请实施例一提供的一种立体视觉装置的结构示意图；图4为本申请实施例一提供的一种利用图像增强权重集对RGB图像和IR图像进行融合，生成目标图像的方法流程图；图5为本申请实施例二提供的一种图像融合装置的结构示意图。具体实施方式下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。实施例一：图1为本申请实施例一提供的一种图像融合方法流程图。如图1所示，该方法包括：S101、获取同一场景下采集的RGB图像和IR图像；在本申请实施例中，优选的，当需要将RGB图像和IR图像进行融合时，首先需获取同一场景下采集的RGB图像和IR图像。S102、获取RGB图像的图像增强权重集；在本申请实施例中，优选的，RGB图像的图像增强权重集中包括若干个元素，并且元素的个数与RGB图像中像素点的个数相同，并本文档来自技高网...

【技术保护点】
一种图像融合方法，其特征在于，包括：获取同一场景下采集的RGB图像和IR图像；获取所述RGB图像的图像增强权重集；利用所述图像增强权重集对所述RGB图像和IR图像进行融合，生成目标图像。

【技术特征摘要】
1.一种图像融合方法，其特征在于，包括：获取同一场景下采集的RGB图像和IR图像；获取所述RGB图像的图像增强权重集；利用所述图像增强权重集对所述RGB图像和IR图像进行融合，生成目标图像。2.根据权利要求1所述的方法，其特征在于，所述获取同一场景下采集的RGB图像和IR图像的过程包括：获取同一场景下采集的原始RGB图像和原始IR图像；利用预设图像匹配算法，消除所述原始RGB图像和所述原始IR图像之间的视差，生成RGB图像和IR图像。3.根据权利要求1所述的方法，其特征在于，所述获取所述RGB图像的图像增强权重集之前，该方法还包括：对所述RGB图像进行平滑降噪，生成平滑降噪后的RGB图像。4.根据权利要求3所述的方法，其特征在于，所述利用所述图像增强权重集对所述RGB图像和IR图像进行融合，生成目标图像之前，该方法还包括：对所述IR图像进行平滑降噪，生成平滑降噪后的IR图像。5.根据权利要求1-4任意一项所述的方法，其特征在于，所述获取所述RGB图像的图像增强权重集的过程包括：对所述RGB图像进行加权掩膜计算，生成所述RGB图像的加权掩膜，将所述加权掩膜中的各个元素组成的集合称为图像增强权重集。6.根据权利要求1-4任意一项所述的方法，其特征在于，所述利用所述图像增强权重集对所述RGB图像和IR图像进行融合，生成目标图像的过程包括：对所述RGB图像进行小波变换，生成RGB图像第一尺度层次、RGB图像第二尺度层次、RGB图像第三尺度层次和RGB图像第四尺度层次；对所述IR图像进行小波变换，生成IR图像第一尺度层次、IR图像第二尺度层次、IR图像第三尺度层次和IR图像第四尺度层次；利用所述图像增强权重集对所述RGB图像第一尺度层次和IR图像第一尺度层次进行融合，生成目标第一尺度层次；利用所述图像增强权重集对所述RGB图像第二尺度层次和IR图像第二尺度层次进行融合，生成目标第二尺度层次；利用所述图像增强权重集对所述RGB图像第三尺度层次和IR图像第三尺度层次进行融合，生成目标第三尺度层次；利用所述图像增强权重集对所述RGB图像第四尺度层次和IR图像第四尺度层次进行融合，生成目标第四尺度层次；将所述目标第一尺度层次、目标第二尺度层次、目标第三尺度层次和目标第四尺度层次进行小波反变换，生成目标图像。7.一种图像融合装置，其特征在于，包括：图像获取单元，用于获取同一场景下采集的RGB图像和IR图像；图像...

【专利技术属性】
技术研发人员：张志远，
申请(专利权)人：联想北京有限公司，
类型：发明
国别省市：北京;11