本申请公开了一种图像融合方法和装置、存储介质和电子装置，其中，该方法包括：对待融合的至少一个图像分别进行多个方向的图像变换，得到与至少一个图像对应的低频图像组和高频图像组，其中，低频图像组包括各图像分别对应的低频图像，高频图像组包括各图像分别对应的高频图像；按照预设尺寸分别对高频图像组中的图像进行分块处理，得到与高频图像组所对应的多个图像块对；分别对多个图像块对中的每个图像块对内的图像块进行图像块融合，得到多个融合图像块，对多个融合图像块进行图像块拼接，得到高频融合图像；对低频图像组中的图像进行图像融合，得到低频融合图像；对高频融合图像和低频融合图像进行图像逆变换，得到至少一个图像的融合图像。图像的融合图像。图像的融合图像。
【技术实现步骤摘要】
图像融合方法和装置、存储介质和电子装置
[0001]本申请涉及计算机领域，具体而言，涉及一种图像融合方法和装置、存储介质和电子装置。
技术介绍
[0002]相关技术中，多传感器图像(例如，可见光图像、红外图像等)融合可以广泛应用在目标识别、机器视觉、遥感及医学图像处理等方面。为了解决多尺度变换融合的方法需要处理大量数据，效率不高的问题，可以采用压缩感知的方式进行多传感器图像融合，基于压缩感知的方法可以在采样的同时进行压缩，以降低数据量，提高数据处理效率。
[0003]例如，可以对可见光图像和红外图像进行单层小波分解；对小波分解后的低频子带系数(子带系数为图像)进行融合，得到融合后的低频子带系数；对高频子带系数进行全局加权融合，得到融合后的高频子带系数；对融合后的低频子带系数和高频子带系数进行小波逆变换，得到融合后的图像。
[0004]然而，对高频子带系数进行全局加权融合，融合计算的复杂度高，计算量大，导致图像融合的效率较低。由此可见，相关技术中的图像融合方法，存在由于融合计算的复杂度高导致的图像融合的效率低的问题。
技术实现思路
[0005]本申请实施例提供了一种图像融合方法和装置、存储介质和电子装置，以至少解决相关技术中的图像融合方法存在由于融合计算的复杂度高导致的图像融合的效率低的问题。
[0006]根据本申请实施例的一个方面，提供了一种图像融合方法，包括：对待融合的至少一个图像分别进行多个方向的图像变换，得到与所述至少一个图像对应的低频图像组和高频图像组，其中，低频图像组包括各图像分别对应的低频图像，所述高频图像组包括各图像分别对应的高频图像；按照预设尺寸分别对所述高频图像组中的图像进行分块处理，得到与所述高频图像组所对应的多个图像块对；分别对所述多个图像块对中的每个图像块对内的图像块进行图像块融合，得到多个融合图像块，并对所述多个融合图像块进行图像块拼接，得到高频融合图像；对所述低频图像组中的图像进行图像融合，得到低频融合图像；对所述高频融合图像和所述低频融合图像进行图像逆变换，得到所述至少一个图像的融合图像。
[0007]根据本申请实施例的另一个方面，提供了一种图像融合装置，包括：变换单元，用于对待融合的至少一个图像分别进行多个方向的图像变换，得到与所述至少一个图像对应的低频图像组和高频图像组，其中，所述低频图像组包括各图像分别对应的低频图像，所述高频图像组包括各图像分别对应的高频图像；处理单元，用于按照预设尺寸分别对所述高频图像组中的图像进行分块处理，得到与所述高频图像组所对应的多个图像块对；执行单元，用于分别对所述多个图像块对中的每个图像块对内的图像块进行图像块融合，得到多
个融合图像块，并对所述多个融合图像块进行图像块拼接，得到高频融合图像；融合单元，用于对所述低频图像组中的图像进行图像融合，得到低频融合图像；逆变换单元，用于对所述高频融合图像和所述低频融合图像进行图像逆变换，得到所述至少一个图像的融合图像。
[0008]在一个示例性实施例中，所述变换单元包括：变换模块，用于对待融合的所述至少一个图像分别进行一层四个方向的非下采样轮廓波变换，得到所述低频图像组和所述高频图像组。
[0009]在一个示例性实施例中，所述执行单元包括：第一执行模块，用于将测量矩阵与所述每个图像块对中的图像块分别相乘，得到多个观测图像块对，其中，所述测量矩阵的列数与所述每个图像块对中的图像块的行数相同；融合模块，用于基于像素点的区域能量之间的匹配度对所述多个观测图像块对中的每个观测图像块对的像素点分别进行融合，得到多个融合测量图像块；重构模块，用于使用感知矩阵对所述多个融合测量图像块中的每个融合测量图像块进行重构，得到所述多个融合图像块，其中，所述感知矩阵是所述测量矩阵和与所述测量矩阵匹配的冗余字典相乘得到的。
[0010]在一个示例性实施例中，所述融合模块包括：第一执行子模块，用于将所述每个观测图像块对分别作为当前观测图像块对执行以下操作，得到所述多个融合测量图像块：将所述当前观测图像块对中的各像素点作为当前像素点分别执行以下融合操作：确定所述当前观测图像块对在所述当前像素点的区域能量之间的匹配度，得到当前匹配度；在所述当前匹配度大于或者等于匹配度阈值的情况下，对所述当前观测图像块对在所述当前像素点的像素值进行加权求和，得到与所述当前观测图像块对所对应的融合测量图像块中的所述当前像素点的像素值；在所述当前匹配度小于匹配度阈值的情况下，将目标观测图像块在所述当前像素点的像素值，确定为与所述当前观测图像块对所对应的融合测量图像块中的所述当前像素点的像素值，其中，所述目标观测图像块为所述当前观测图像块对中在所述当前像素点的区域能量最大的观测图像块。
[0011]在一个示例性实施例中，所述装置还包括：确定单元，用于在所述对所述当前观测图像块对在所述当前像素点的像素值进行加权求和之前，将第一差值与第二差值的比值与预设系数的乘积，确定为第一权值，将1与所述第一权值的差值，确定为第二权值，其中，所述第一差值为所述当前匹配度与所述匹配度阈值的差值，所述第二差值为1与所述匹配度阈值的差值，所述第一权值为所述当前观测图像块对中对应的所述当前像素点的像素值最大的观测图像块对应的加权系数，所述第二权值为所述当前观测图像块对中对应的所述当前像素点的像素值最小的观测图像块对应的加权系数。
[0012]在一个示例性实施例中，所述重构模块包括：第二执行子模块，用于使用所述感知矩阵对所述每个融合测量图像块中的每一列分别执行以下重构操作，得到所述多个融合图像块，其中，在执行以下重构操作的过程中，所述每一列为当前列：使用所述感知矩阵构造与所述当前列匹配的稀疏系数；将所述稀疏系数与所述冗余字典相乘，得到与所述每个融合测量图像块对应的融合图像块中的所述当前列。
[0013]在一个示例性实施例中，所述融合单元包括：第二执行模块，用于分别将所述低频图像组中的图像的各像素点作为当前像素点执行以下融合操作，得到所述低频融合图像的所述当前像素点的像素值：分别确定所述低频图像组的各个图像中以所述当前像素点为中
心的预设领域内的一组像素点的像素值方差，得到与所述各个图像对应的领域方差；将与所述各个图像对应的领域方差中的最大领域方差，确定为所述低频融合图像中的所述当前像素点的像素值。
[0014]根据本申请实施例的又一方面，还提供了一种计算机可读的存储介质，该计算机可读的存储介质中存储有计算机程序，其中，该计算机程序被设置为运行时执行上述图像融合方法。
[0015]根据本申请实施例的又一方面，还提供了一种电子装置，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其中，上述处理器通过计算机程序执行上述的图像融合方法。
[0016]在本申请实施例中，采用对高频图像进行分块之后对得到的高频图像块进行融合的方式，通过对待融合的至少一个图像分别进行多个方向的图像变换，得到与至少一个图像对应的低频图像组和高频图像组；其中，低频图像组包括各图像分别对应的低频图像，高频图像组本文档来自技高网...
【技术保护点】
【技术特征摘要】
1.一种图像融合方法，其特征在于，包括：对待融合的至少一个图像分别进行多个方向的图像变换，得到与所述至少一个图像对应的低频图像组和高频图像组，其中，所述低频图像组包括各图像分别对应的低频图像，所述高频图像组包括各图像分别对应的高频图像；按照预设尺寸分别对所述高频图像组中的图像进行分块处理，得到与所述高频图像组所对应的多个图像块对；分别对所述多个图像块对中的每个图像块对内的图像块进行图像块融合，得到多个融合图像块，并对所述多个融合图像块进行图像块拼接，得到高频融合图像；对所述低频图像组中的图像进行图像融合，得到低频融合图像；对所述高频融合图像和所述低频融合图像进行图像逆变换，得到所述至少一个图像的融合图像。2.根据权利要求1所述的方法，其特征在于，所述对待融合的至少一个图像分别进行多个方向的图像变换，得到与所述至少一个图像对应的低频图像组和高频图像组，包括：对待融合的所述至少一个图像分别进行一层四个方向的非下采样轮廓波变换，得到所述低频图像组和所述高频图像组。3.根据权利要求1所述的方法，其特征在于，所述分别对所述多个图像块对中的每个图像块对内的图像块进行图像块融合，得到多个融合图像块，包括：将测量矩阵与所述每个图像块对中的图像块分别相乘，得到多个观测图像块对，其中，所述测量矩阵的列数与所述每个图像块对中的图像块的行数相同；基于像素点的区域能量之间的匹配度对所述多个观测图像块对中的每个观测图像块对的像素点分别进行融合，得到多个融合测量图像块；使用感知矩阵对所述多个融合测量图像块中的每个融合测量图像块进行重构，得到所述多个融合图像块，其中，所述感知矩阵是所述测量矩阵和与所述测量矩阵匹配的冗余字典相乘得到的。4.根据权利要求3所述的方法，其特征在于，所述基于像素点的区域能量之间的匹配度对所述多个观测图像块对中的每个观测图像块对的像素点分别进行融合，得到多个融合测量图像块，包括：将所述每个观测图像块对分别作为当前观测图像块对执行以下操作，得到所述多个融合测量图像块：将所述当前观测图像块对中的各像素点作为当前像素点分别执行以下融合操作：确定所述当前观测图像块对在所述当前像素点的区域能量之间的匹配度，得到当前匹配度；在所述当前匹配度大于或者等于匹配度阈值的情况下，对所述当前观测图像块对在所述当前像素点的像素值进行加权求和，得到与所述当前观测图像块对所对应的融合测量图像块中的所述当前像素点的像素值；在所述当前匹配度小于匹配度阈值的情况下，将目标观测图像块在所述当前像素点的像素值，确定为与所述当前观测图像块对所对应的融合测量图像块中的所述当前像素点的像素值，其中，所述目标观测图像块为所述当前观测图像块对中在所述当前像素点的区域能量最大的观测图像块。
5.根据权利要求4所述的方法，其特征在于，在所述对所述当前观测...
【专利技术属性】
技术研发人员：余彦，殷俊，
申请(专利权)人：浙江大华技术股份有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。