一种图像融合方法及设备技术

本发明专利技术适用于图像处理技术领域，提供了一种图像融合方法及设备，包括：获取待处理的目标源图像；所述目标源图像包括同一场景对应的待处理的目标黑白源图像和待处理的目标彩色源图像；将所述目标源图像输入到预设的图像融合模型进行处理，得到由所述目标黑白源图像和所述目标彩色源图像融合成的目标彩色图像；在训练过程中，所述图像融合模型的输入为所述样本图像组，所述图像融合模型的输出为由所述样本黑白源图像和所述样本彩色源图像融合成的彩色图像。上述技术方案，通过端到端的神经网络模型将黑白加彩色双摄图像融合得到增强后的融合图像，无需进行像素级的精准对齐就可生成融合图像，有效避免传统融合方法存在的重影问题，实现良好的图像融合效果。

【技术实现步骤摘要】
一种图像融合方法及设备
本专利技术属于图像处理
，尤其涉及一种图像融合方法及设备。
技术介绍
自功能机时代开始，拍照就成为手机中的常用功能。随着智能手机的普及，手机摄像头的应用越来越广泛，手机拍照功能也越发优异。优异的拍照性能已成为智能手机的一大卖点，围绕拍照功能的技术创新层次不穷，光圈和传感器尺寸也越来越大，这些技术和硬件的升级对手机拍照无论是照片质量还是整体体验都有非常大的提升。在追求照片质量的同时，手机机身的轻薄化也是手机发展的一大趋势，现有技术在手机上采用了双摄像头模组，提高了拍摄照片的质量同时也满足了手机机身轻薄化的需求。然而，直接使用双摄像头获得的是两张不同的图像，因此，还需要利用图像融合算法将两张双摄图像进行融合，才能得到最终的双摄增强图像。现有的图像融合是将多源信道所采集到的关于同一目标的图像数据经过图像处理计算机技术等，最大限度的提取各自信道中的有利信息，最后综合成高质量的图像，以提高图像信息的利用率。当前图像融合的前提条件是待融合的多源图像已经逐像素精准对齐，以确保多源图像逐像素对齐，即每个像素点对应的成像位置本文档来自技高网...

【技术保护点】
1.一种图像融合方法，其特征在于，包括：/n获取待处理的目标源图像；所述目标源图像包括同一场景对应的待处理的目标黑白源图像和待处理的目标彩色源图像；/n将所述目标源图像输入到预设的图像融合模型进行处理，得到由所述目标黑白源图像和所述目标彩色源图像融合成的目标彩色图像；其中，所述图像融合模型由样本图像集训练得到，所述样本图像集包括多个样本图像组，所述样本图像组包括同一场景对应的样本黑白源图像、样本彩色源图像和样本彩色参照图像，在训练过程中，所述图像融合模型的输入为所述样本图像组，所述图像融合模型的输出为由所述样本黑白源图像和所述样本彩色源图像融合成的彩色图像。/n

【技术特征摘要】
1.一种图像融合方法，其特征在于，包括：
获取待处理的目标源图像；所述目标源图像包括同一场景对应的待处理的目标黑白源图像和待处理的目标彩色源图像；
将所述目标源图像输入到预设的图像融合模型进行处理，得到由所述目标黑白源图像和所述目标彩色源图像融合成的目标彩色图像；其中，所述图像融合模型由样本图像集训练得到，所述样本图像集包括多个样本图像组，所述样本图像组包括同一场景对应的样本黑白源图像、样本彩色源图像和样本彩色参照图像，在训练过程中，所述图像融合模型的输入为所述样本图像组，所述图像融合模型的输出为由所述样本黑白源图像和所述样本彩色源图像融合成的彩色图像。


2.如权利要求1所述的图像融合方法，其特征在于，所述获取待处理的目标源图像，包括：
获取同一场景对应的初始目标黑白源图像和初始目标彩色源图像；
对所述初始目标黑白源图像和所述初始目标彩色源图像进行校准，得到待处理的目标黑白源图像和待处理的目标彩色源图像。


3.如权利要求1-2任一项所述的图像融合方法，其特征在于，在将所述目标源图像输入到预设的图像融合模型进行处理，得到由所述目标黑白源图像和所述目标彩色源图像融合成的目标彩色图像之前，还包括：
获取训练样本数据，基于所述训练样本数据获取样本图像集；
通过对抗生成网络对所述样本图像集进行训练，得到预设的图像融合模型；所述对抗生成网络包括生成器网络和判别器网络。


4.如权利要求3所述的图像融合方法，其特征在于，所述获取训练样本数据，基于所述训练样本数据获取样本图像集，包括：
获取同一场景的第一分辨率黑白源图像和第一分辨彩色图像；
将所述第一分辨彩色图像进行下采样处理，获取彩色源图像；
将同一场景对应的所述黑白源图像、所述第一分辨彩色参照图像和所述彩色源图像标记为一组样本图像组。


5.如权利要求3所述的图像融合方法，其特征在于，所述通过对抗生成网络对所述样本图像集进行训练，得到预设的图像融合模型，包括：
分别将不同场景各自对应的所述样本黑白源图像和所述样本彩色源图像输入至所...

【专利技术属性】
技术研发人员：任世强，
申请(专利权)人：武汉TCL集团工业研究院有限公司，
类型：发明
国别省市：湖北;42