图像处理方法、装置、存储介质和计算机设备制造方法及图纸

本发明专利技术涉及一种图像处理方法、装置、存储介质和计算机设备，包括：获取多帧对于目标采集得到的图像；各所述图像的曝光度不同；所述曝光度包括目标曝光度、高于所述目标曝光度的第一曝光度及低于所述目标曝光度的第二曝光度；校正各所述图像中的像素值，得到各所述图像各自相应的校正图像；分别按照每个图像各自的曝光度所匹配的编码方式，对每个所述图像和相应的校正图像进行编码，得到与每个所述图像相应的编码特征图组；解码拼接各所述编码特征图组得到的拼接特征图组，得到所述目标曝光度相应的图像所对应的目标图像；所述目标图像的对比度高于所述图像的对比度。本申请提供的方案提高了图像处理效率。

Image processing method, device, storage medium and computer equipment

The present invention relates to an image processing method, apparatus, storage medium and computer equipment, including: acquiring a plurality of frames of images captured for a target; each image has a different exposure; the exposure includes a target exposure, a first exposure higher than the target exposure, and a first exposure lower than the target exposure. Two exposures; Correct the pixel values of each image to obtain the corresponding correction images of each image; encode each image and the corresponding correction image according to the encoding method matched by the respective exposures of each image, and obtain the corresponding encoding feature group of each image; decode the encoding feature group of each image. By splicing the splicing feature sets obtained from each coding feature set, the target image corresponding to the image corresponding to the target exposure is obtained, and the contrast of the target image is higher than that of the image. The scheme provided by this application improves the efficiency of image processing.

【技术实现步骤摘要】
图像处理方法、装置、存储介质和计算机设备
本专利技术涉及计算机
，特别是涉及一种图像处理方法、装置、存储介质和计算机设备。
技术介绍
随着计算机技术和图像处理技术的发展，摄影、监控、医疗、军事以及卫星遥感等领域对图像的要求越来越高，人们希望得到的图像能够记录场景中丰富的光影和色彩信息，以生动地呈现场景中更多的细节信息。传统技术中，通常是通过光流法对多帧采集的图像进行前景对齐，再对前景对齐后的图像进行融合得到前述这种包括图像特征更多的图像，但这种方式的适用于范围窄，而且前景对齐耗时长，导致图像处理的效率降低。
技术实现思路
基于此，有必要针对目前图像处理效率比较低的问题，提供一种图像处理方法、装置、存储介质和计算机设备。一种图像处理方法，包括：获取多帧对于目标采集得到的图像；各所述图像的曝光度不同；所述曝光度包括目标曝光度、高于所述目标曝光度的第一曝光度及低于所述目标曝光度的第二曝光度；校正各所述图像中的像素值，得到各所述图像各自相应的校正图像；分别按照每个图像各自的曝光度所匹配的编码方式，对每个所述图像和相应的校正图像进行编码，得到与每个所述图像相应的编码特征图组；解码拼接各所述编码特征图组得到的拼接特征图组，得到所述目标曝光度相应的图像所对应的目标图像；所述目标图像的对比度高于所述图像的对比度。一种图像处理装置，包括：获取模块，用于获取多帧对于目标采集得到的图像；各所述图像的曝光度不同；所述曝光度包括目标曝光度、高于所述目标曝光度的第一曝光度及低于所述目标曝光度的第二曝光度；校正模块，用于校正各所述图像中的像素值，得到各所述图像各自相应的校正图像；编码模块，用于分别按照每个图像各自的曝光度所匹配的编码方式，对每个所述图像和相应的校正图像进行编码，得到与每个所述图像相应的编码特征图组；解码模块，用于解码拼接各所述编码特征图组得到的拼接特征图组，得到所述目标曝光度相应的图像所对应的目标图像；所述目标图像的对比度高于所述图像的对比度。一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时，使得所述处理器执行上述图像处理方法的步骤。一种计算机设备，包括存储器和处理器，所述存储器中储存有计算机程序，所述计算机程序被所述处理器执行时，使得所述处理器执行上述图像处理方法的步骤。上述图像处理方法、装置、存储介质和计算机设备，在获取以不同的曝光度对于目标采集得到的多帧图像后，即自动校正各图像中的像素值，得到各图像各自相应的校正图像，然后分别按照每个图像各自的曝光度所匹配的编码方式，对每个图像和相应的校正图像共同进行编码，这样得到的编码特征图组可更好地反映该曝光度下的图像特征，再解码拼接各编码特征图组得到的拼接特征图组，即能够得到目标曝光度相应的图像所对应的目标图像。这样目标图像融合了多种曝光度下的图像特征，使得对比度高于各图像的对比度，能够更好地反映场景中丰富的光影和色彩信息，而且不需要事先对图像进行前景对齐，极大地提高了图像处理效率。一种模型训练方法，包括：获取多帧对于目标采集得到的图像样本，各所述图像样本的曝光度不同；所述曝光度包括目标曝光度、高于所述目标曝光度的第一曝光度及低于所述目标曝光度的第二曝光度；获取与所述目标曝光度相应的图像样本所对应的期望图像；校正各图像样本中的像素值，得到各图像样本各自相应的校正图像样本；分别按照每个图像样本各自的曝光度所匹配的编码器，对每个图像样本和相应的校正图像样本进行编码，得到与每个图像样本相应的编码特征图样本组；通过解码器解码拼接各所述编码特征图样本组得到的拼接特征图样本组，得到所述目标曝光度相应的图像样本所对应的预测目标图像；将所述预测目标图像映射为用于显示的预测图像；按照所述预测图像与所述期望图像的差异，调整所述编码器和所述解码器的参数，并继续训练直至满足训练结束条件。在一个实施例中，所述校正各图像样本中的像素值，得到各图像样本各自相应的校正图像样本，包括：获取校正参数及各所述图像样本的曝光时间；分别根据每个图像样本的曝光时间和与所述校正参数对应的校正方式，对每个图像样本中的像素值进行校正，得到每个图像样本相应的校正图像样本。在一个实施例中，所述分别按照每个图像样本各自的曝光度所匹配的编码器，对每个图像样本和相应的校正图像样本进行编码，得到与每个图像样本相应的编码特征图样本组，包括：将每个图像样本的通道特征图与每个图像样本相应的校正图像样本的通道特征图按通道进行拼接，得到每个图像样本相应的通道特征图样本组；分别按照每个图像样本各自的曝光度所匹配的编码器，对每个图像相应的通道特征图样本组进行编码，得到与每个图像样本相应的编码特征图样本组。在一个实施例中，所述编码器包括多层卷积层；所述解码器包括与各卷积层相应的反卷积层；所述通过解码器解码拼接各所述编码特征图样本组得到的拼接特征图样本组，得到所述目标曝光度相应的图像样本所对应的预测目标图像，包括：将拼接各编码特征图样本组得到的拼接特征图样本组输入解码器；按照所述解码器所包括的反卷积层的顺序，将所述解码器所包括的反卷积层依次作为当前反卷积层进行解码操作；对于每一层当前反卷积层，将当前反卷积层的输出和当前反卷积层相应的卷积层的输出，共同作为下一层反卷积层的输入；通过所述解码器的输出层，输出所述目标曝光度相应的图像样本所对应的预测目标图像。在一个实施例中，所述通过解码器解码拼接各所述编码特征图样本组得到的拼接特征图样本组，得到所述目标曝光度相应的图像样本所对应的预测目标图像，包括：将各所述编码特征图样本组进行拼接得到拼接特征图样本组；通过残差模型对所述拼接特征图样本组进行特征变化，得到融合特征图样本组；通过解码器解码所述融合特征图样本组，得到所述目标曝光度相应的图像样本所对应的预测目标图像；所述按照所述预测图像与所述期望图像的差异，调整所述编码器和所述解码器的参数，并继续训练直至满足训练结束条件，包括：按照所述预测图像与所述期望图像的差异，调整所述编码器、所述残差模型和所述解码器的参数，并继续训练直至满足训练结束条件。在一个实施例中，所述通过残差模型对所述拼接特征图样本组进行特征变化，得到融合特征图样本组，包括：将拼接各编码特征图样本组得到的拼接特征图样本组输入残差模型；按照所述残差模型所包括的残差层的顺序，将所述残差模型所包括的残差层依次作为当前残差层进行特征融合操作；将当前残差的输入和输出共同作为下一层残差层的输入；通过所述残差模型的末层残差层，输出融合特征图样本组。在一个实施例中，所述编码器包括多层卷积层；所述解码器包括与各卷积层相应的反卷积层；所述通过解码器解码所述融合特征图样本组，得到所述目标曝光度相应的图像样本所对应的预测目标图像，包括：将所述融合特征图样本组输入解码器；按照所述解码器所包括的反卷积层的顺序，将所述解码器所包括的反卷积层依次作为当前反卷积层进行解码操作；对于每一层当前反卷积层，将当前反卷积层的输出和当前反卷积层相应的卷积层的输出，共同作为下一层反卷积层的输入；通过所述解码器的输出层，输出所述目标曝光度相应的图像样本所对应的预测目标图像。在一个实施例中，所述将所述预测目标图像映射为用于显示的预测图像，包括：获取映射参数；根据所述映射参数将预测目标图像中的本文档来自技高网...

【技术保护点】
1.一种图像处理方法，包括：获取多帧对于目标采集得到的图像；各所述图像的曝光度不同；所述曝光度包括目标曝光度、高于所述目标曝光度的第一曝光度及低于所述目标曝光度的第二曝光度；校正各所述图像中的像素值，得到各所述图像各自相应的校正图像；分别按照每个图像各自的曝光度所匹配的编码方式，对每个所述图像和相应的校正图像进行编码，得到与每个所述图像相应的编码特征图组；解码拼接各所述编码特征图组得到的拼接特征图组，得到所述目标曝光度相应的图像所对应的目标图像；所述目标图像的对比度高于所述图像的对比度。

【技术特征摘要】
1.一种图像处理方法，包括：获取多帧对于目标采集得到的图像；各所述图像的曝光度不同；所述曝光度包括目标曝光度、高于所述目标曝光度的第一曝光度及低于所述目标曝光度的第二曝光度；校正各所述图像中的像素值，得到各所述图像各自相应的校正图像；分别按照每个图像各自的曝光度所匹配的编码方式，对每个所述图像和相应的校正图像进行编码，得到与每个所述图像相应的编码特征图组；解码拼接各所述编码特征图组得到的拼接特征图组，得到所述目标曝光度相应的图像所对应的目标图像；所述目标图像的对比度高于所述图像的对比度。2.根据权利要求1所述的方法，其特征在于，所述校正各所述图像中的像素值，得到各所述图像各自相应的校正图像，包括：获取校正参数及各所述图像的曝光时间；分别根据每个图像的曝光时间和与所述校正参数对应的校正方式，对每个所述图像中的像素值进行校正，得到每个所述图像相应的校正图像。3.根据权利要求2所述的方法，其特征在于，按照以下公式对每个所述图像中的像素值进行校正：其中，Ii为第i帧图像中的像素值，γ为校正参数，ti为第i帧图像的曝光时间，Hi为第i帧图像相应的校正图像中的像素值。4.根据权利要求1所述的方法，其特征在于，所述分别按照每个图像各自的曝光度所匹配的编码方式，对每个所述图像和相应的校正图像进行编码，得到与每个所述图像相应的编码特征图组，包括：将每个图像的通道特征图与每个图像相应的校正图像的通道特征图按通道进行拼接，得到每个图像相应的通道特征图组；分别按照每个图像各自的曝光度所匹配的编码方式，对每个所述图像相应的通道特征图组进行编码，得到与每个所述图像相应的编码特征图组。5.根据权利要求4所述的方法，其特征在于，所述分别按照每个图像各自的曝光度所匹配的编码方式，对每个所述图像相应的通道特征图组进行编码，得到与每个所述图像相应的编码特征图组，包括：分别按照每个图像各自的曝光度所匹配的编码器，对每个所述图像相应的通道特征图组进行编码，得到与每个所述图像相应的编码特征图组；所述解码拼接各所述编码特征图组得到的拼接特征图组，得到所述目标曝光度相应的图像所对应的目标图像，包括：通过解码器解码拼接各所述编码特征图组得到的拼接特征图组，得到所述目标曝光度相应的图像所对应的目标图像。6.根据权利要求5所述的方法，其特征在于，所述编码器包括多层卷积层；所述解码器包括与各卷积层相应的反卷积层；所述通过解码器解码拼接各所述编码特征图组得到的拼接特征图组，得到所述目标曝光度相应的图像所对应的目标图像，包括：将拼接各所述编码特征图组得到的拼接特征图组输入解码器；按照所述解码器所包括的反卷积层的顺序，将所述解码器所包括的反卷积层依次作为当前反卷积层进行解码操作；对于每一层当前反卷积层，将当前反卷积层的输出和当前反卷积层相应的卷积层的输出，共同作为下一层反卷积层的输入；通过解码器的输出层输出所述目标曝光度相应的图像所对应的目标图像。7.根据权利要求5所述的方法，其特征在于，所述通过解码器解码拼接各所述编码特征图组得到的拼接特征图组，得到所述目标曝光度相应的图像所对应的目标图像，包括：将拼接各所述编码特征图组得到的拼接特征图组输入残差模型；按照所述残差模型所包括的残差层的顺序，将所述残差模型所包括的残差层依次作为当前残差层进行特征融合操作；将当前残差的输入和输出共同作为下一层残差层的输入；通过所述残差模型的末层残差层，输出融合特征图组；通过解码器解码所述融合特征图组，得到所述目标曝光度相应的图像所对应的目标图像。8.根据权利要求7所述的方法，其特征在于，所述编码器包括多层卷积层；所述解码器包括与各卷积层相应的反卷积层；所述通过解码器解...

【专利技术属性】
技术研发人员：戴宇榮，
申请(专利权)人：腾讯科技深圳有限公司，
类型：发明
国别省市：广东,44