图像处理装置、图像处理方法以及程序制造方法及图纸

运动矢量计算部根据作为第一图像的一部分区域的块、所述块与第二图像的一部分区域的相似度而确定所述块的运动矢量，运动矢量可靠度计算部根据所述相似度的分布而计算所述运动矢量的可靠度，运动矢量校正部根据与所述可靠度比规定可靠度低的低可靠度块不同的块即具有与所述规定可靠度相等或更高的可靠度的高可靠度块的运动矢量，对所述低可靠度块的运动矢量进行校正，图像处理部根据所述运动矢量校正部所校正的运动矢量而确定与所述第一图像的第一像素对应的所述第二图像的第二像素，使用所述第一像素的信号值和所述第二像素的信号值进行图像处理。

Image processing device, image processing method and program

The motion vector calculation unit and determine the motion vector of the block according to the area as part of the first image block, the block and the similarity of second images in a part of the region, the motion vector reliability calculation of distribution according to the similarity and calculate the motion vector reliability of motion vector correction according to the Department of the reliability and reliability than specified in the low reliability of different block is provided with a specified reliability equal or higher reliability of high reliability block motion vector, motion vector of the low reliability block correction, image processing unit determines whether the second pixels of the second image corresponding to the first pixel of the first image according to the motion vector correction of motion vector correction of the signal using the value of the first pixel and the second pixel value Image processing.

【技术实现步骤摘要】
【国外来华专利技术】图像处理装置、图像处理方法以及程序
本专利技术涉及图像处理装置、图像处理方法以及程序。本申请基于2015年5月21日在日本申请的日本特愿2015-103890号主张优先权，这里引用其内容。
技术介绍
数字照相机等摄像装置通常具有噪声降低(NR：NoiseReduction)等各种功能。随着摄像装置的高功能化，用于提供该功能的图像处理正在复杂化。例如，在图18所示的摄像装置90中，运动计算部93根据摄像部91所获取的时间上相邻的两帧的亮度图像(Y图像)对将Y图像按照规定的尺寸分割而成的每个区域计算运动矢量。图像处理部97针对摄像部91所获取的三板化图像使用运动计算部93计算出的运动矢量来进行位置对准的高画质化处理(下面称为高画质化处理)。在该处理中，例如存在帧间NR处理。运动计算部93在时间上相邻的两帧的Y图像间进行匹配处理而搜索相互对应的区域，计算对应的区域间的位置的差分作为运动矢量。因处理对象的图像间的差异而未必始终能够计算出正确的运动矢量。另外，运动矢量的计算通常需要复杂的运算。因此，要针对帧内的所有的像素分别计算运动矢量的话，需要增加处理时间或者增加电路规模。因此，专利文献1所述的图像处理装置对图像间的运动量进行估计，执行使一方的图像与另一方的图像的位置对准的运动补偿处理而生成运动补偿图像，通过运动补偿图像与位置对准后的图像的合成处理而生成实施了噪声降低等的图像。运动补偿图像生成部生成利用了选择图像的运动补偿图像，该选择图像是根据预先规定的图像选择基准而选择的。例如，具有对输入图像是否是适于运动估计的适格图像进行判定的运动估计合适度判定部，只要在输入图像是适格图像的情况下，则将该输入图像作为应用于运动估计的参考图像而保存在帧存储器中。现有技术文献专利文献专利文献1：日本特开2014-39169号公报
技术实现思路
专利技术要解决的课题在针对动态图像的处理中需要每帧的运动估计，但未必能始终获得适于运动估计的图像。针对未判定为合适的图像的帧，运动计算部93无法准确地进行运动估计。因此，图像处理部97使用作为该运动估计的结果而获得的运动矢量而无法准确地进行高画质化处理，这可能成为功能降低的原因。在高画质化处理中，图像处理部97还考虑采用过去追溯的时刻的帧的运动矢量。但是，过去的运动矢量并不一定与当前时刻的运动矢量近似，因而运动矢量的差异成为功能降低的原因。本专利技术就是基于上述课题而完成的，其目的在于提供图像处理装置、图像处理方法以及程序，即使在无法获得适于运动估计的图像的情况下，也能够抑制基于帧之间的位置对准的图像处理的功能降低。用于解决课题的手段本专利技术就是为了解决上述课题而完成的，本专利技术的一个方式是一种图像处理装置，该图像处理装置具有：运动矢量计算部，其根据作为第一图像的一部分区域的块、所述块与第二图像的一部分区域的相似度而确定所述块的运动矢量；运动矢量可靠度计算部，其根据所述相似度的分布而计算所述运动矢量的可靠度；运动矢量校正部，其根据与作为所述可靠度比规定可靠度低的块的低可靠度块不同的块即具有与所述规定可靠度相等或更高的可靠度的高可靠度块的运动矢量，对所述低可靠度块的运动矢量进行校正；以及图像处理部，其根据所述运动矢量校正部所校正的运动矢量而确定与所述第一图像的像素即第一像素对应的所述第二图像的像素即第二像素，使用所述第一像素的信号值和所述第二像素的信号值进行图像处理。本专利技术的另一方式是，在上述的图像处理装置中，所述高可靠度块是从所述低可靠度块起配置在规定范围内的块。本专利技术的另一方式是，在上述的图像处理装置中，所述运动矢量校正部在所述低可靠度块的运动矢量的校正中，越是距所述低可靠度块的距离小的块的运动矢量越优先使用。本专利技术的另一方式是，在上述的图像处理装置中，该图像处理装置还具有帧运动矢量计算部，该帧运动矢量计算部根据所述高可靠度块的运动矢量对整个所述第一图像的运动矢量即帧运动矢量进行计算，并根据所述高可靠度块的运动矢量的分布对所述帧运动矢量的可靠性进行计算，所述运动矢量校正部根据所述帧运动矢量的可靠性对是否使用所述帧运动矢量来校正所述低可靠度块的运动矢量进行判定。本专利技术的另一方式是一种图像处理装置，其具有：运动矢量计算部，其根据作为第一图像的一部分区域的块、所述块与第二图像的一部分区域的相似度而确定所述块的运动矢量；运动矢量可靠度计算部，其根据所述相似度的分布而计算所述运动矢量的可靠度；帧运动矢量计算部，其根据高可靠度块的运动矢量，对整个所述第一图像的运动矢量即帧运动矢量进行计算，并根据所述高可靠度块的运动矢量的分布对所述帧运动矢量的可靠性进行计算，其中所述高可靠度块是与所述可靠度比规定可靠度低的块即低可靠度块不同的块，具有与所述规定可靠度相等或更高的可靠度；运动矢量校正部，其根据所述帧运动矢量的可靠性判定是否要使用所述帧运动矢量来校正整个所述第一图像的块的运动矢量；以及图像处理部，其根据所述运动矢量校正部所校正的运动矢量而确定与所述第一图像的像素即第一像素对应的所述第二图像的像素即第二像素，使用所述第一像素的信号值和所述第二像素的信号值进行图像处理。本专利技术的另一方式是，在上述的图像处理装置中，该图像处理装置还具有失真校正坐标计算部，该失真校正坐标计算部根据表示形成所拍摄的图像的各像素的坐标与失真校正后的坐标之间的关系的失真校正数据，对表示所述第一图像的每个像素的坐标进行校正。本专利技术的另一方式是一种图像处理装置的图像处理方法，具有如下过程：运动矢量计算过程，根据作为第一图像的一部分区域的块、所述块与第二图像的一部分区域的相似度而确定所述块的运动矢量；运动矢量可靠度计算过程，根据所述相似度的分布而计算所述运动矢量的可靠度；运动矢量校正过程，根据与作为所述可靠度比规定可靠度低的块的低可靠度块不同的块即具有与所述规定可靠度相等或更高的可靠度的高可靠度块的运动矢量，对所述低可靠度块的运动矢量进行校正；以及图像处理过程，根据在所述运动矢量校正过程中进行了校正的运动矢量而确定与所述第一图像的像素即第一像素对应的所述第二图像的像素即第二像素，使用所述第一像素的信号值和所述第二像素的信号值进行图像处理。本专利技术的另一方式是一种图像处理装置的图像处理方法，具有如下过程：运动矢量计算过程，根据作为第一图像的一部分区域的块、所述块与第二图像的一部分区域的相似度而确定所述块的运动矢量；运动矢量可靠度计算过程，根据所述相似度的分布而计算所述运动矢量的可靠度；帧运动矢量计算过程，根据高可靠度块的运动矢量，对整个所述第一图像的运动矢量即帧运动矢量进行计算，并根据所述高可靠度块的运动矢量的分布对所述帧运动矢量的可靠性进行计算，其中所述高可靠度块是与所述可靠度比规定可靠度低的块即低可靠度块不同的块，具有与所述规定可靠度相等或更高的可靠度；运动矢量校正过程，根据所述帧运动矢量的可靠性判定是否要使用所述帧运动矢量来校正整个所述第一图像的块的运动矢量；以及图像处理过程，根据在所述运动矢量校正过程中进行了校正后的运动矢量而确定与所述第一图像的像素即第一像素对应的所述第二图像的像素即第二像素，使用所述第一像素的信号值和所述第二像素的信号值进行图像处理。本专利技术的另一方式是一种程序，其用于使图像处理装置的计算机执行如下过程：运动矢量计算过程，本文档来自技高网...

【技术保护点】
一种图像处理装置，其具有：运动矢量计算部，其根据作为第一图像的一部分区域的块、所述块与第二图像的一部分区域的相似度而确定所述块的运动矢量；运动矢量可靠度计算部，其根据所述相似度的分布而计算所述运动矢量的可靠度；运动矢量校正部，其根据与作为所述可靠度比规定可靠度低的块的低可靠度块不同的块即具有与所述规定可靠度相等或更高的可靠度的高可靠度块的运动矢量，对所述低可靠度块的运动矢量进行校正；以及图像处理部，其根据所述运动矢量校正部所校正的运动矢量而确定与所述第一图像的像素即第一像素对应的所述第二图像的像素即第二像素，使用所述第一像素的信号值和所述第二像素的信号值进行图像处理。

【技术特征摘要】
【国外来华专利技术】2015.05.21 JP 2015-1038901.一种图像处理装置，其具有：运动矢量计算部，其根据作为第一图像的一部分区域的块、所述块与第二图像的一部分区域的相似度而确定所述块的运动矢量；运动矢量可靠度计算部，其根据所述相似度的分布而计算所述运动矢量的可靠度；运动矢量校正部，其根据与作为所述可靠度比规定可靠度低的块的低可靠度块不同的块即具有与所述规定可靠度相等或更高的可靠度的高可靠度块的运动矢量，对所述低可靠度块的运动矢量进行校正；以及图像处理部，其根据所述运动矢量校正部所校正的运动矢量而确定与所述第一图像的像素即第一像素对应的所述第二图像的像素即第二像素，使用所述第一像素的信号值和所述第二像素的信号值进行图像处理。2.根据权利要求1所述的图像处理装置，其中，所述高可靠度块是从所述低可靠度块起配置在规定范围内的块。3.根据权利要求2所述的图像处理装置，其中，所述运动矢量校正部在所述低可靠度块的运动矢量的校正中，越是距所述低可靠度块的距离小的块的运动矢量越优先使用。4.根据权利要求1所述的图像处理装置，其中，该图像处理装置还具有帧运动矢量计算部，该帧运动矢量计算部根据所述高可靠度块的运动矢量对整个所述第一图像的运动矢量即帧运动矢量进行计算，并根据所述高可靠度块的运动矢量的分布对所述帧运动矢量的可靠性进行计算，所述运动矢量校正部根据所述帧运动矢量的可靠性对是否使用所述帧运动矢量来校正所述低可靠度块的运动矢量进行判定。5.一种图像处理装置，其具有：运动矢量计算部，其根据作为第一图像的一部分区域的块、所述块与第二图像的一部分区域的相似度而确定所述块的运动矢量；运动矢量可靠度计算部，其根据所述相似度的分布而计算所述运动矢量的可靠度；帧运动矢量计算部，其根据高可靠度块的运动矢量，对整个所述第一图像的运动矢量即帧运动矢量进行计算，并根据所述高可靠度块的运动矢量的分布对所述帧运动矢量的可靠性进行计算，其中所述高可靠度块是与所述可靠度比规定可靠度低的块即低可靠度块不同的块，具有与所述规定可靠度相等或更高的可靠度；运动矢量校正部，其根据所述帧运动矢量的可靠性判定是否要使用所述帧运动矢量来校正整个所述第一图像的块的运动矢量；以及图像处理部，其根据所述运动矢量校正部所校正的运动矢量而确定与所述第一图像的像素即第一像素对应的所述第二图像的像素即第二像素，使用所述第一像素的信号值和所述第二像素的信号值进行图像处理。6.根据权利要求1至5中的任意一项所述的图像处理装置，其中，该图像处理装置还具有失真校正坐标计算部，该失真校正坐标计算部根据表示形成所拍摄的图像的各像素的坐标与失真校正后的坐标之间的关系的失真校正数据，对表示所述第一图像的每个像素的坐标进行校正。7.一种图像处理装置的图像处理方法，具有如下过程：运动矢量计算过程，根据作为第一图像的一部分区域的块、所述块与第二图像的一部分区域的相似度而确定所述块的运动矢量；运动矢量可靠度计算过程，根据所述相似度的分布而计算所述运动矢量的可靠度；运动矢量校正过程，根据与作为所述可靠度比规...

【专利技术属性】
技术研发人员：池田英，上野晃，
申请(专利权)人：奥林巴斯株式会社，
类型：发明
国别省市：日本,JP