图像处理设备、成像设备以及图像处理方法技术

本发明专利技术涉及图像处理设备、成像设备以及图像处理方法。根据一个实施例，图像处理设备包括存储器和计算装置。存储器存储第一存储图像。计算装置在第一存储图像中存储目标图像的至少一部分。当参考图像与目标图像之间的关系满足确定条件时，计算装置确定把参考图像设置为目标图像，其中所述存储是基于参考图像与目标图像之间的运动向量的。

【技术实现步骤摘要】
对相关申请的交叉引用本申请基于并要求于2014年5月8日提交的日本专利申请No.2014-097052的优先权；其全部内容通过引用被结合于此。
本文所描述的实施例一般而言涉及图像处理设备、成像设备以及图像处理方法。
技术介绍
例如，存在加多个输入帧并生成输出帧的图像处理设备。期望对这种图像处理设备提高图像的图像质量。
技术实现思路
根据本专利技术的一个方面，提供了一种图像处理设备，包括：存储器，存储第一存储图像；及计算装置，基于参考图像与目标图像之间的运动向量把目标图像的至少一部分加到第一存储图像，并且当参考图像与目标图像之间的关系满足确定条件时，确定利用目标图像替换参考图像。根据本专利技术的另一个方面，提供了一种成像设备，包括：如权利要求1所述的图像处理设备；及成像元件，成像目标图像。根据本专利技术的再一个方面，提供了一种图像处理方法，包括：获取目标图像并且基于参考图像与目标图像之间的运动向量把目标图像的至少一部分加到第一存储图像；及当参考图像与目标图像之间的关系满足确定条件时，用目标图像替换参考图像。根据本专利技术的再一个方面，提供了一种图像处理设备，包括：存储器，存储第一存储图像；及计算装置，基于第一参考图像与第一目标图像之间的第一运动向量把第一目标图像的至少一部分加到第一存储图像，并且当第一参考图像与第一目标图像之间的关系满足确定条件时，使第一目标图像成为第二参考图像。附图说明图1是示出根据第一实施例的图像处理设备的框图；图2是示出根据第一实施例的图像处理设备的操作的流程图；图3是示出根据第一实施例的图像处理设备的操作的示意图；图4是示出根据第一实施例的图像处理设备的操作的示意图；图5是示出根据第一实施例的图像处理设备的操作的示意图；图6是示出根据第二实施例的图像处理设备的框图；图7是示出根据第二实施例的图像处理设备的操作的示意图；图8是示出根据第三实施例的图像处理设备的示意图；及图9是示出根据第四实施例的图像处理设备的示意图。具体实施方式根据一个实施例，一种图像处理设备包括存储器和计算装置。存储器存储第一存储图像。计算装置基于参考图像与目标图像之间的运动向量把目标图像的至少一部分加到第一存储图像。当参考图像与目标图像之间的关系满足确定条件时，计算装置确定用目标图像替换参考图像。根据一个实施例，一种成像设备包括图像处理设备和成像元件。图像处理设备包括存储器和计算装置。存储器存储第一存储图像。计算装置基于参考图像与目标图像之间的运动向量把目标图像的至少一部分加到第一存储图像。当参考图像与目标图像之间的关系满足确定条件时，计算装置确定用目标图像替换参考图像。成像元件成像目标图像。根据一个实施例，公开了一种图像处理方法。该方法包括获取目标图像并基于参考图像与目标图像之间的运动向量把目标图像的至少一部分加到第一存储图像。该方法包括：当参考图像与目标图像之间的关系满足确定条件时，用目标图像替换参考图像。下文中将参考附图描述各种实施例。附图是示意性或概念性的；并各部分的厚度和宽度之间的关系、各部分之间尺寸的比例等等不一定与其实际值相同。另外，即使在说明相同部分的情况下，也可以在附图之间不同地示出尺寸和/或比例。在本申请的附图和说明书中，与上面就附图所描述的那些类同的部件用相同的标号标记，并在适当的时候略去其详细描述。第一实施例图1是示出根据第一实施例的图像处理设备的框图。如图1中所示，根据第一实施例的图像处理设备100包括计算装置50和存储器52。如图1中所示，计算装置50包括运动估计器10、变形单元(warpingunit)20、运动补偿器30以及替换确定单元40。计算装置50获取输入帧Isrc(输入图像)。如下所述，多个输入帧Isrc在图像处理设备100的操作中被获取。输入帧Isrc例如是视频图像的一帧。例如，多个输入帧Isrc时时刻刻从图像传感器、电视图像等输入到图像处理设备100。通过存储多个输入帧Isrc，图像处理设备100生成高质量图像。但是，在该实施例中，输入帧Isrc也可以是静止图像的一帧。存储器52被用来存储图像。例如，存储缓存(第一存储图像)存储在存储器52中。输入帧Isrc存储在存储缓存IB(第一存储图像)中。当存储输入帧Isrc时，由运动估计器10确定参考帧Iref(参考图像)与输入帧Isrc之间的偏移(运动向量)。例如，该偏移是由相机的手不稳等造成的。在变形单元20中，根据所确定的偏移，将输入帧Isrc与参考帧Iref对齐。对齐的输入帧Isrc存储在存储缓存IB中。由此，例如，可以执行噪声去除(手不稳的校正)。因此，利用其中存储了多个输入帧Isrc的存储缓存IB，输出输出帧IO。由此，生成高质量的图像。输入帧Isrc与参考帧Iref对齐，其中参考帧Iref是与存储缓存IB分离的。由此，可以抑制对齐误差的累积。下面描述运动补偿器30和替换确定单元40。该框图是根据本实施例的图像处理设备的一个例子，并不必然匹配实际程序模块的配置。诸如LSI(大规模集成)等的集成电路或者IC(集成电路)芯片组可以用作根据本实施例的图像处理设备的一部分或者根据本实施例的整个图像处理设备。可以在每个功能块中使用单独的处理器。可以使用集成一些或全部功能块的处理器。集成电路不限于LSI；可以使用利用专用电路的集成电路或者通用处理器。输入帧Isrc的坐标(x,y)处的值被定义为Isrc(x,y)。例如，输入帧Isrc的值是诸如亮度值的标量。输入帧Isrc的值可以是诸如彩色图像(RGB或YUV)的值的向量。输出帧IO是处理结果的图像。输出帧的坐标(x,y)处的值被定义为O(x,y)。参考帧Iref是这样的帧，其被用作存储的参考。例如，输入图像的一个帧被用作参考帧Iref。例如，当开始处理时，初始帧被用作参考帧。参考帧Iref的坐标(x,y)处的值被定义为Iref(x,y)。存储缓存IB是用于存储与参考帧Iref对齐的输入帧Isrc的缓存(帧)。存储缓存IB的分辨率可以不与输入帧Isrc的分辨率相同。例如，在垂直方向和水平方向，存储缓存IB的分辨率可以是输入帧Isrc的分辨率的2倍、3倍或4倍。例如，通过增加分辨率而产生超分辨率效果。由此，可以生成高质量图像。存储缓存IB的分辨率可以低于本文档来自技高网...

【技术保护点】
一种图像处理设备，包括：存储器，存储第一存储图像；及计算装置，基于参考图像与目标图像之间的运动向量把目标图像的至少一部分加到第一存储图像，并且当参考图像与目标图像之间的关系满足确定条件时，确定利用目标图像替换参考图像。

【技术特征摘要】
2014.05.08 JP 2014-0970521.一种图像处理设备，包括：
存储器，存储第一存储图像；及
计算装置，基于参考图像与目标图像之间的运动向量把目标图像
的至少一部分加到第一存储图像，并且当参考图像与目标图像之间的
关系满足确定条件时，确定利用目标图像替换参考图像。
2.如权利要求1所述的图像处理设备，其中所述计算装置还在
满足所述确定条件时利用被替换的参考图像计算运动向量。
3.如权利要求1所述的图像处理设备，其中所述计算装置根据
对象在参考图像中的位置与所述对象在目标图像中的位置之差计算运
动向量，基于该运动向量移动对象在第一存储图像中的位置以得出第
二存储图像，并用第二存储图像替换第一存储图像。
4.如权利要求3所述的图像处理设备，其中所述计算装置根据
运动向量的量值确定第二存储图像的像素的值。
5.如权利要求1所述的图像处理设备，其中所述确定条件是基
于获取参考图像的时间与获取目标图像的时间之间的时间长度确定的
条件。
6.如权利要求1所述的图像处理设备，其中
所述计算装置获取包括目标图像在内的多个输入图像，及
所述确定条件是基于在参考图像之后获取的输入图像的数量确定
的条件。
7.如权利要求1所述的图像处理设备，其中所述计算装置基于

\t运动向量移动目标图像的位置，并把在目标图像移动之后的图像的至
少一部分加到第一存储图像。
8.如权利要求7所述的图像处理设备，其中所述确定条件是基
于参考图像的表面积与参考图像和所述目标图像移动之后的图像之间
重叠的表面积之比确定的条件。
9.如权利要求1所述的图像处理设备，其中所述确定条件是基
于参考图像中所包括的像素的值与目标图像中所包括的像素的值之差
确定的条件。
10.如权利要求1所述的图像处理设备，其中所述计算装置基于
第一存...

【专利技术属性】
技术研发人员：三岛直，三田雄志，
申请(专利权)人：株式会社东芝，
类型：发明
国别省市：日本;JP