图像处理设备及其控制方法技术

本发明专利技术涉及一种图像处理设备及其控制方法。在该图像处理设备中，第一运动检测器计算表示摄像设备本体的运动的角速度。第二运动检测器基于顺次拍摄的图像来计算被摄体的运动的移动量。此外，运动矢量计算单元基于角速度来校正被摄体的运动的移动量，并且基于校正后的移动量来计算主被摄体的运动矢量。

【技术实现步骤摘要】

本专利技术涉及一种图像处理设备及其控制方法。
技术介绍
摇摄被已知为用于表现具有速度感的运动被摄体的拍摄技术。摇摄的目的在于：在拍摄者平摇照相机以跟随被摄体的运动时，使运动被摄体保持在相同的位置并且允许背景模糊。在摇摄中，要求拍摄者平摇照相机以跟随被摄体的运动。然而，如果平摇速度过慢或过快并且在被摄体的运动速度和平摇速度之间产生差，则由此得到的图像甚至对于被摄体而言也可能具有模糊。为了辅助用户容易地实现摇摄，提出了用于通过移动移位透镜来吸收被摄体的运动速度和平摇速度之间的差的摇摄辅助功能。在日本特开2006-317848中，论述了如下的摇摄用的摄像设备，其中在该摄像设备中，利用陀螺传感器来检测模糊，从图像的运动矢量中检测被摄体，计算用于使所检测到的被摄体位于图像中心位置的校正量，并且通过移动光轴移位透镜来进行校正。作为用于从图像中检测运动矢量的技术，提出了用于通过比较顺次拍摄的图像来检测运动矢量的方法。例如，在日本特开平08-88855中，论述了如下的用于检测运动矢量的装置，其中在该装置中，在用作用于检测运动矢量的块匹配对象的候选块的位置在搜索区域内移位的情况下，在用作用于检测运动矢量的块匹配对象的参考块和候选块之间进行像素值的比较。在日本特开2006-317848所公开的装置中，使用所检测到的运动矢量来进行运动补偿，然后通过缩小搜索区域来重复用于检测运动矢量的步骤。然而，在这种情况下，如果主要的被摄体(下文被称为“主被摄体”)小于搜索区域，则除主被摄体的运动矢量之外还检测到背景的运动矢量。因此，变得难以从所检测到的运动矢量中确定主被摄体的运动矢量。结果，难以精确地获得主被摄体的角速度，并且摇摄辅助功能不能令人满意地工作。
技术实现思路
本专利技术提供一种即使在主被摄体小的情况下也能够计算该主被摄体的运动矢量的图像处理设备。根据本专利技术的一个方面，提供了一种图像处理设备，包括：第一计算单元，用于基于角速度检测单元所检测到的信息来计算表示摄像设备本体的运动的第一运动检测信息；第二计算单元，用于基于顺次拍摄的图像来计算表示被摄体的运动的第二运动检测信息；以及控制单元，用于基于所述第一运动检测信息来校正与所述第二运动检测信息所表示的所述被摄体的运动有关的移动量，并且基于校正后的移动量来计算主被摄体的运动矢量。根据本专利技术的另一方面，提供了一种图像处理设备的控制方法，所述控制方法包括以下步骤：基于角速度检测单元所检测到的信息来计算表示摄像设备本体的运动的第一运动检测信息；基于顺次拍摄的图像来计算表示被摄体的运动的第二运动检测信息；以及基于所述第一运动检测信息来校正与所述第二运动检测信息所表示的所述被摄体的运动有关的移动量，并且基于校正后的移动量来计算主被摄体的运动矢量。根据本专利技术，即使在主被摄体小的情况下，也可以精确地计算主被摄体的运动矢量。通过以下(参考附图)对典型实施例的说明，本专利技术的其它特征将变得明显。附图说明图1是示出根据第一实施例的图像处理设备的结构的图。图2A～2C是示出根据所拍摄图像来计算被摄体的移动量的处理的图。图3A和3B是示出根据第一实施例的图像处理设备的操作处理的流程图。图4是示出用于对被摄体的移动量的校正量的单位进行转换的典型处理的图。图5A和5B是示出被摄体的移动量的典型频数分布的图。图6是示出根据第二实施例的图像处理设备的操作处理的流程图。具体实施方式第一实施例图1是示出根据第一实施例的图像处理设备的结构的图。该图像处理设备包括第一运动检测器100、第一存储器102、第二运动检测器101、第二存储器103和运动矢量计算单元104。第一运动检测器100用作第一输出单元，其中该第一输出单元用于检测表示摄像设备本体的移动量的角速度、并将与检测到的角速度有关的数据作为第一运动检测信息进行输出。第一运动检测器100例如是诸如陀螺传感器等的角速度传感器。第一存储器102临时存储从第一运动检测器100所输出的与角速度有关的数据中的特定时间段所检测到的所有数据。第一存储器102例如是诸如随机存取存储器(RAM)等的易失性存储装置。第二运动检测器101用作第二输出单元，其中该第二输出单元用于通过比较顺次拍摄的图像来计算被摄体的移动量、并将该移动量作为第二运动检测信息进行输出。第二存储器103例如是诸如RAM等的易失性存储装置，并且临时存储第二运动检测器101所检测到的移动量中的特定时间段所检测到的所有数据。图2A～2C是示出用于根据所拍摄图像来计算被摄体的移动量的处理的图。图2A示出用于根据顺次拍摄的图像检测各块的移动量的处理。该处理由第二运动检测器101来执行。第二运动检测器101将顺次拍摄的图像分割为块，并且以像素为单位比较各块以检测被摄体的移动量。第(N-1)帧的参考块的坐标值由“(x，y)”表示。通过在使第(N)帧的候选块相对于第(N-1)帧的参考块的坐标值以像素为单位移位的情况下对块内的像素值的差进行相加，来获得相关值。如果相关值最接近0的坐标值被设为“(x-a，y-b)”，则移动量α变为“(a-b)”。图2B示出参考块的典型配置。在该实施例中，假设例如在整个图像中配置64个块(8×8＝64)。在图2C中，利用箭头来表示针对图2B的参考块中被虚线包围的4×3个块所检测到的移动量。在图2C的表示移动量的箭头中，通过虚线箭头来表示具有较低可靠性的移动量。例如，如果参考块和候选块不包含具有边缘特征等的像素值，则从任意坐标中获得相同的相关值。在这种情况下，无法获得移动量，或者移动量具有低可靠性。因此，第二运动检测器101可以被配置为判断所计算出的移动量的可靠性。也就是说，如果由于对比度微不足道而无法获得相关值、或者如果由于高频率的图像块而无法获得相关值，则第二运动检测器101判断为所获得的移动量具有低可靠性。返回到图1，首先，运动矢量计算单元104从第一存储器102中读取摄像设备的角速度。然后，运动矢量计算单元104从第二存储器103中读取被摄体的移动量。此外，运动矢量计算单元104用作用于执行以下处理的控制单元。具体地，运动矢量计算单元104提取主要被摄体(下文被简称为“主被摄体”)的移动量，并且基于所读取的与角速度和被摄体的移动量有关的数据来计算主被摄体的运动矢量。图3A和3B是示出第一实施例的图像处理设备的操作处理的流程图。在第一实施例中，运动矢量计算单元104基于与各帧相对应的第一运动检测信息，来校正与预定时间段相对应的多个帧的图像的被摄体的移动量。首先，在步骤S300a中，运动矢量计算单元104从第一存储器102获得摄像设备的角速度(第一运动检测信息)，并且从第二存储器103获得被摄体的移动量(第二运动检测信息)。然后，运动矢量计算单元104执行用于计算校正角速度的处理。校正角速度是被摄体的移动量的校正量。第i帧的校正量γi可以按照如下利用基准角速度ω*0和第i帧的角速度ω*i来表示。γi＝ω*i-ω*0(式1)在该实施例中，将第一存储器102所存储的摄像设备的角速度中的最新值用作“ω*0”。注意，可以选择第一存储器102所存储的“n”帧的摄像设备的角速度中的任意值作为“ω*0”。可选地，可以计算所存储的“n”帧的摄像设备的角速度的平均值，并且将所计算出的平均值用作“ω*0”。然后，在步本文档来自技高网...

【技术保护点】
一种图像处理设备，包括：第一计算单元，用于基于角速度检测单元所检测到的信息来计算表示摄像设备本体的运动的第一运动检测信息；第二计算单元，用于基于顺次拍摄的图像来计算表示被摄体的运动的第二运动检测信息；以及控制单元，用于基于所述第一运动检测信息来校正与所述第二运动检测信息所表示的所述被摄体的运动有关的移动量，并且基于校正后的移动量来计算主被摄体的运动矢量。

【技术特征摘要】
2015.08.06 JP 2015-1556391.一种图像处理设备，包括：第一计算单元，用于基于角速度检测单元所检测到的信息来计算表示摄像设备本体的运动的第一运动检测信息；第二计算单元，用于基于顺次拍摄的图像来计算表示被摄体的运动的第二运动检测信息；以及控制单元，用于基于所述第一运动检测信息来校正与所述第二运动检测信息所表示的所述被摄体的运动有关的移动量，并且基于校正后的移动量来计算主被摄体的运动矢量。2.根据权利要求1所述的图像处理设备，其中，所述控制单元基于与各帧相对应的所述第一运动检测信息来校正与同预定时间段相对应的多个帧的图像中的所述被摄体的运动有关的移动量。3.根据权利要求2所述的图像处理设备，其中，所述控制单元将与所述多个帧的图像的所述被摄体的运动有关的校正后的移动量的频数相加，并且基于通过相加所获得的频数分布来计算所述主被摄体的运动矢量。4.根据权利要求3所述的图像处理设备，其中，所述控制单元提取与所述主被摄体的运动有关的移动量，并且基于通过移动量的相加所获得的频数分布以及所述第一运动检测信息所表示的所述摄像设备本体的运动来计算所述主被摄体的运动矢量。5.根据权利要求4所述的图像处理设备，其中，所述控制单元将与所述第一运动检测信息所表示的所述摄像设备本体的运动有关的移动量判断为背景的移动量...

【专利技术属性】
技术研发人员：春名孝太，
申请(专利权)人：佳能株式会社，
类型：发明
国别省市：日本;JP