图像处理装置和图像处理方法制造方法及图纸

图像处理装置和图像处理方法。该装置具有：设置信息取得部，其按每个摄像元件取得表示摄像元件相对于摄像部的设置状态的设置信息；运动信息取得部，其取得第1帧图像和第2帧图像间的摄像装置的运动信息；输出区域取得部，其按每个摄像元件取得第2输出区域的位置信息，第2输出区域是第2帧图像内的区域，与第1帧图像内的第1输出区域对应，输出区域取得部根据由设置信息决定的第1输出区域(A11)的位置信息和运动信息取得多个摄像元件中作为基准的基准摄像元件的第2输出区域(A12)，根据基准摄像元件的设置信息、其它摄像元件的设置信息和运动信息取得多个摄像元件中不同于基准摄像元件的其它摄像元件的第2输出区域(A22)。

【技术实现步骤摘要】

本专利技术涉及。
技术介绍
以往，公知有根据拍摄的动态图像帧间的运动数据进行动态图像的校正处理的装置。例如，在下面的专利文献I中公开了以下装置计算基准图像与比较图像间的运动数据，利用运动数据，按每个对应的块计算图像间的像素值的差分，根据该像素值的差分，按每个块决定基准图像与比较图像的重叠比率，进行重叠处理，得到合成图像，由此得到更鲜明的手抖校正图像。专利文献专利文献1:日本特开2009-164857号公报此外，公知有通过合成由多个照相机拍摄的图像而取得具有立体感的立体图像的技木。此外，还公知有连续地拍摄、显示这种立体图像来取得立体动态图像的技木。在这种立体动态图像中，与普通的动态图像同样，需要进行手抖校正、失真校正等校正处理。在分别对从多个摄像元件取得的图像独立地进行专利文献I中记载的手抖校正的情况下，无法得到从各摄像元件取得的图像间的手抖校正的匹配性，可能无法进行适当的校正处理。
技术实现思路
因此，本专利技术的目的在于提供能够进行在从多个摄像元件得到的图像之间具有匹配性的校正处理的。本专利技术的图像处理装置对由摄像装置拍摄的多个帧图像进行图像处理，其中，所述摄像装置具有多个依次连续地拍摄第I帧图像和第2帧图像的摄像元件，所述图像处理装置的特征在于，该图像处理装置具有设置信息取得部，其按每个摄像元件，取得表示摄像元件相对于摄像装置的设置状态的设置信息；运动信息取得部，其取得第I帧图像和第2帧图像间的摄像装置的运动信息；以及输出区域取得部，其按每个摄像元件，取得第2输出区域的位置信息，该第2输出区域是第2帧图像内的区域，与第I帧图像内的第I输出区域对应，输出区域取得部根据由设置信息決定的第I输出区域的位置信息和运动信息，取得多个摄像元件中的作为基准的基准摄像元件的第2输出区域，输出区域取得部根据基准摄像元件的设置信息、多个摄像元件中的不同于基准摄像元件的其它摄像元件的设置信息以及运动信息，取得其它摄像元件的第2输出区域。本专利技术的图像处理方法用于对由摄像装置拍摄的多个帧图像进行图像处理，其中，摄像装置具有多个依次连续地拍摄第I帧图像和第2帧图像的摄像元件，图像处理方法的特征在于，该图像处理方法包括以下步骤设置信息取得步骤，按每个摄像元件，取得表示摄像元件相对于摄像装置的设置状态的设置信息；运动信息取得步骤，取得第I帧图像和第2帧图像间的摄像装置的运动信息；以及输出区域取得步骤，按每个摄像元件，取得第2输出区域的位置信息，该第2输出区域是第2帧图像内的区域，与第I帧图像内的第I输出区域对应，在输出区域取得步骤中，根据由设置信息決定的第I输出区域的位置信息和运动信息，取得多个摄像元件中的作为基准的基准摄像元件的第2输出区域，在输出区域取得步骤中，根据基准摄像元件的设置信息、多个摄像元件中的不同于基准摄像元件的其它摄像元件的设置信息以及运动信息，取得其它摄像元件的第2输出区域。根据这种专利技术，根据由设置信息決定的第I输出区域的位置信息和运动信息，取得基准摄像元件的第2输出区域，根据基准摄像元件的设置信息、其它摄像元件的设置信息以及运动信息，取得多个摄像元件中的不同于基准摄像元件的其它摄像元件的第2输出区域。此处，基准摄像元件的第2输出区域和其它摄像元件的第2输出区域是根据在这些摄像元件之间通用的运动信息而取得的，因此，能够进行在从多个摄像元件得到的图像之间具有匹配性的校正处理。此处，还可以具有判定部，该判定部针对所有摄像元件，判定第2输出区域的位置信息是否位于第2帧图像内，在第2输出区域的位置信息不位于第2帧图像内的情况下，输出区域取得部对根据第I输出区域的·位置信息与第2输出区域的位置信息之间的差分求出的移动量进行缩小调整，直到在所有摄像元件中，第2输出区域的位置信息位于第2帧图像内为止。该情况下，可以防止由于第2输出区域不位于第2帧图像内而导致无法进行图像处理。运动信息取得部可以从基准摄像元件拍摄的第I帧图像和第2帧图像中取得运动信息。该情况下，能够从图像取得运动信息，因此不需要新的硬件的结构，就能够取得多个摄像元件中通用的运动信息。运动信息取得部可以通过陀螺仪传感器取得运动信息。该情况下，能够从陀螺仪传感器取得多个摄像元件中通用的运动信息，因此能够降低运算负荷。运动信息取得部取得从多个摄像元件拍摄的第I帧图像和第2帧图像中得到的运动信息的加权平均，作为运动信息。该情况下，根据多个摄像元件取得运动信息，因此，能够高精度地取得运动信息。此外，可以根据摄像条件从多个摄像元件的中选择基准摄像元件。该情况下，例如选择性能优越的摄像元件作为基准摄像元件，由此能够高精度地取得运动信息。输出区域取得部可以将由于具有多个摄像元件而所需的输出区域以外的区域用作为由于运动而进行校正时使用的区域。此时，在将用于得到立体图像的边缘和由于运动而进行校正时的边缘共用的情况下，能够利用ー个边缘进行多个校正处理。因此，能够减少因确保边缘而导致的校正处理后的有效像素数下降。根据本专利技术，能够进行在从多个摄像元件得到的图像间具有匹配性的校正处理。附图说明图1是说明多个摄像元件的手抖校正的概要的图。图2是示出第I实施方式的图像处理装置的功能结构的框图。图3是说明第I摄像元件和第2摄像元件的设置信息的图。图4是示出图像处理装置的硬件结构的图。图5是说明运动イ目息的图。图6是示出输出区域取得部中的运算处理的步骤的图。图7是示出第I实施方式的第2输出区域的取得处理的流程图。图8是示出第2实施方式的图像处理装置的功能结构的框图。图9是说明运动校正矩阵的再计算方法的图。图10是示出第2实施方式的第2输出区域的取得处理的流程图。图11是示出第3实施方式的图像处理装置的功能结构的框图。图12是示出平均运动校正矩阵的取得处理的步骤的图。图13是示出第3实施方式的第2输出区域的取得处理的流程图。图14是示出平均运动校正矩阵的取得处理的流程图。 标号说明1、1A、1B图像处理装置；10摄像部；11第I摄像元件；12第2摄像元件；21第I输入部；22第2输入部；30信息取得部；40设置信息取得部；41设置信息存储部；50、50A、50B输出区域取得部；60判定部。具体实施例方式以下，參照附图对本专利技术的实施方式进行说明。在附图的说明中，对相同的要素标注相同的标号，省略重复的说明。(第I实施方式)第I实施方式的图像处理装置进行在从多个摄像元件输入的图像之间具有匹配性的手抖校正处理，并安装在便携电话、数码照相机、摄像机或者普通的计算机系统中。例如，用于多镜头照相机。在本实施方式中，作为多个摄像元件的例子，对具有两个摄像元件的结构进行说明。首先，为了便于理解专利技术，对从两个摄像元件取得立体图像的方法进行说明。图1示出两个摄像元件即第I摄像元件和第2摄像元件拍摄的输入帧和对该输入帧的一部分的像素区域进行剪切而得到的输出帧。以下，将从第I摄像元件拍摄的第I帧、第2帧中剪切的区域(第I输出区域)分别称为第I输出区域AU、第2输出区域A12。此外，将从第2摄像元件拍摄的第I帧、第2帧中剪切的区域(第2输出区域)分别称为第I输出区域A21、第2输出区域A22。为了使用第I摄像元件和第2摄像元件得到立体图像，剪切第I摄像元件拍摄的第I帧图像中的包含对象物T的规定的图像区域作为第I输出区域A本文档来自技高网...

【技术保护点】
一种图像处理装置，其对由摄像装置拍摄的多个帧图像进行图像处理，其中，所述摄像装置具有多个依次连续地拍摄第1帧图像和第2帧图像的摄像元件，所述图像处理装置的特征在于，该图像处理装置具有：设置信息取得部，其按每个所述摄像元件，取得表示所述摄像元件相对于所述摄像装置的设置状态的设置信息；运动信息取得部，其取得所述第1帧图像和所述第2帧图像间的所述摄像装置的运动信息；以及输出区域取得部，其按每个所述摄像元件，取得第2输出区域的位置信息，该第2输出区域是所述第2帧图像内的区域，与所述第1帧图像内的第1输出区域对应，所述输出区域取得部根据由所述设置信息决定的所述第1输出区域的位置信息和所述运动信息，取得多个所述摄像元件中的作为基准的基准摄像元件的所述第2输出区域，所述输出区域取得部根据所述基准摄像元件的设置信息、多个所述摄像元件中的不同于所述基准摄像元件的其它所述摄像元件的设置信息以及所述运动信息，取得其它所述摄像元件的所述第2输出区域。

【技术特征摘要】
2011.10.04 JP 2011-2202691.一种图像处理装置，其对由摄像装置拍摄的多个帧图像进行图像处理，其中，所述摄像装置具有多个依次连续地拍摄第I帧图像和第2帧图像的摄像元件，所述图像处理装置的特征在于，该图像处理装置具有 设置信息取得部，其按每个所述摄像元件，取得表示所述摄像元件相对于所述摄像装置的设置状态的设置信息； 运动信息取得部，其取得所述第I帧图像和所述第2帧图像间的所述摄像装置的运动/[目息;以及 输出区域取得部，其按每个所述摄像元件，取得第2输出区域的位置信息，该第2输出区域是所述第2帧图像内的区域，与所述第I帧图像内的第I输出区域对应， 所述输出区域取得部根据由所述设置信息决定的所述第I输出区域的位置信息和所述运动信息，取得多个所述摄像元件中的作为基准的基准摄像元件的所述第2输出区域， 所述输出区域取得部根据所述基准摄像元件的设置信息、多个所述摄像元件中的不同于所述基准摄像元件的其它所述摄像元件的设置信息以及所述运动信息，取得其它所述摄像元件的所述第2输出区域。2.根据权利要求1所述的图像处理装置，其中， 所述图像处理装置具有判定部，该判定部针对所有摄像元件，判定所述第2输出区域的位置信息是否位于所述第2帧图像内， 在所述第2输出区域的位置信息不位于所述第2帧图像内的情况下，所述输出区域取得部对根据所述第I输出区域的位置信息与所述第2输出区域的位置信息之间的差分求出的移动量进行缩小调整，直到在所有摄像元件中，所述第2输出区域的位置信息位于所述第2帧图像内为止。3.根据权利要求1或2所述的图像处理装置，其中， 所述运动信息取得部从所述基准摄像元件拍摄的所述第I...

【专利技术属性】
技术研发人员：羽深兼介，阿部刚，
申请(专利权)人：株式会社摩如富，
类型：发明
国别省市：