图像处理装置、方法以及图像拾取装置制造方法及图纸

本发明专利技术公开了一种图像处理装置、方法和程序以及图像拾取装置。该图像拾取装置包括：第一基础图像选择单元，选择一条图像数据，作为在重叠操作中使用的第一基础图像；偏移量计算单元，计算第一基础图像与另一条不同图像数据之间的偏移量；图像重叠单元，在基于所计算的偏移量进行偏移校正之后检测重叠区域，并对该重叠区域执行重叠操作，其中该重叠区域为能够在选择的第一基础图像上重叠所述不同图像数据的区域；第二基础图像选择单元，选择一条图像数据，作为在非重叠区域中使用的第二基础图像；以及图像组合单元，将重叠操作结果与在该第二基础图像中的非重叠区域进行组合，并输出作为组合结果的图像数据。

【技术实现步骤摘要】

本专利技术涉及一种图像处理装置以及图像拾取装置，用于处理通过连续拍 摄等方式获取的多条图像数据。
技术介绍
当使用在移动电话等中配置的数码相机(图像拾取装置)执行图像拍摄 时，由于例如在曝光过程中持有移动电话的手的抖动而造成的相机抖动对于 要获取的图像会产生影响。为了抑制相机抖动的影响，对要获取的图像进行 相机抖动校正。在相机抖动校正过程中，对通过连续拍摄获取的多(N)条图像数据执 行组合处理以得到一个组合图像。作为组合处理，下述传统方法是公知。(1) 将第一个获取的图像定义为基础图像，以及将第二至第N个图像 与第一个基础图像顺序组合。(2) 将第m (例如，m=N/2)个获取的图像定义为基础图像，以及将其 它图像与第m个基础图像顺序组合。在上述的方法(1)的情况下，相机抖动通常发生在某一方向上。因此， 当将第一至第N个图像顺序重叠时，在第一个图像(即，基础图像)与待重 叠的最终目标图像之间会产生更大的偏移，因而削弱了重叠功能。此外，在上述的方法(2)中，例如，当第m (m=N/2)个获取的图像为 基础图像时，偏移量可能约为将第一或第N个图像定义为基础图像的情况的 1/2，从而提高了重叠功能。然而，由于第m个图像为用于重叠的基础图像， 所以尽管用户认为当其按下快门时便获取了图像，但是在按下快门的时刻获 取的图像与当重叠图像时作为基础图像的图像之间会存在时滞。结果，与用 户期望的图像会存在更大的偏移。已经公开了多种技术用作相机抖动校正技术。例如，专利文献l公开了一种具有两种模式的电子相机，即模糊校正模 式(抖动校正模式)以及非模糊校正模式(非抖动校正模式)。电子相机仅在CCD (电荷耦合器件)曝光过程中执行模糊校正(抖动校正)，当电子相 机处于拍摄准备期间，在像素数据输出过程中不执行模糊校正(为非模糊校 正模式)。专利文献2公开了这样一种相机，即当选择防止抖动拍摄模式时可以通 过改变普通拍摄模式下镜片及快门的工作速度来其进行控制。相机的拍摄模 式选择部件选择相机的拍摄模式，例如防止抖动拍摄模式、普通拍摄模式等。 在开始曝光时，驱动速度改变部件根据拍摄模式选择部件的选择结果输出用 以改变镜片及快门的驱动速度的指令至镜片驱动部件及快门驱动部件。 [专利文献l]日本公开专利申请No. 2003-333414 电子相机 [专利文献2]日本公开专利申请No.H7-28149 相机防抖动装置
技术实现思路
本专利技术目的在于提供一种图像数据处理装置、图像数据处理方法以及图 像数据处理程序，能够从获取的多条图像数据中得到具有更高准确度的组合 图像。本专利技术的另 一 目的在于提供一种图像拾取装置，能够避免组合图像从用 户期望图像中偏移。根据本专利技术第一方面的图像数据处理装置是这样一种图像数据处理装置，用于处理多条图像数据，其包括第一基础图像选择单元，从获取的多 条图像数据中选择一条图像数据，作为在重叠操作中使用的第一基础图像； 偏移量计算单元，计算被选择用于重叠操作的第一基础图像与获取的多条图 像数据中另一条不同图像数据之间的偏移量；图像重叠单元，在基于所计算 的偏移量进行偏移校正之后检测重叠区域，并对该重叠区域执行重叠操作， 其中该重叠区域为能够在选择的第一基础图像上重叠所述不同图像数据的 区域；第二基础图像选择单元，从所述获取的多条图像数据中选择一条图像 数据，作为在非重叠区域中使用的第二基础图像；以及图像组合单元，将重 叠操作结果与在该第二基础图像中的非重叠区域进行组合，并输出作为组合 结果的图像数据。通过上述配置，该第一和第二基础图像选择单元分别选择当重叠所述获 取的多个图像数据时在该重叠区域中使用的第一基础图像以及在该非重叠 区域中使用的第二基础图像。因此，例如通过从所述多条图像数据中选择其中具有最小抖动量的图像 数据作为在该非重叠区域中的第二基础图像，或是通过从所述多条图像数据 中的非重叠区域中选择用以指示在人面部上的眼睛睁开程度最大的图像数 据作为在该非重叠区域中使用的第二基础图像，可以提高在图像数据的非重 叠区域中作为组合结果的图像质量，以及可以得到具有更高精度的组合图 像。根据本专利技术第二方面的图像拾取装置是这样一种图像拾取装置，用于处 理通过连续拍摄获得的多条图像数据，该图像拾取装置包括图像传感器， 对于从待获取的对象接收的光执行光/电转换，以及输出光/电转换数据；图 像数据产生单元，基于该光/电转换数据产生图像数据；拍摄控制单元，响应 于拍摄指令输出曝光控制信息至该图像传感器，并获取多条图像数据；第一 基础图像选择单元，从所述获取的多条图像数据中选择一条图像数据作为在 重叠操作中使用的第一基础图像；偏移量计算单元，计算被选择用于重叠操 作的第一基础图像与获取的多条图像数据中另一条不同图像数据之间的偏 移量；图像重叠单元，在基于所计算的偏移量进行偏移校正之后检测重叠区 域，并对该重叠区域执行重叠操作，其中该重叠区域为能够在选择的第一基 础图像上重叠所述不同图像数据的区域；第二基础图像选择单元，从所述获 取的多条图像数据中选择一条图像数据，作为在非重叠区域中使用的第二基 础图像；以及图像组合单元，将重叠操作结果与在该第二基础图像中的非重 叠区域进行组合，并输出作为组合结果的图像数据。通过上述配置，该第一和第二基础图像选择单元分别选择当重叠所述多 个获取的图像数据时在该重叠区域中使用的第一基础图像以及在该非重叠 区域中使用的第二基础图像。因此，例如通过从所述获取的多条图像数据中选择与第一个拍摄图像对 应的图像数据，作为在该非重叠区域中使用的该第二基础图像，可以避免当 用户认为已经获得在按下快门按钮时获取的图像时组合图像从用户期望的 图像中偏移。此外，通过从所述获取的多条图像数据中选择与在快门发出声音时刻拍摄的图像对应的图像数据，作为在该非重叠区域中使用的该第二基 础图像，可以避免当用户认为己经获得在快门发出声音时刻获取的图像时组 合图像从用户期望的图像中偏移。通过根据本专利技术的图像数据处理装置，可以从获取的多条图像数据中得 到具有更高的精度的组合图像。此外，根据本专利技术的图像拾取装置可以避免在组合图像中出现从用户期 望的图像中偏移。附图说明图1为根据本专利技术的检测重叠区域方法的示意图；图2为示出用以实施本专利技术的对每种模式共用的图像拾取装置的结构方 框图；图3示出了根据本专利技术的校正单元工作原理的配置，以及是示出根据用 于实现本专利技术第一及第二模式的校正单元的配置的方框图； 图4为根据本专利技术的拍摄处理以及图像处理的流程图； 图5为根据用以实施本专利技术第一模式的拍摄处理以及图像处理的流程图；图6为根据用以实现本专利技术第二模式的拍摄处理以及图像处理的流程图；图7为根据用以实现本专利技术第三模式的第二基础图像选择单元(用于非 重叠区域的基础图像选择单元)配置的方框图；图8为根据用以实现本专利技术第三模式的拍摄处理以及图像处理的流程图；图9为根据用以实现本专利技术第四模式的第二基础图像选择单元(用于非 重叠区域的基础图像选择单元)配置的方框图；图10为根据用以实现本专利技术第四模式的拍摄处理以及图像处理的流程 图；和图11示出存储介质的实例。具体实施方式 下文描述了在通过组合多个图像来产生图像的领域中的相机抖动校正。 然而，除了相机抖动校正之外本文档来自技高网...

【技术保护点】
一种图像数据处理装置，用于处理多条图像数据，该图像数据处理装置包括：第一基础图像选择单元，从获取的多条图像数据中选择一条图像数据，作为在重叠操作中使用的第一基础图像；偏移量计算单元，计算被选择用于重叠操作的第一基础图像与所述 获取的多条图像数据中另一条不同图像数据之间的偏移量；图像重叠单元，在基于所计算的偏移量进行偏移校正之后检测重叠区域，并对该重叠区域执行重叠操作，其中该重叠区域为能够在选择的第一基础图像上重叠所述不同图像数据的区域；第二基础图 像选择单元，从所述获取的多条图像数据中选择一条图像数据，作为在非重叠区域中使用的第二基础图像；以及图像组合单元，将重叠操作结果与在该第二基础图像中的非重叠区域进行组合，并输出作为组合结果的图像数据。

【技术特征摘要】
JP 2006-9-27 2006-2617881.一种图像数据处理装置，用于处理多条图像数据，该图像数据处理装置包括第一基础图像选择单元，从获取的多条图像数据中选择一条图像数据，作为在重叠操作中使用的第一基础图像；偏移量计算单元，计算被选择用于重叠操作的第一基础图像与所述获取的多条图像数据中另一条不同图像数据之间的偏移量；图像重叠单元，在基于所计算的偏移量进行偏移校正之后检测重叠区域，并对该重叠区域执行重叠操作，其中该重叠区域为能够在选择的第一基础图像上重叠所述不同图像数据的区域；第二基础图像选择单元，从所述获取的多条图像数据中选择一条图像数据，作为在非重叠区域中使用的第二基础图像；以及图像组合单元，将重叠操作结果与在该第二基础图像中的非重叠区域进行组合，并输出作为组合结果的图像数据。2. 根据权利要求1所述的装置，其中该第二基础图像选择单元从所述多 条图像数据中选择其中具有最小抖动量的图像数据作为在该非重叠区域中 使用的该第二基础图像。3. 根据权利要求2所述的装置，其中所述具有最小抖动量的图像数据指 的是在该图像数据中检测到的边缘部分中具有最高分辨率的图像数据。4. 根据权利要求2所述的装置，其中所述具有最小抖动量的图像数据指 的是在该图像数据中提取的特征点部分中具有最高分辨率的图像数据。5. 根据权利要求1所述的装置，还包括面部识别单元，在所述获取的图像数据的非重叠区域中识别人面部上的 眼睛的睁开程度；其中该第二基础图像选择单元选择由该面部识别单元识别的用以指示在人面部上的眼睛睁开程度最大的图像数据，作为在该非重叠区域中使用的第二 基础图像。6. —种图像拾取装置，用于处理通过连续拍摄获取的多条图像数据，该 图像拾取装置包括图像传感器，对于从待捕捉的对象接收的光执行光/电转换，并输出光/电转换数据；图像数据产生单元，基于该光/电转换数据产生图像数据；拍摄控制单元，响应于拍摄指令向该图像传感器输出曝光控制信息，并 获取多条图像数据；第一基础图像选择单元，从所述获取的多条图像数据中选择一条图像数 据作为在重叠操作中使用的第一基础图像；偏移量计算单元，计算被选择用于重叠操作的第一基础图像与所述获取 的多条图像数据中另一条不同图像数据之间的偏移量；图像重叠单元，在基于所计算的偏移量进行偏移校正之后检测重叠区 域，并对该重叠区域执行重叠操作，其中该重叠区域为能够在选择的第一基 础图像上重叠所述不同图像数据的区域；第二基础图像选择单元，从所述获取的多条图像数据中选择一条图像数 据，作为在非重叠区域中使用的第二基础图像；以及图像组合单元，将重叠操作结果与在该第二基础图像中的非重叠区域进 行组合，并输出作为组合结果的图像数据。7. 根据权利要求6所述的装置，其中该第二基础图像选择单元从所述获 取的多条图像数据中选择与第一个拍摄图像对应的图像数据，作为在该非重 叠区域中使用的该第二基础图像。8. 根据权利要求6所述的装置，其中该第二基础图像选择单元从所述获 取的多条图像数据中选择与在快门发出声音的时刻拍摄的图像对应的图像 数据，作为在该非重叠区域中使用的该第二基础图像。9. 一种图像数据处理方法，用于处理多条图像数据，该方法包括下列步骤第一基础图像选择步骤，从获取的多条图像数据中选择一条...

【专利技术属性】
技术研发人员：中条薰，若松隆，村下君孝，清水雅芳，泉泽映文，宇都木洁，
申请(专利权)人：富士通株式会社，
类型：发明
国别省市：JP[日本]