图像拍摄装置、图像处理装置及方法制造方法及图纸

本发明专利技术公开了图像拍摄装置、图像处理装置、方法及程序，其中，该图像拍摄装置包括感测对象的图像的成像单元以及检测由成像单元感测的图像中面部的面部检测单元。运动检测单元检测表示在由成像单元感测的图像中的、由面部检测单元检测的面部区域的抖动量的面部运动量，并且还检测表示除面部区域之外的区域的抖动量的背景运动量。抖动校正单元根据由运动检测单元检测的面部运动量和背景运动量来校正由成像单元感测的图像的抖动。通过本发明专利技术，可根据图像适当地校正图像抖动。

【技术实现步骤摘要】

本专利技术涉及一种图像拍摄装置，更具体地，涉及一种能够校正图像抖动的图像拍摄装置，用于处理图像以校正图像抖动的装置和方法，以及用于在计算机上执行该方法的计算机程序。
技术介绍
近年来，诸如数码相机、数码摄像机以及可用作静止相机和运动相机的相机的图像拍摄装置已经变得越来越普及，并且其在性能上实现很大的提高。然而，当通过手持的图像拍摄装置拍摄对象图像时，可能发生两种抖动。一种是图像拍摄装置的抖动，另一种是对象的抖动。 检测这种抖动的的一种技术是使用诸如振动传感器、速度传感器、加速度传感器或重力传感器的传感器来检测抖动。另一种技术是通过图像处理来检测运动向量。 通过根据抖动检测结果在与抖动方向相反的方向上移动图像位置，可以防止或抑制由于抖动所引起的由图像拍摄装置拍摄的图像的模糊。防止/抑制抖动的一种方法是通过偏移图像传感器的读地址以及偏移图像存储器的写/读地址来电子补偿抖动。另一种方法是通过偏移/倾斜抖动补偿透镜、变形/倾斜补偿校正棱镜或偏移图像传感器来光学补偿抖动。 例如，已经提出对根据从定时发生器提供的快门速度与采样定时信号同步地从抖动传感器输出的抖动进行采样，并根据所采样的抖动信号来控制从图像传感器输出的图像信号的读地址(例如，参见日本未审查专利申请公开第05-316404号)。
技术实现思路
在上述技术中，无论包括在图像中的对象如何，都为图像的所有部分统一执行抖动校正。换句话说，统一为整个图像执行抖动补偿。 然而，在上述抖动校正技术中，因为以相同方式对待包括在图像中的诸如人物轮廓和背景的对象而不考虑对象的运动，所以存在在人物轮廓的面部、眼睛、鼻子、嘴等处发生模糊的可能性。为了防止上面的问题，期望提供不仅适当地校正图像的全局抖动而且还校正诸如包括在图像中的人物轮廓面部的部分的局部抖动的技术。 根据本专利技术的实施例，提供了一种图像拍摄装置，一种用于图像拍摄装置以处理图像的方法，以及一种由计算机执行以处理图像的程序，该图像拍摄装置包括成像装置，用于感测对象的图像；面部检测装置，用于检测由成像装置感测的图像中的面部；运动检测装置，用于检测表示在由成像装置感测的图像中的、由面部检测装置检测的面部区域的抖动量的面部运动量，并且还检测表示除面部区域之外的区域的抖动量的背景运动量；以及抖动校正装置，用于根据由运动检测装置检测的面部运动量和背景运动量来校正由成像装置感测的图像的抖动。因此，如果在图像中检测出面部，则检测表示图像中的面部区域的抖动量的面部运动量以及表示除面部区域之外的区域的抖动量的背景运动量，并根据检测的面部运动量和背景运动量校正图像的抖动。 该图像拍摄装置还可以包括校正值计算装置，用于根据由运动检测装置检测的面部运动量和背景运动量来计算将由抖动校正装置校正的图像抖动的校正值。这使得可以根据在图像中检测的面部运动量和背景运动量计算图像抖动的校正值。在这种情况下，校正值计算装置可根据由运动检测装置检测的面部运动量和背景运动量以及根据预定的加权因子来计算校正值。这使得可以根据在图像中检测的面部运动量和背景运动量以及根据预定的加权因子来计算校正值。在这种情况下，校正值计算装置可通过与由运动检测装置检测的背景运动量相比对由运动检测装置检测的面部运动量应用更大的加权因子来计算校正值。即，通过与背景运动量相比对面部运动量应用更大的加权因子来计算与图像抖动相关的校正值。 在图像拍摄装置中，面部检测装置还可检测与由成像装置感测的图像中所检测的面部相关的特征信息，以及校正值计算装置可根据与由面部检测装置检测的面部相关的特征信息来计算加权因子。即，检测与图像中的面部相关的特征信息，并根据与面部相关的检测特征信息来计算加权因子。在这种情况下，与面部相关的特征信息可包括从由表示面部区域大小的信息、表示面部区域坐标的信息、作为面部的可能性、表示正向程度的信息、表示面部倾斜程度的信息、表示微笑程度的信息、表示严肃程度的信息、以及表示眼睛闭合程度的信息组成的组中所选择的一条或多条信息。即，基于包括从由表示面部区域大小的信息、表示可面部区域坐标的信息、作为面部的可能性、表示正向程度的信息、表示面部倾斜程度的信息、表示微笑程度的信息、表示严肃程度的信息、以及表示眼睛闭合程度的信息组成的组中所选择的一条或更多条信息的特征信息，可以计算加权因子。 在校正值的计算中，校正值计算装置可以为靠近由面部检测装置检测的面部的块增加加权因子。即，在校正值的计算中，校正值计算装置为靠近在图像中检测的面部的块增加加权因子。 在图像拍摄装置中，运动检测装置可将由成像装置感测的图像分成多个区域，使得在这些区域的一个区域中包括由面部检测装置检测的面部，从包括面部的区域中检测面部运动量，并从除包括面部的区域之外的区域中检测背景运动量。即，由成像装置感测的图像被分成多个区域，使得在这些区域的一个区域中包括由面部检测装置检测的面部，并从包括面部的区域中检测面部运动量，还从除包括面部的区域之外的区域中检测背景运动量。 图像拍摄装置还可包括振动检测装置，用于检测由于图像拍摄装置的振动所引起的抖动量，以及抖动校正装置可根据由运动检测装置检测的面部运动量和背景运动量以及由振动检测装置检测的抖动量来校正由成像装置感测的图像抖动。即，根据检测的面部运动量和背景运动量以及检测的图像拍摄装置的抖动量来校正图像的抖动。 图像拍摄装置还可以包括相机控制值检测装置，用于基于与面部相关的特征信息来检测是否为由面部检测装置检测的面部最优设定了聚焦和/或曝光的程度，以及校正值计算装置可根据由相机控制值检测装置检测的是否为面部最优设定了聚焦和/或曝光的程度来为面部计算校正值。即，根据是否为面部最优设定了聚焦和/或曝光的程度计算面部的校正值。 图像拍摄装置还可以包括设定装置，用于设定是否应该执行由成像装置感测的图像中面部的检测。即，对于是否应该执行图像中面部的检测进行设定，从而选择是否应该执行考虑了面部运动的图像抖动的校正。 图像拍摄装置还可以包括用于存储与特定人物的面部相关的特定人物信息的特定人物存储装置以及用于确定由面部检测装置检测的面部是否与存储在特定人物存储装置中的特定人物的面部相同的特定人物识别装置，并且校正值计算装置可计算校正值，使得如果特定人物识别装置确定由面部检测装置检测的面部与存储在特定人物存储装置中的特定人物的面部相同，则校正值计算装置根据区域是否包括特定人物的面部来修改每个区域的加权因子。即，如果确定在图像中检测的面部与特定人物的面部相同，则根据区域是否包括特定人物的面部来修改每个区域的加权因子，并使用修改的加权因子计算图像抖动的校正值。 在图像拍摄装置中，校正值计算装置可计算表示由运动检测装置检测的面部运动量的平均值的第一平均值，根据第一平均值计算由面部检测装置检测的面部区域的校正值，计算表示由运动检测装置检测的背景运动量的平均值的第二平均值，并根据第二平均值计算除由面部检测装置检测的面部区域之外的区域的校正值。即，根据面部运动量的平均值计算面部区域的校正值，并根据背景运动量的第二平均值计算除面部区域之外的区域的校正值。 在图像拍摄装置中，如果通过面部检测装置检测多个面部，则校正值计算装置可计算由面部检测装置检测的每个面部的面部运动量的平均值，并根据计算的本文档来自技高网...

【技术保护点】
一种图像拍摄装置，包括：成像装置，用于感测对象的图像；面部检测装置，用于检测由所述成像装置感测的所述图像中的面部；运动检测装置，用于检测表示在由所述成像装置感测的图像中的、由所述面部检测装置检测的面部区域的抖动量的面部运动量，并且还检测表示除所述面部区域之外的区域的抖动量的背景运动量；以及抖动校正装置，用于根据由所述运动检测装置检测的所述面部运动量和所述背景运动量来校正由所述成像装置感测的图像的抖动。

【技术特征摘要】
JP 2006-11-30 2006-3250151.一种图像拍摄装置，包括成像装置，用于感测对象的图像；面部检测装置，用于检测由所述成像装置感测的所述图像中的面部；运动检测装置，用于检测表示在由所述成像装置感测的图像中的、由所述面部检测装置检测的面部区域的抖动量的面部运动量，并且还检测表示除所述面部区域之外的区域的抖动量的背景运动量；以及抖动校正装置，用于根据由所述运动检测装置检测的所述面部运动量和所述背景运动量来校正由所述成像装置感测的图像的抖动。2.根据权利要求1所述的图像拍摄装置，还包括校正值计算装置，用于根据由所述运动检测装置检测的所述面部运动量和所述背景运动量来计算将由所述抖动校正装置校正的图像抖动的校正值。3.根据权利要求2所述的图像拍摄装置，其中，所述校正值计算装置根据由所述运动检测装置检测的所述面部运动量和所述背景运动量以及根据预定的加权因子来计算所述校正值。4.根据权利要求3所述的图像拍摄装置，其中，所述校正值计算装置通过与由所述运动检测装置检测的所述背景运动量相比对由所述运动检测装置检测的所述面部运动量应用更大的加权因子来计算所述校正值。5.根据权利要求3所述的图像拍摄装置，其中，所述面部检测装置还检测与由所述成像装置感测的图像中所检测的所述面部相关的特征信息；以及所述校正值计算装置根据与由所述面部检测装置检测的面部相关的所述特征信息来计算所述加权因子。6.根据权利要求5所述的图像拍摄装置，其中，与所述面部相关的所述特征信息包括从由表示面部区域大小的信息、表示面部区域坐标的信息、表示作为面部可能性的信息、表示正向程度的信息、表示所述面部倾斜程度的信息、表示微笑程度的信息、表示严肃程度的信息、以及表示眼睛闭合程度的信息组成的组中所选择的一条或多条信息。7.根据权利要求5所述的图像拍摄装置，其中，在所述校正值的计算中，所述校正值计算装置为靠近由所述面部检测装置检测的面部的块增加加权因子。8.根据权利要求1所述的图像拍摄装置，其中，所述运动检测装置将由所述成像装置感测的图像分为多个区域，使得在这些区域的一个区域中包括由所述面部检测装置检测的面部，并从包括所述面部的区域中检测所述面部运动量，并从除包括所述面部的区域之外的区域中检测所述背景运动量。9.根据权利要求1所述的图像拍摄装置，还包括振动检测装置，用于检测由所述图像拍摄装置的振动所引起的抖动量，其中，所述抖动校正装置根据由所述运动检测装置检测的所述面部运动量和所述背景运动量以及由所述振动检测装置检测的所述抖动量来校正由所述成像装置感测的图像的抖动。10.根据权利要求5所述的图像拍摄装置，还包括相机控制值检测装置，用于基于与由所述面部检测装置检测的面部相关的所述特征信息来检测是否为所述面部最优设定了聚焦和/或曝光的程度，其中，所述校正值计算装置根据由所述相机控制值检测装置检测的、是否为所述面部最优设定了聚焦和/或曝光的程度来计算所述面部的校正值。11.根据权利要求1所述的图像拍摄装置，还包括设定装置，用于设定是否应该执行由所述成像装置感测的图像中面部的检测。12.根据权利要求3所述的图像拍摄装置，还包括特定人物存储装置，用于存储与特定人物的面部相关的特定人物信息；以及特定人物识别装置，用于确定由所述面部检测装置检测的面部是否与存储在所述特定人物存储装置中的所述特定人物的面部相同，其中，所述校正值计算装置计算校正值，使得如果所述特定人物识别装置确定由所述面部检测装置检测的面部与存储在所述特定人物存储装置中的所述特定人物的面部相同，则所述校正值计算装置根据区域是否包括所述特定人物的面部来...

【专利技术属性】
技术研发人员：冈田深雪，野村博文，辻村贵，
申请(专利权)人：索尼株式会社，
类型：发明
国别省市：JP[日本]