图像拍摄设备和方法、及表情评价设备技术

一种用于通过使用固态图像拍摄装置来拍摄图像的图像拍摄设备包括：面部检测器，被配置为在将通过图像拍摄获得的图像信号记录在记录介质上为止的期间内，基于图像信号来检测人的面部；表情评价部，被配置为评价检出面部的表情，并计算表示与除指定表情之外的表情相比检出面部与指定表情的接近程度的表情评价值；通知部，被配置为将与所计算出的表情评价值对应的通知信息通知给被摄像者；和图像记录控制器，被配置为当表情评价值超过预定阈值时，自动将通过图像拍摄获得的图像信号记录在记录介质上，其中，通知部通知随着所述表情评价值而改变的所述通知信息、和以与所述通知信息的改变对应的方式来表示所述阈值的位置的阈值信息，作为视觉信息。

【技术实现步骤摘要】

本专利技术涉及一种用于通过使用固态图像拍摄装置来拍摄图像的图像拍摄设备和 方法、一种用于评价所拍摄的图像的面部表情的表情评价设备、以及一种用于执行其处理 的程序。
技术介绍
一般，在图像拍摄设备中，不仅在卤化银相机，而且在数码相机中也会安装所谓的 自拍器功能，其通常从执行用于按下快门的操作开始经过固定时间段之后自动释放快门按 钮。然而，要预先确定通过自拍器功能释放快门的定时。因此，难以保证当释放快门时，被 摄像者的面部上有所想要的表情，并且存在可能经常会得到不满意照片的问题。另外，近年来，用于基于图像信号来执行数字计算处理的图像处理技术迅速发展， 并且作为一个实例，已知用于从图像中检测人的面部的技术。已知一种面部检测技术，其 中，例如，面部图像中的两个像素之间的亮度差异已知为一个特征量，将基于该特征量来计 算表示预定区域是否在输入图像中的评价值，并且最后基于一个或多个评价值中的评价值 来确定该区域中的图像是否为面部(例如，参考第2005-157679号日本未审查专利申请公 开(段落号至)，图1)。此面部检测技术的发展已发展到可将此技术安装到用于使用固态图像拍摄装置 (诸如，数码相机)执行图像拍摄的数字图像拍摄设备中的水平。此外，最近，用于确定检 出面部的表情的技术已引起了注意。例如，已认为，对来自图像信号(其中，连续拍摄多个 框)的每个拍摄的图像，可评价被摄像者的面部的表情，以能够基于关于那些评价的信息 选择适当的图像(例如，参考第2004-46591号日本未审查专利申请公开(段落号W063] 至)，图 3)。
技术实现思路
近年来，由于数字图像拍摄装置的制造商之间的竞争已变得激烈，所以急需要发 展这些图像拍摄设备来增加其产品价值。鉴于如上所述的自拍器功能问题，所拍摄的图像 并不一定会满足摄像者和被摄像者。因此，可以说，对于增加产品价值来说，辅助图像拍摄 操作以增加这种满意度的功能是非常重要的。特别，已预期使用先进的图像处理技术来实 施这种功能。然而，已实施了在执行这种图像拍摄功能的同时实时辅助图像拍摄操作的功 能。鉴于这些问题作出本专利技术。需要提供一种能够使被摄像者和摄像者都高度满意地 来拍摄图像的图像拍摄设备和方法。另外，还需要提供一种能够使被摄像者和摄像者高度满意地来拍摄图像的表情评 价设备、以及用于执行其处理的程序。根据本专利技术的实施例，提供了一种用于通过使用固态图像拍摄装置拍摄图像的图 像拍摄设备，该图像拍摄设备包括面部检测器，被配置为在将通过图像拍摄获得的图像信 号记录在记录介质上为止的期间内，基于图像信号来检测人的面部；表情评价部，被配置为 评价检出面部的表情，并且计算表示与除了指定表情的表情相比检出面部与指定表情的接 近程度的表情评价值；以及通知部，被配置为向被摄像者通知对应于所计算的表情评价值 的通知信息。在此图像拍摄设备中，在将通过图像拍摄所获得的图像信号记录在记录介质上为 止的时间段中，面部检测器从图像信号中检测人的面部。表情评价部评价通过面部检测器 所检测的面部的表情，并且计算表示与除指定表情之外的表情相比面部表情与指定表情的 接近程度的表情评价值。通知部向被摄像者通知对应于所计算的表情评价值的通知信息。在本专利技术的图像拍摄设备中，在将通过图像拍摄获得的图像信号记录在记录介质 上为止的时间段中，从所拍摄图像中检测人的面部，评价面部的表情，并计算表示与除指定 表情之外的表情相比上述面部表情与指定表情的接近程度的表情评价值。然后，向被摄像 者通知对应于表情评价值的通知信息。因此，能够使被摄像者看出他/她的表情是否适于 图像拍摄，因此，能够有利于被摄像者形成更好的表情。因此，能够使被摄像者和摄像者高 度满意度地将图像可靠记录在记录介质上。附图说明图1是示出了根据本专利技术的第一实施例的图像拍摄设备的主要部分的配置的框 图；图2是示出了在图像拍摄设备中所提供的用以执行表情评价模式和表情响应记 录模式的功能的框图；图3示出了在表情评价模式下的操作的略图；图4示出了表示微笑得分的条形图的移动；图5示出了关于使用条形图的微笑得分的显示屏的实例；图6示出了当检测到多个面部时关于对应于表情评价值的信息的屏幕显示的第 一实例；图7示出了当检测到多个面部时关于对应于表情评价值的信息的屏幕显示的第 二实例；图8概念示出了为了进行表情评价而预先生成的信息、和信息生成的流程；图9A、图9B和图9C示出了用于掩蔽将在PCA处理时输入的取样图像的处理过程；图10概念示出了在像素空间和PCA空间中确定轴与面部的输入图像之间的关 系；图11示出了当将表情评价值作为数值输出时的计算实例；图12是示出了在表情响应记录模式下图像拍摄设备的处理流程的流程图；图13示出了根据本专利技术的第二实施例的图像拍摄设备的外观；图14示出了根据本专利技术的第三实施例的图像拍摄设备的外观；图15示出了根据本专利技术的第四实施例的图像拍摄设备的外观；以及图16示出了根据本专利技术的第五实施例的PC(个人计算机)的外观。具体实施例方式以下，将参考附图详细描述本专利技术的优选实施例。图1是示出了根据本专利技术的第一实施例的图像拍摄设备的主要部分的配置的框 图。图1中所示的图像拍摄设备被实施为数码相机或数码摄像机。图像拍摄设备包括 光学组块11、驱动器11a、图像拍摄装置12、定时发生器(TG) 12a、模拟前端(AFE)电路13、 相机信号处理电路14、图形处理电路15、显示装置16、图像编码器17、记录设备18、微型计 算机19、输入部20、LED (发光二极管)发光部21、和声音输出部22。光学组块11包括用于将来自对象的光集中到图像拍摄装置12中的透镜、用于移 动透镜以执行调焦和变焦的驱动机构、快门机构、光圈机构等。基于来自微型计算机19的 控制信号，驱动器11a控制光学组块11中每个机构的驱动。例如，图像拍摄装置12是CXD(电荷耦合器件)型或CMOS (互补金属氧化物半导 体)型的固态图像拍摄装置，基于从TG 12a输出的定时信号而被驱动，然后将来自对象的 入射光转换为电信号。在微型计算机19的控制下，TG 12a输出定时信号。AFE电路13取样并保持从图像拍摄装置12输出的图像信号，以通过⑶S(相关双 取样)处理来令人满意地维持S/N(信号/噪音)比、通过AGC(自动增益控制)处理来控 制增益、执行A/D转换、以及输出数字图像数据。相机信号处理电路14对来自AFE电路13的图像信号执行AF(自动聚焦)、AE(自 动曝光)、关于各种图像质量修正处理的检测处理、以及基于检测信息的对应于从微型计算 机19输出的信号的图像质量修正处理。如后所述，在此实施例中，相机信号处理电路14具 有面部检测功能和提取面部区域的数据的功能。图形处理电路15将从相机信号处理电路14输出的图像数据转换为将在显示装置 16上显示的信号，然后将该信号提供给显示装置16。此外，图形处理电路15响应于来自微 型计算机19的请求，将诸如表情得分(稍后描述)的信息组合到图像中。例如，显示装置 16由IXD (液晶显示器)形成，并且基于来自图形处理电路15的图像信号来显示图像。图像编码器17压缩并编码从相机信号处理电路14输出的图像数据，然后将编码 数据输出至记录设备18。更特别，图像编码器17本文档来自技高网...

【技术保护点】
一种用于通过使用固态图像拍摄装置来拍摄图像的图像拍摄设备，所述图像拍摄设备包括：面部检测器，被配置为在将通过图像拍摄获得的图像信号记录在记录介质上为止的期间内，基于所述图像信号来检测人的面部；表情评价部，被配置为评价检出面部的表情并计算表情评价值，所述表情评价值表示与除适于图像拍摄的指定表情之外的表情相比，所述检出面部与所述指定表情的接近程度；通知部，被配置为通知对应于计算出的所述表情评价值的通知信息；以及图像记录控制器，被配置为当所述表情评价值超过预定阈值时，自动将通过图像拍摄获得的图像信号记录在记录介质上，其中，所述通知部通知随着所述表情评价值而改变的所述通知信息、和以与所述通知信息的改变对应的方式来表示所述阈值的位置的阈值信息，作为视觉信息。

【技术特征摘要】
...

【专利技术属性】
技术研发人员：小川要，
申请(专利权)人：索尼株式会社，
类型：发明
国别省市：JP[日本]