图像编辑装置和控制图像编辑装置的方法制造方法及图纸

本发明专利技术提供了图像编辑装置和控制图像编辑装置的方法。该图像编辑装置包括图像输入单元，该图像输入单元包括对对象进行拍照以获得对象的图像的摄像电路（１０７）。脸部检测电路（１１３）从该图像输入单元所获得的图像中检测对象的脸部图像。脸部表情检测电路（１１４）基于该脸部检测电路所检测到的脸部图像来检测对象的脸部的方向和表情中的至少任何一个。瞳孔检测电路基于该脸部检测电路所检测到的脸部图像来检测对象的瞳孔图像。反光合成电路（１０１）根据该脸部表情检测电路所检测到的脸部的方向和表情中的任何一个在该瞳孔检测电路所检测到的瞳孔图像上合成不同的反光。

【技术实现步骤摘要】

本专利技术涉及图像编辑装置、控制图像编辑装置的方法及存储图像编辑程序的记录介质，它们在对象脸部的图像上合成反光(catch-light)。
技术介绍
在人物摄影中，已知一种通过在对象(比如模特)的眼睛中插入反 光而使脸部变得突出(standout)的技术。可以通过插入这种反光来强调 或加强对象脸上的表情。 一般而言，人脸有多种表情，比如高兴、生气 和忧虑。对于每一种脸部表情都存在最优的反光。作用于对象上的光线在对象眼睛角膜的球表面上反射，并且反射光 由摄像元件来曝光，从而产生了反光。日本专利申请公报第2001-91979 号公开了一种利用作为光源而内置在相机中的闪光灯单元来产生这种反 光的技术。在日本专利申请公报第2001-91979号中，用于照明对象的光 源为点光源，且光的颜色为白色。因此，在对象的瞳孔上产生了白色圆 形反光。日本专利申请公报第2006-72743号公开了一种通过图像处理而 人为地产生反光的技术。如上所述，人脸有多种表情，并且对于每个表情都存在最优的反光。 日本专利申请公开第2001-91979号中公开的技术仅可以将反光表达成 白点。此外，相机镜头与闪光灯单元的发光部件之间的位置关系通常是 相同的，在应用反光时无位置灵活性可言。为了利用光源来插入有效的 反光，必须设定光源的种类、从光源到对象的距离以及光到眼睛的入射 角。然而，这些设定仅可以由有经验的摄影师或高级业余爱好者进行设 定。此外，日本专利申请公开第2006-72743号中公开的这种通过图像处 理来产生反光的技术在图像处理时困难且繁琐，并且要求高级的技巧。
技术实现思路
本专利技术的目的是提供一种图像编辑装置、控制图像编辑装置的方法 及存储图像编辑程序的记录介质，它们根据人脸来实现有效的反光表情， 并且使得即使在拍照和编辑图像方面经验很少的用户也能够容易地获得 带有反光表情的人物摄影作品。本专利技术的第一方面提供了 一种图像编辑装置，该图像编辑装置包括: 图像输入单元，其包括对对象进行拍照以获得对象的图像的摄像电路； 脸部检测电路，其从图像输入单元所获得的图像中检测对象的脸部图像; 脸部表情检测电路，其基于脸部检测电路所检测到的脸部图像来检测对 象脸部的方向和表情中的至少任何一个；瞳孔检测电路，其基于脸部检 测电路所检测到的脸部图像来检测对象的瞳孔图像；以及反光合成 (composition)电路，其根据脸部表情检测电路所检测到的脸部的方向 和表情中的任何一个，在瞳孔检测电路所检测到的瞳孔图像上合成不同 的反光。本专利技术的第二方面提供了一种控制装置的方法，该装置用于编辑通 过对对象进行拍照而获得的图像，该方法包括以下步骤从所获得的图 像中检测对象的脸部图像；基于所检测到的脸部图像来检测对象的脸部 的方向和表情中的至少任何一个；基于所检测到的脸部图像来检测对象 的瞳孔图像；以及根据所检测到的脸部的方向和表情中的任何一个，在 所检测到的瞳孔图像上合成不同的反光。本专利技术的第三方面提供了一种控制装置的方法，该装置用于编辑通 过对对象进行拍照而获得的图像，该方法包括以下步骤从所获得的图 像中检测对象的脸部图像；基于所检测到的脸部图像来检测对象的脸部 的方向和表情中的至少任何一个；基于所检测到的脸部图像来检测对象 的眼睛的方向；基于所检测到的脸部图像来检测对象的瞳孔图像；以及 根据所检测到的脸部的方向和表情以及眼睛的方向中的任何一个在所检 测到的瞳孔图像上合成反光。本专利技术的第四方面提供了一种计算机可读记录介质，其上记录有用于编辑通过对对象进行拍照而获得的图像的程序，该程序使计算机能够 执行以下功能从所获得的图像中检测对象的脸部图像的功能；基于所 检测到的脸部图像来检测对象的瞳孔图像的功能；以及根据所检测到的脸部的方向和表情中的任何一个在所检测到的瞳孔图像上合成不同的反 光的功能。本专利技术的第五方面提供了一种图像编辑装置，其包括图像输入单 元，其包括对对象进行拍照以获得对象的图像的摄像电路；检测电路， 其从图像输入单元所获得的图像中检测对象的脸部图像，基于所检测到 的脸部图像来检测对象脸部的方向和表情中的至少任何一个，并基于所 检测到的脸部图像来检测对象的瞳孔图像；以及反光合成电路，其根据 所检测到的脸部的方向和表情中的任何一个在所检测到的瞳孔图像上合 成不同的反光。本专利技术的优点将在下面的描述中进行阐述，并且将部分地通过这种 描述而变得明显，或者可以通过实施专利技术而获得。可以利用此后特别指 出的手段及组合来实现并获得本专利技术的优点。附图说明结合在说明书中并构成了说明书一部分的附图示出了本专利技术的实施方式，并且与以上给出的概述及以下给出的实施方式的详细说明一起用 于解释本专利技术的原理。图1为示出了作为根据专利技术第一实施方式的图像编辑装置的例子的 数字相机的构成框图2A、 2B和2C示出了光源的位置与从瞳孔反射的光的方向之间的 关系；图3A、3B和3C示出了从瞳孔反射的光与瞳孔内的反光之间的关系； 图4为示出了根据专利技术第一实施方式的数字相机的操作的流程图； 图5示出了当通过启动辅助发光电路来拍照时对象眼睛的图像数据 分布；图6为示出了计算值R的处理流程的流程图；图7A示出了具有高R值的表情的例子； 图7B示出了具有低R值的表情的例子； 图8为示出了修正值R的流程的流程图； 图9A示出了当脸部方向朝前时的表情的例子； 图9B示出了当脸部方向朝下时的表情的例子； 图9C示出了当脸部方向朝上时的表情的例子； 图IOA、 IOB、 IOC、 IOD、 10E以及10F示出了瞳孔图像上的多种 反光表情的例子；而图11为示出了根据专利技术第二实施方式的数字相机的操作的流程图。具体实施例方式下面将结合附图来说明本专利技术的实施方式。 图1为示出了作为根据专利技术第一实施方式的图像编辑装置的例子的 数字相机100的构成框图。图1所示的数字相机100具有微处理器单元(MPU) 101、操作单元102、相机镜头103、自动聚焦(AF)电路104、 光圈机构105、光圈控制电路106、摄像元件107、模拟前端(AFE)电 路108、图像处理电路109、显示控制电路110、显示面板111、焦距判 定电路112、脸部检测电路113、脸部表情检测电路114、压縮/解压縮电 路115、记录控制电路116、记录介质117、辅助发光电路118、反射样式(pattern)检测电路119及通信电路120。数字相机100通过网络300可 通信地连接到服务器400。MPU 101根据用户对操作单元102的操作来依次控制构成数字相机 100的每个框。操作单元102包括用数字相机100进行拍照的释放开关; 以及使数字相机100操作模式在拍照模式和播放模式之间改变的模式改 变开关。MPU 101具有用于记录用户所拍照片时间/日期的计时器。计时器可 以将拍照时间/日期与通过拍照所获得的图像数据关联起来。相机镜头103在摄像元件107内形成对象200的图像。相机镜头103包括用于自动聚焦的聚焦镜头。在自动聚焦模式下，MPU 101监控聚焦 镜头的位置，并通过控制AF电路104来改变聚焦镜头的位置，从而调节 相机镜头103的焦距。光圈机构105设置在相机镜头103内或者附近， 并且充当快门和光圈。光圈机构105在拍照开始时本文档来自技高网...

【技术保护点】
一种图像编辑装置，该图像编辑装置的特征在于包括：图像输入单元，其包括对对象进行拍照以获得对象的图像的摄像电路；脸部检测电路，其从该图像输入单元所获得的图像中检测对象的脸部图像；脸部表情检测电路，其基于该脸部检测电路所检测到的脸部图像来检测对象脸部的方向和表情中的至少任何一个；瞳孔检测电路，其基于该脸部检测电路所检测到的脸部图像来检测对象的瞳孔图像；以及反光合成电路，其根据该脸部表情检测电路所检测到的脸部的方向和表情中的任何一个，在该瞳孔检测电路所检测到的瞳孔图像上合成不同的反光。

【技术特征摘要】
...

【专利技术属性】
技术研发人员：丸山淳，宫崎敏，冨泽将臣，铃木猛士，野中修，
申请(专利权)人：奥林巴斯映像株式会社，
类型：发明
国别省市：JP[日本]