面部识别装置及其控制方法和面部识别方法制造方法及图纸

本发明专利技术提供面部识别装置及其控制方法和面部识别方法。通过对面部字典中登记的人物的登记面部图像与包括在存储的图像中的面部图像进行比较来计算相似度，并且从面部图像列表中提取所计算出的相似度落入预定范围内的面部图像，其中，在所述预定范围内，所计算出的相似度不是非常高。将提取的图像登记在面部字典中，从而容易地生成能够从许多图像中有效检索该人物的面部字典。

【技术实现步骤摘要】
面部识别装置及其控制方法和面部识别方法
本专利技术涉及使用面部识别功能判别图像中的人物的面部识别装置及其控制方法和面部识别方法。
技术介绍
通过配设在图像浏览器中的面部识别功能而按各个人物自动管理图像的功能在不断普及。然而，在面部字典中登记同一人物的多个面部图像时，必须重复登记面部图像。例如，在日本专利特开2005-174308号公报中，提出了如下的方法：即通过面部识别功能，把被假定是与最初登记的人物相同的人物的面部图像，按相似性进行排序，并将排序后的图像的列表呈现给用户，以便减轻在面部字典中登记面部图像的工作。用户从呈现的面部图像列表中选择拍摄有该人物的面部图像，决定选择的面部图像是人物本人的面部，并且，图像浏览器将面部图像添加登记在面部字典中。在添加登记面部图像时更新面部字典，并且，把被假定是相同人物的面部图像的列表，作为具有较高精度的面部识别的结果再次呈现给用户。此外，面部识别功能的如下特性是公知的，即如果仅登记相似的面部图像，则识别精度只能提高少许。如上所述，即使向面部字典中新登记与面部字典中已经登记的面部图像具有极高相似度的同一人物的面部图像，也不能有效地提高识别精度。反而是，为了有效提高识别精度，倒不如将同一人物的、彼此不是很相似的面部图像登记在面部字典中。然而，要检索同一人物的、彼此不是很相似的面部图像，作为要登记在面部字典中的面部图像，则需要较长时间。此外，对于不知道通过在面部字典中登记同一人物的、彼此不是很相似的面部图像能够有效提高识别精度的用户而言，他们可能根本不会去检索同一人物的、彼此不是很相似的面部图像。
技术实现思路
本专利技术的一个方面旨在解决所有问题或至少一个问题。根据本专利技术的一个方面，提供一种面部识别装置，该面部识别装置包括：特征量提取单元，被构造为通过分析图片图像中的人物的面部图像来提取面部特征量；面部字典生成单元，被构造为以将所述特征量提取单元提取的特征量与人名相关联的方式来生成面部字典；添加单元，被构造为以与在所述面部字典中登记的人名相关联的方式来新添加面部特征量；以及显示控制单元，被构造为将通过分析另一图片图像中的人物的面部图像而提取的面部特征量与所述面部字典中登记的面部特征量进行比较来计算相似度，以及将所述相似度落入预定范围内的面部图像作为要添加至所述面部字典的候选显示在显示部上。通过以下参照附图对示例性实施例的详细描述，本专利技术的其他特征和方面将变得清楚。附图说明包含在说明书中、构成说明书的一部分的附图，示出了本专利技术的示例性实施例、特征和方面，并且与文字说明一起，用于解释本专利技术的原理。图1是例示根据实施例的个人计算机的框图。图2是例示根据实施例的面部检索对话框的图。图3是例示根据实施例的面部字典编辑对象人物选择对话框的图。图4是例示根据实施例的面部字典对话框及面部候选列表对话框的图。图5是例示根据实施例的面部图像列表的结构的图。图6是例示根据实施例的面部字典的结构的图。图7是根据第一实施例的面部字典登记图像候选提取处理的流程图。图8是例示根据第一实施例的识别精度提高面部图像提取处理的详细流程图的图。图9是例示根据实施例的、在面部图像添加之前面部检索对话框的操作示例的图。图10是例示根据实施例的面部字典对话框及面部候选图像列表对话框的操作示例的图。图11是例示根据实施例的、在面部图像添加之后面部检索对话框的操作实例的图。图12是例示根据第一实施例的变型例的识别精度提高面部图像提取处理的详细流程图的图。图13是例示根据第一实施例的另一变型例的识别精度提高面部图像提取处理的详细流程图的图。图14是例示根据第一实施例的另一变型例的识别精度提高面部图像提取处理的详细流程图的图。图15是例示根据第一实施例的另一变型例的识别精度提高面部图像提取处理的详细流程图的图。图16是例示根据第二实施例的识别精度提高面部图像提取处理的详细流程图的图。图17是例示根据第二实施例的面部字典对话框和面部候选图像列表对话框的图。图18是例示根据第二实施例的变型例的面部字典对话框和面部候选图像列表对话框的图。具体实施方式以下，将参照附图，来详细描述本专利技术的各种示例性实施例、特征及方面。第一实施例在以下实施例中，图像浏览器是具有诸如管理图像文件、显示图像和显示附属于图像文件的缩略图图像的列表的功能的应用程序。在以下的实施例中，对图像的人物的面部进行分析，以通过预定运算，来对诸如眼睛、鼻子、嘴部及面部的形状和颜色等的特征进行参数化，并且称为“面部特征量”。将如下的数据库文件称为“面部字典”，在其中，利用编号或文件名，而以便于管理的方式形成关于面部特征量的信息的数据库。本实施例的面部识别装置包括如下的功能，即识别诸如硬盘等的存储设备中的图像文件的图像中包括的面部，并按各个人物来管理面部。在第一实施例中，将描述向用户显示面部图像候选的列表的面部识别装置，所述候选可以在将面部登记在面部字典中时有效提高识别精度。被作为面部识别装置来操作的图像浏览器下面，将描述根据本专利技术的实施例的、被作为面部识别装置来操作的个人计算机。图1是例示根据本专利技术的本实施例的个人计算机的框图。个人计算机通过在个人计算机中执行预定的控制程序来进行以下的面部识别处理，并且，个人计算机充当面部识别装置。参照图1，中央处理单元(CPU)101控制整个个人计算机。CPU101的操作处理过程(诸如用于在开启个人计算机的电源时的处理的程序以及用于基本输入/输出处理的程序)被存储在只读存储器(ROM)102中。随机存取存储器(RAM)103充当CPU101的主存储器。RAM103提供进行包括执行稍后描述的处理的控制程序的各种处理时的工作区。显示单元104在CPU101的控制下进行各种显示。例如，显示单元104利用图像浏览器的应用程序，来以列表方式显示缩略图。图像浏览器的控制程序存储在硬盘驱动器105中。通过图像浏览器来管理的图像文件和面部字典也存储在硬盘驱动器105中。在DVD(数字多功能光盘)106上能够附装可拆卸的光记录介质，以读取记录在光学记录介质中的数据。输入设备107是执行图像浏览器的各种操作的鼠标和键盘。在记录介质加载单元(介质驱动器)108上能够附装可拆卸的记录介质，以记录数据或读取记录的数据。系统总线(包括地址总线、数据总线和控制总线)109连接以上各单元。面部识别装置的用户接口下面，将参照图2、3和4，来详细描述根据本专利技术实施例的、被作为面部识别装置来操作的图像浏览器的用户接口。通常，除了显示保持在特定的文件夹中的图像的列表的功能，图像浏览器还具有根据图片图像的摄影日期时间来进行管理的功能，以及根据图片图像的位置来进行管理的功能。在第一实施例中，以下将描述本专利技术的图像浏览器具有的功能当中的面部识别功能。图2是例示根据本专利技术的本实施例的面部检索对话框的图。图3是例示根据本专利技术的本实施例的面部字典编辑对象人物选择对话框的图。图4是例示根据本专利技术实施例的面部字典对话框和面部候选图像列表对话框的图。CPU101在个人计算机的显示器104上显示面部检索对话框201。当用户按下面部检索对话框的结束按钮202时，CPU101结束图像浏览器中的面部检索对话框。附图标记203表示人名输入文本框。附图标记204表示面部检索对本文档来自技高网...

【技术保护点】
一种面部识别装置，该面部识别装置包括：特征量提取单元，用于通过分析图片图像中的人物的面部图像来提取面部特征量；面部字典生成单元，用于以将所述特征量提取单元提取的特征量与人名相关联的方式来生成面部字典；添加单元，用于以与在所述面部字典中登记的人名相关联的方式来新添加面部特征量；以及显示控制单元，用于将通过分析另一图片图像中的人物的面部图像而提取的面部特征量与所述面部字典中登记的面部特征量进行比较来计算相似度，并将所述相似度落入预定范围内的面部图像作为要添加至所述面部字典的候选显示在显示部上。

【技术特征摘要】
2011.05.16 JP 2011-1094121.一种面部识别装置，该面部识别装置包括：特征量提取单元，用于通过分析图片图像中的人物的面部图像来提取面部特征量；面部字典生成单元，用于以将所述特征量提取单元提取的特征量与人名相关联的方式来生成面部字典；添加单元，用于以与在所述面部字典中登记的人名相关联的方式来新添加面部特征量；以及显示控制单元，用于将通过分析另一图片图像中的人物的面部图像而提取的面部特征量与所述面部字典中登记的面部特征量进行比较来计算相似度，并将所述相似度落入预定范围内的面部图像作为要添加至所述面部字典的候选显示在显示部上，以使用户能够目视选择与要添加至所述面部字典的所述面部特征量对应的所述面部图像，其中，所述预定范围不包括所计算出的相似度为高相似度的范围以及所计算出的相似度为低相似度的范围，并且其中，所述显示控制单元确定所计算出的相似度落入所述预定范围内的提取的面部图像的面部朝向与所述面部字典中登记的面部朝向是否不同，并且，所述显示控制单元将面部朝向与所述面部字典中登记的面部朝向不同的面部图像显示为要添加至所述面部字典的候选。2.一种面部识别装置，该面部识别装置包括：特征量提取单元，用于通过分析图片图像中的人物的面部图像来提取面部特征量；面部字典生成单元，用于以将所述特征量提取单元提取的特征量与人名相关联的方式来生成面部字典；添加单元，用于以与在所述面部字典中登记的人名相关联的方式来新添加面部特征量；以及显示控制单元，用于将通过分析另一图片图像中的人物的面部图像而提取的面部特征量与所述面部字典中登记的面部特征量进行比较来计算相似度，并将所述相似度落入预定范围内的面部图像作为要添加至所述面部字典的候选显示在显示部上，以使用户能够目视选择与要添加至所述面部字典的所述面部特征量对应的所述面部图像，其中，所述预定范围不包括所计算出的相似度为高相似度的范围以及所计算出的相似度为低相似度的范围，并且其中，所述显示控制单元确定针对所计算出的相似度落入所述预定范围内的面部图像的光源方向与针对所述面部字典中登记的面部图像的光源方向是否不同，并且，所述显示控制单元将光源方向与所述面部字典中登记的面部图像不同的面部图像显示为要添加至所述面部字典的候选。3.一种面部识别装置，该面部识别装置包括：特征量提取单元，用于通过分析图片图像中的人物的面部图像来提取面部特征量；面部字典生成单元，用于以将所述特征量提取单元提取的特征量与人名相关联的方式来生成面部字典；添加单元，用于以与在所述面部字典中登记的人名相关联的方式来新添加面部特征量；以及显示控制单元，用于将通过分析另一图片图像中的人物的面部图像而提取的面部特征量与所述面部字典中登记的面部特征量进行比较来计算相似度，并将所述相似度落入预定范围内的面部图像作为要添加至所述面部字典的候选显示在显示部上，以使用户能够目视选择与要添加至所述面部字典的所述面部特征量对应的所述面部图像，其中，所述预定范围不包括所计算出的相似度为高相似度的范围以及所计算出的相似度为低相似度的范围，并且其中，所述显示控制单元确定所计算出的相似度落入所述预定范围内的面部图像的面部表情与所述面部字典中登记的面部图像的面部表情是否不同，并且，所述显示控制单元将面部表情与所述面部字典中登记的面部图像不同的面部图像显示为要添加至所述面部字典的候选。4.一种面部识别装置，该面部识别装置包括：特征量提取单元，用于通过分析图片图像中的人物的面部图像来提取面部特征量；面部字典生成单元，用于以将所述特征量提取单元提取的特征量与人名相关联的方式来生成面部字典；添加单元，用于以与在所述面部字典中登记的人名相关联的方式来新添加面部特征量；以及显示控制单元，用于将通过分析另一图片图像中的人物的面部图像而提取的面部特征量与所述面部字典中登记的面部特征量进行比较来计算相似度，并将所述相似度落入预定范围内的面部图像作为要添加至所述面部字...

【专利技术属性】
技术研发人员：中元经史朗，
申请(专利权)人：佳能株式会社，
类型：发明
国别省市：