图像处理设备和图像处理方法技术

本发明专利技术涉及一种图像处理设备和图像处理方法。图像处理设备的面部检测电路从视频信号中检测面部区域。个人识别电路基于从面部区域中所提取的特征信息和所登记的特征信息之间的相似度与预定阈值的比较来进行个人识别处理。照相机微计算机追踪利用个人识别电路已识别的面部并且存储与所追踪的面部有关的信息。此外，在没有追踪到已识别面部并且没有存储与第一被摄体有关的识别信息的情况下，照相机微计算机将第一阈值设置为用于第一被摄体的预定阈值。另一方面，在存储了与第一被摄体区域有关的识别信息的情况下，照相机微计算机将比第一阈值低的第二阈值设置为用于第一被摄体的预定阈值。

【技术实现步骤摘要】
图像处理设备和图像处理方法
本专利技术涉及用于进行图像识别处理的图像处理设备、图像处理方法和存储介质。
技术介绍
近年来，诸如摄像机等的摄像设备采用个人识别技术，其中在这些个人识别技术中，从通过利用图像传感器对被摄体图像进行光电转换所获取的视频信号中周期性地检测被摄体区域(例如，面部区域)，并且将所检测到的被摄体区域与预先准备的面部特征信息进行比较，以判断所检测到的被摄体区域是否是特定人物的面部。这些个人识别技术使得能够对特定人物的面部执行自动调焦(AF)控制和自动曝光(AE)控制，以使得可以拍摄更能反映用户意图的图像。然而，对于个人识别而言，所检测到的面部并非始终处于最佳的面部状态。例如，面部表情、取向等的变化可能会影响面部特征信息而使面部特征信息改变为与预先存储的面部特征信息不同的面部特征信息，这样使得难以获取可靠性高的个人识别结果。此外，日本特开2013-101551论述了如下方法，其中该方法包括：登记人物的多个面部图像，计算在预定数量的监视图像内检测到的面部区域中的被识别为识别候选人物的面部区域的百分比作为登记人物检测率，并且基于该检测率来改变用于判断人物是否是登记人物的阈值。更具体地，在检测率高的情况下，将阈值设置为低的值，而在检测率低的情况下，将阈值设置为高的值。利用该方法，即使由于面部表情或取向的变化、因而人物和所登记的面部图像之间的相似度低，也在降低了将除登记人物以外的人物误识别为登记人物的可能性的同时，将该人物成功地判断为登记人物。然而，在日本特开2013-101551所论述的方法中，为了在相似度低的情形中将人物判断为登记人物，需要在大量的监视图像中将人物判断为识别候选人物，因而可能需要长时间来将人物判断为识别候选人物。因而，例如，在正识别的登记人物丢失、然后被再次检测到的场景中，在将再次检测到的人物判断为登记人物之前，对另一面部或被摄体执行AF控制和AE控制。
技术实现思路
根据本专利技术的一个方面，一种图像处理设备，包括：检测单元，用于从视频信号中检测预定被摄体区域；识别单元，用于基于从所述检测单元检测到的被摄体区域中所提取的特征信息和所登记的特征信息之间的相似度与预定阈值的比较，来对所述被摄体区域进行识别处理；追踪单元，用于追踪所述识别单元所识别出的已识别被摄体区域；以及设置单元，用于设置所述预定阈值，其中，所述设置单元存储与所述追踪单元所追踪的所述已识别被摄体区域有关的信息，在所述追踪单元没有追踪到所述已识别被摄体区域、并且所述设置单元没有存储与第一被摄体有关的识别信息的情况下，所述设置单元将第一阈值设置为用于所述第一被摄体的所述预定阈值，以及在所述追踪单元没有追踪到所述已识别被摄体区域、并且所述设置单元存储了与所述第一被摄体有关的识别信息的情况下，所述设置单元将比所述第一阈值低的第二阈值设置为用于所述第一被摄体的所述预定阈值。根据本专利技术的另一方面，一种图像处理方法，包括以下步骤：从视频信号中检测预定的被摄体区域；设置步骤，用于设置预定阈值；基于从所述被摄体区域中所提取的特征信息和所登记的特征信息之间的相似度与所述预定阈值的比较，来对所述被摄体区域进行识别处理；追踪步骤，用于追踪已识别被摄体区域；以及存储与所述追踪步骤中所追踪的所述已识别被摄体区域有关的信息，其中，在没有追踪到所述已识别被摄体区域、并且没有存储与第一被摄体有关的识别信息的情况下，所述设置步骤将第一阈值设置为用于所述第一被摄体的所述预定阈值，以及在没有追踪到所述已识别被摄体区域、并且存储了与所述第一被摄体有关的识别信息的情况下，所述设置步骤将比所述第一阈值低的第二阈值设置为用于所述第一被摄体的所述预定阈值。通过以下参考附图对典型实施例的说明，本专利技术的其它特征将变得明显。附图说明图1是示意性示出根据本专利技术的一个或多个方面的摄像机的结构的示例的框图。图2A和2B是示出根据本专利技术的一个或多个方面的个人识别操作处理的流程图。图3A、3B、3C和3D是分别示出根据本专利技术的一个或多个方面的第二识别阈值计算处理的第一模式、第二模式、第三模式和第四模式的流程图。图4示出根据本专利技术的一个或多个方面的面部数据表的示例。图5示出根据本专利技术的一个或多个方面的第二识别阈值表的示例。图6A、6B、6C和6D分别示出根据本专利技术的一个或多个方面的用于设置第二识别阈值的操作的第一模式、第二模式、第三模式和第四模式的概念。图7A示出在检测到平摇操作的情况下的根据画面位置的第二识别阈值设置的示例。图7B示出在沿广角方向驱动变焦的情况下的根据画面位置的第二识别阈值设置的示例。图7C示出根据所识别的面部丢失的位置的第二识别阈值设置的示例。图7D示出在检测到沿远摄方向的变焦驱动的情况下的根据画面位置的第二识别阈值设置的示例。图8A、8B、8C和8D分别示出根据时间变化的第二识别阈值设置的示例的第一模式、第二模式、第三模式和第四模式。具体实施方式以下将参考附图来详细说明本专利技术的各种典型实施例。根据本专利技术典型实施例的图像处理设备可应用于各种摄像设备，诸如数字照相机、数字摄像机、诸如智能电话和平板终端等的包括照相机功能的各种移动终端、工业用照相机、车载照相机以及医疗用照相机。在本典型实施例中，将说明包括个人识别功能的摄像机作为示例。摄像机从拍摄图像中检测人物的面部区域作为预定被摄体区域，并且使用所检测到的面部区域来进行个人识别。尽管在本典型实施例中说明摄像机作为示例，但也可以采用诸如数字静态照相机等的任何其它的摄像设备。图1示意性示出作为根据本典型实施例的图像处理设备的应用示例的摄像机10的结构。图1的摄像机10包括第一固定透镜101、变焦透镜102、光圈103、第二固定透镜104和调焦透镜105作为摄像光学系统。变焦透镜102是沿光轴方向移动以进行放大或缩小的变焦透镜。通过使变焦透镜102沿光轴方向移动(即，通过使变焦透镜102沿所谓的远摄方向、广角方向等移动)，变焦率是可改变的。调焦透镜105是用于调节摄像光学系统的焦点的透镜(还被称为“聚焦补偿透镜”或“调焦构件”)，并且不仅包括所谓的调焦功能，而且还包括校正由变焦引起的焦平面移动的功能。变焦驱动装置115包括用于使变焦透镜102沿光轴方向移动的致动器和用于驱动该致动器的电路。调焦驱动装置116包括用于使调焦透镜105沿光轴方向移动的致动器和用于驱动该致动器的电路。变焦驱动装置115和调焦驱动装置116包括诸如步进马达、直流(DC)马达、振动马达或音圈马达等的致动器。图像传感器106是包括电荷耦合器件(CCD)传感器或互补金属氧化物半导体(CMOS)传感器的光电转换元件。转换器107是对图像传感器106的输出进行采样、增益调整和数字化的相关双采样(CDS)/自动增益控制(AGC)/模数(AD)转换器。照相机信号处理电路108对来自转换器107的输出信号进行各种图像处理以生成视频信号。显示装置109基于来自照相机信号处理电路108的视频信号来显示视频图像。记录装置110将来自照相机信号处理电路108的视频信号记录在诸如磁带、光盘或半导体存储器等的记录介质上。自动调焦(AF)门111仅使来自转换器107的所有像素的输出信号中的、焦点检测中所使用的区域(更具体地，以下所述的照相机微计算机114所设置的区域(A本文档来自技高网...

【技术保护点】
1.一种图像处理设备，包括：检测单元，用于从视频信号中检测预定被摄体区域；识别单元，用于基于从所述检测单元检测到的被摄体区域中所提取的特征信息和所登记的特征信息之间的相似度与预定阈值的比较，来对所述被摄体区域进行识别处理；追踪单元，用于追踪所述识别单元所识别出的已识别被摄体区域；以及设置单元，用于设置所述预定阈值，其中，所述设置单元存储与所述追踪单元所追踪的所述已识别被摄体区域有关的信息，在所述追踪单元没有追踪到所述已识别被摄体区域、并且所述设置单元没有存储与第一被摄体有关的识别信息的情况下，所述设置单元将第一阈值设置为用于所述第一被摄体的所述预定阈值，以及在所述追踪单元没有追踪到所述已识别被摄体区域、并且所述设置单元存储了与所述第一被摄体有关的识别信息的情况下，所述设置单元将比所述第一阈值低的第二阈值设置为用于所述第一被摄体的所述预定阈值。

【技术特征摘要】
2017.01.19 JP 2017-0075291.一种图像处理设备，包括：检测单元，用于从视频信号中检测预定被摄体区域；识别单元，用于基于从所述检测单元检测到的被摄体区域中所提取的特征信息和所登记的特征信息之间的相似度与预定阈值的比较，来对所述被摄体区域进行识别处理；追踪单元，用于追踪所述识别单元所识别出的已识别被摄体区域；以及设置单元，用于设置所述预定阈值，其中，所述设置单元存储与所述追踪单元所追踪的所述已识别被摄体区域有关的信息，在所述追踪单元没有追踪到所述已识别被摄体区域、并且所述设置单元没有存储与第一被摄体有关的识别信息的情况下，所述设置单元将第一阈值设置为用于所述第一被摄体的所述预定阈值，以及在所述追踪单元没有追踪到所述已识别被摄体区域、并且所述设置单元存储了与所述第一被摄体有关的识别信息的情况下，所述设置单元将比所述第一阈值低的第二阈值设置为用于所述第一被摄体的所述预定阈值。2.根据权利要求1所述的图像处理设备，其中，在从所述被摄体区域中所提取的特征信息和所登记的特征信息之间的相似度大于所述预定阈值的情况下，所述识别单元判断为识别出所述预定被摄体区域。3.根据权利要求1所述的图像处理设备，其中，在从所述追踪单元变得无法追踪所述已识别被摄体区域时起无法再次识别出所述已识别被摄体区域的时间段持续了预定时间段以上的情况下，所述设置单元删除与所述已识别被摄体区域有关的识别信息。4.根据权利要求1所述的图像处理设备，其中，所述设置单元根据从所述追踪单元变得无法追踪所述已识别被摄体区域时起所经过的时间，来将比所述第二阈值大的值设置为所述预定阈值。5.根据权利要求4所述的图像处理设备，其中，在从所述追踪单元变得无法追踪所述已识别被摄体区域时起经过了预定时间的情况下，所述设置单元将所述预定阈值从所述第二阈值改变为所述第一阈值。6.根据权利要求4所述的图像处理设备，其中，所述设置单元从所述追踪单元变得无法追踪所述已识别被摄体区域时起直到经过了预定时间为止，使所述预定阈值从所述第二阈值起逐级地增加。7.根据权利要求4所述的图像处理设备，其中，所述设置单元从所述追踪单元变得无法追踪所述已识别被摄体区域时起直到经过了预定时间为止，使所述预定阈值从所述第二阈值起线性地增加。8.根据权利要求4所述的图像处理设备，其中，所述设置单元从所述追踪单元变得无法追踪所述已识别被摄体区域时起直到经过了预定时间为止，使所述预定阈值从所述第二阈值起非线性地增加。9.根据权利要求1所述的图像处理设备，其中，在所述追踪单元追踪到所述已识别被摄体区域的情况下，所述识别单元按预定定时计算所述相似度，以及所述设置单元将按所述预定定时计算出的相似度中的在最后定时计算出的相似度的值设置为所述第二阈值。10.根据权利要求9所述的图像处理设备，其中，所述检测单元判断与所检测到的被摄体区域有关的大小信息和角度信息至少之一是否改变，以及所述预定定时是所述检测单元判断为与所检测到的被摄体区域有关的大小信息和角度信息至少之一发生改变的定时。11.根据权利要求1所述的图像处理设备，其中，在所述追踪单元追踪到所述已识别被摄体区域的情况下，所述识别单元按预定定时计算所述相似度，以及所述设置单元将按所述预定定时计算出的相似度中的最低相似度的值设置为所述第二阈值。12.根据权利要求1所述的图像处...

【专利技术属性】
技术研发人员：横关诚，石井和宪，
申请(专利权)人：佳能株式会社，
类型：发明
国别省市：日本,JP