识别装置和方法及识别系统制造方法及图纸

本发明专利技术公开了一种识别装置和方法及识别系统。所述识别装置包括：检测单元，用于从输入图像中检测与属性待识别的人物相邻的物体；确定单元，用于基于与检测到的物体相关的上下文信息，从所述检测到的物体中确定至少一个物体，其中，与所述检测到的物体相关的所述上下文信息是从预确定上下文信息中获取的；以及属性识别单元，用于基于与确定的至少一个物体相关的上下文信息，识别所述人物的待识别属性。根据本发明专利技术，属性识别(尤其是人物属性识别)的准确性将得到提高。

Identification device, method and system

【技术实现步骤摘要】
识别装置和方法及识别系统
本专利技术涉及图像处理，尤其涉及例如识别装置、识别方法及识别系统。
技术介绍
由于人物属性一般涉及可以描绘一个人的容貌(facialappearances)和/或身形(bodyappearances)，因此人物属性识别通常被用来进行视频/图像分析和识别(例如，面部分析、面部属性识别、表情识别、人物图像检索等)以及人物行为分析(例如，人物属性统计(peopleattributecounting)、人物跟踪、人群分析(crowedanalysis)等)。其中，容貌例如包括人物的年龄、人物的性别、人物的种族、人物的胡须、人物佩戴的眼镜等。身形例如包括人物的身高、人物的体重、人物所穿的衣服、人物所穿的鞋子等。在监控场景中，所捕获图像中的人物例如通常会出现脸部有大的偏转角/俯仰角、脸部被遮挡和/或身体具有各种姿态的情况，这将影响人物属性识别的准确性。因此，关于此类场景，美国专利US9002116B2中公开了一种示例性人物属性识别技术，该技术主要包括：首先使用特征匹配方法从预存储样本图像中确定与输入图像中的待识别人物具有相似容貌的相似图像(例如，排名前N的图像)，然后基于确定的相似图像中的人物的面部属性(例如，年龄)估计待识别人物的面部属性(例如，年龄)。也就是说，上述人物属性识别技术通过对输入图像与预存储样本图像中的人物进行面部特征匹配来寻找相似图像。但是，在一些场景中(例如，输入图像中的待识别人物的面部大小太小或不清楚)，由于面部特征无法很好地描述待识别人物，因此包含与待识别人物的面部特征相匹配的面部特征的特征空间是稀疏的，即，用于寻找相似图像的空间是稀疏的。因此，确定真正的相似图像是困难的。此外，由于排名前N的图像将被确定为相似图像，因此一些非相似图像将被引入用来识别待识别人物的属性，这将影响相似图像的准确性，并使所确定的相似图像中的人物属性的分布变得分散。因此，使用此类相似图像的人物属性识别的准确性将受到影响。
技术实现思路
因此，鉴于上面的
技术介绍
中的记载，本专利技术旨在解决上述问题中的至少一点。根据本专利技术的一个方面，提供一种识别装置，所述识别装置包括：检测单元，用于从输入图像中检测与属性待识别的人物相邻的物体；确定单元，用于基于与由所述检测单元检测到的物体相关的上下文信息，从由所述检测单元检测到的所述物体中确定至少一个物体，其中，与由所述检测单元检测到的所述物体相关的所述上下文信息是从预确定上下文信息中获取的；以及属性识别单元，用于基于与由所述确定单元确定的至少一个物体相关的上下文信息，识别所述人物的待识别属性。其中，人物的待识别属性为人物的面部属性或人物的身体属性。人物的面部属性例如为年龄属性、性别属性、种族属性、胡须属性等。人物的身体属性例如为身高属性、体重属性、鞋子类型属性、衣服类型属性等。其中，检测单元检测到的物体为人物穿戴/拿握/使用的物体，诸如人物穿戴的衣服/帽子、人物拿握或使用的包/遮阳伞/移动电话等。其中，人物使用的物体还包括放置在人物附近的物体，诸如放置在人物脚边的包等。其中，预确定上下文信息至少包括标记物体、标记人物属性的分布及相关度。其中，任何一个相关度表示使用一个标记物体识别一个标记人物属性的可靠性。利用本专利技术，属性识别(尤其是人物属性识别)的准确性将得到提高。根据以下参照附图的描述，本专利技术的其他特性特征和优点将显而易见。附图说明包含在说明书中并构成本说明书的一部分的附图例示本专利技术的实施例，并与文字描述一起用于解释本专利技术的原理。图1是示意性地示出可实现根据本专利技术实施例的技术的硬件结构的框图。图2是例示根据本专利技术第一实施例的识别装置的结构的框图。图3示意性地示出根据本专利技术第一实施例的识别处理的流程图。图4示意性地示出年龄属性待识别的示例性目标人物。图5是例示根据本专利技术第二实施例的识别装置的结构的框图。图6示意性地示出根据本专利技术第二实施例的识别处理的流程图。图7示意性地示出根据本专利技术第二实施例的如图6所示的步骤S610的流程图。图8示意性地示出示例性视频的视频图像。图9示意性地示出根据本专利技术第二实施例的如图6所示的步骤S610的另一流程图。图10例示根据本专利技术的识别系统的布置。具体实施方式应注意，下面的描述实质上仅为说明性和示例性的，并且决不意图限制本专利技术及其应用或用途。除非另有具体说明，否则实施例中阐述的组件和步骤的相对布置、数值表达式和数值并不限制本专利技术的范围。另外，本领域技术人员已知的技术、方法和设备可能不会被详细地讨论，但在适当的情形中其应当是本说明书的一部分。请注意，相似的附图标记和字母指代附图中相似的项目，因此，一旦一个项目在一个附图中被定义，则不必在下面的附图中对其进行讨论。从上述先前技术中的人物属性识别技术可以看出，与待识别人物具有相似容貌的预存储样本图像(即，相似图像)被用作识别人物属性的参照，并且所述参照的准确性直接影响人物属性识别的准确性。其中，所述参照的准确性取决于用于获得所述参照的空间的稀疏度。由于人们在日常生活中经常会穿戴/拿握/使用特定类型的物体，专利技术人发现以下两个方面：一方面，对于一种特定类型的物体，穿戴/拿握/使用该类型物体的人物通常具有一种特定类型的人物属性。例如，背着学生书包的人物通常为学生，使用手提包的人物通常为女性，夏天时使用遮阳伞的人物通常为女性，学校中穿着红色校服的学生通常为女生，而穿着蓝色校服的学生通常为男生，诸如此类。换言之，穿戴/拿握/使用某些相似物体的人物通常具有某些相似人物属性。因此，专利技术人认为可以使用人物穿戴/拿握/使用的物体来确定对应的用于识别对应人物属性的参照。另一方面，尽管可以使用人物穿戴/拿握/使用的物体来确定用于识别人物属性的参照，对于一种特定类型的人物属性，并不是人物穿戴/拿握/使用的所有物体都可以用于确定用于识别该特定类型的人物属性的可靠参照。换言之，相对于一种特定类型的人物属性，并不是人物穿戴/拿握/使用的所有物体都具有显著性。例如，相对于性别属性，T恤衫并不是显著物体，因为男性和女性都喜欢穿T恤衫，而裙子则是显著物体，因为只有女性喜欢穿裙子。例如，相对于性别属性，包的类型并不是显著物体，因为不管是男性还是女性都会例如穿戴/拿握运动包或商务包。但是，因为背运动包的人物通常穿运动鞋，并且拿商务包的女性通常穿高跟鞋，因此，包的类型相对于鞋子类型属性是显著物体。因此，专利技术人认为可以使用人物穿戴/拿握/使用的物体中的显著物体来确定更加可靠的用于识别对应人物属性的参照。因此，对于属性待识别的人物，该人物穿戴/拿握/使用的物体(即，与该人物相邻的物体)可以用于确定对应的用于识别待识别属性的参照。因此，不管输入图像中的该人物的面部特征是否能很好的描述该人物(例如，该人物的面部大小太小或不清楚)，都可以基于与该人物相邻的物体确定更多的参照。这将使用于获得参照的空间变得更加密集。此外，可以基于与该人物相邻的物体中的显著物体确定更多准确的参照，这将使所确定的参照中的人物属性的分布变得更加集中。因此，使用这些参照可以提高人物属性识别的准确性。下面将参照附图详细描述本专利技术的示例性实施例。(预确定上下文信息)如上所述，可以看出，在一种特定类型的物体与一种特定类型的人物属性之间存在相关性。因此，不必像先前技术本文档来自技高网...

【技术保护点】
1.一种识别装置，所述识别装置包括：检测单元，用于从输入图像中检测与属性待识别的人物相邻的物体；确定单元，用于基于与由所述检测单元检测到的物体相关的上下文信息，从由所述检测单元检测到的所述物体中确定至少一个物体，其中，与由所述检测单元检测到的所述物体相关的所述上下文信息是从预确定上下文信息中获取的；以及属性识别单元，用于基于与由所述确定单元确定的至少一个物体相关的上下文信息，识别所述人物的待识别属性。

【技术特征摘要】
1.一种识别装置，所述识别装置包括：检测单元，用于从输入图像中检测与属性待识别的人物相邻的物体；确定单元，用于基于与由所述检测单元检测到的物体相关的上下文信息，从由所述检测单元检测到的所述物体中确定至少一个物体，其中，与由所述检测单元检测到的所述物体相关的所述上下文信息是从预确定上下文信息中获取的；以及属性识别单元，用于基于与由所述确定单元确定的至少一个物体相关的上下文信息，识别所述人物的待识别属性。2.根据权利要求1所述的识别装置，所述识别装置还包括：选择单元，用于基于以下信息中至少一者，从由所述检测单元检测到的所述物体中选择物体：所述人物与由所述检测单元检测到的所述物体之间的从属关系，所述输入图像的捕获地点，和/或所述输入图像的捕获时间；其中，所述确定单元基于由所述选择单元选择的物体执行对应操作。3.根据权利要求2所述的识别装置，其中，对于由所述检测单元检测到的任何一个所述物体，所述人物与该物体之间的所述从属关系由以下方式中的一种来确定：通过使用从属关系检测方法；通过同时跟踪视频中与所述输入图像相邻的视频图像中的所述人物与该物体；通过检测所述人物拿握该物体的方式；或通过检测所述人物使用该物体的方式。4.根据权利要求3所述的识别装置，其中，对于由所述检测单元检测到的任何一个所述物体，所述人物与该物体之间的所述从属关系至少包括所述人物与该物体之间的所有权关系。5.根据权利要求1或2所述的识别装置，其中，所述预确定上下文信息至少包括标记物体、标记人物属性的分布及相关度；其中，任何一个所述相关度表示使用一个所述标记物体识别一个所述标记人物属性的可靠性。6.根据权利要求5所述的识别装置，其中，所述预确定上下文信息还包括标记的感兴趣地点和/或标记的感兴趣时间。7.根据权利要求5所述的识别装置，其中，所述确定单元从由所述检测单元检测到的所述物体中或从由所述选择单元选择的所述物体中确定一个物体；其中，与该确定的物体相关的相关度是最高的。8.根据权利要求5所述的识别装置，其中，所述确定单元基于预定义阈值和由所述确定单元获取的上下文信息的相关度，从由所述检测单元检测到的所述物体中或从由所述选择单元选择的所述物体中确定所述物体。9.根据权利要求5所述的识别装置，其中，所述属性识别单元基于与由所述确定单元确定的至少一个物体相关的上下文信息的所述标记人物属性的分布，识别所述人物的待识别属性。10.一种识别方法，所述识别方法...

【专利技术属性】
技术研发人员：郭莉莉，黄耀海，
申请(专利权)人：佳能株式会社，
类型：发明
国别省市：日本,JP