识别装置制造方法及图纸

本发明专利技术提供识别装置和方法、记录介质、以及程序。本发明专利技术使得能够容易且准确地识别表示用户意图的用户动作。基于由摄像机（１３）拍摄的图像数据，面部方向感测部（１４）感测用户面部的方向，视线感测部（１５）感测用户视线的方向。当用户面部朝向下方、同时用户视线相对于面部方向朝向上方时，点头识别部（２１）识别出用户已经点头。当用户面部朝向右方或者左方、同时用户视线朝向在水平方向上与面部方向相反的方向时，摇头识别部（２２）识别出用户已经摇头。本发明专利技术可以应用于检查驾驶员意图的意图检查装置。

【技术实现步骤摘要】

本专利技术涉及一种识别装置和方法、记录介质、以及程序，具体地，涉及使得能够容易且准确地对表示用户意图的动作进行识别的识别装置和方法、记录介质、以及程序。
技术介绍
已经提出了，如果一装置在等待用户的指令，则当检测到用户在凝视显示在显示部上的多个候选项中的任一项的同时点头时，该装置确定选择了用户所凝视的项目，并且由此执行预定处理(例如参见日本特开2000-163196号公报)。然而，日本特开2000-163196号公报中描述的专利技术在用户例如因为其在驾驶汽车而无法凝视显示部上的单个点的情况下不能检测到用户的意图。鉴于这种情况提出了本专利技术。本专利技术的目的是使得能够容易且准确地识别表示用户意图的用户动作。
技术实现思路
根据本专利技术的一方面的识别装置包括面部方向感测装置，用于感测用户面部的方向；视线方向感测装置，用于感测用户的视线的方向；以及动作识别装置，用于基于面部方向与视线方向之间的差异来识别表示用户意图的用户动作。根据本专利技术的该方面的识别装置感测用户面部的方向，感测用户视线的方向，并且基于面部方向与视线方向之间的差异来识别表示用户意图的用户动作。由此可以容易且准确地识别表示用户意图的用户动作。从而可以容易且可靠地识别用户的意图。面部方向感测装置、视线方向感测装置、以及动作识别装置例如由CPU构成。面部方向感测装置例如可以由感测面部方向的专用装置构成。视线方向感测装置例如可以由感测视线方向的专用装置构成。如果用户处于其面部朝向下方、而其视线相对于面部方向朝向上方的状态，则动作识别装置可以识别出用户已经点头来表示其意图。这使得能够容易且准确地识别用户的点头。如果在催促用户表示其意图之后的预定时间内用户进行了其从与作为上述状态的第一状态不同的第二状态改变到第一状态的第一改变、或者其从第一状态改变到第二状态的第二改变，则动作识别装置可以识别出用户已经点头以表示其意图。这使得能够更准确地识别用户的点头。如果在所述预定时间内用户进行了至少预定的第一次数的第一改变、并且进行了至少预定第二次数的第二改变，则动作识别装置可以识别出用户已经点头以表示其意图。这使得能够更准确地识别用户的点头。如果用户处于如下的第一状态中，则动作识别装置可以识别出用户已经点头以表示其意图，在所述第一状态中，在所述预定时间内面部从预定方向向下倾斜至少预定的第一角度；在所述第一状态中，在所述预定时间内视线相对于面部方向向上倾斜至少预定的第二角度；在所述第一状态中，在所述预定时间内面部从所述预定方向向下倾斜的角度和视线相对于面部方向向上倾斜的角度之和至少为预定的阈值；并且在所述第一状态中，在所述预定时间内面部从所述预定方向向左或者向右的方向小于预定的第三角度。这使得能够更准确地识别用户的点头。如果用户处于其面部朝向右方、同时其视线相对于面部方向朝向左方的第一状态中、或者处于其面部朝向左方、同时其视线相对于面部方向朝向右方的第二状态中，则动作识别装置可以识别出用户已经摇头以表示其意图。这使得能够更容易且准确地识别用户的摇头。如果在催促用户表示其意图之后的预定时间内用户进行了其从与第一状态和第二状态不同的第三状态改变到第一状态的第一改变、其从第三状态改变到第二状态的第二改变、其从第一状态改变到第三状态的第三改变、或者其从第二状态改变到第三状态的第四改变，则动作识别装置可以识别出用户已经摇头以表示其意图。这使得能够更准确地识别用户的摇头。如果在所述预定时间内用户进行了至少预定第一次数的第一改变、并且进行了至少预定第二次数的第二改变，则动作识别装置可以识别出用户已经摇头来表示其意图。这使得能够更准确地识别用户的摇头。如果用户处于如下的第三状态中、或者如果用户处于如下的第四状态中，则动作识别装置可以识别出用户已经摇头来表示其意图，在所述第三状态中，在所述预定时间内面部从预定方向向右倾斜至少预定的第一角度；并且在所述第三状态中，在所述预定时间内视线相对于面部方向向左倾斜至少预定的第二角度；并且在所述第三状态中，在所述预定时间内面部从所述预定方向向右倾斜的角度和视线相对于面部方向向左倾斜的角度之和至少为预定阈值；并且在所述第三状态中，在所述预定时间内面部从所述预定方向向上或者向下的方向小于预定的第三角度；在所述第四状态中，在所述预定时间内面部从所述预定方向向左倾斜至少所述第一角度；并且在所述第四状态中，在所述预定时间内视线相对于面部方向向右倾斜至少所述第二角度；并且在所述第四状态中，在所述预定时间内面部从所述预定方向向左倾斜的角度和视线相对于面部方向向右倾斜的角度之和至少为所述阈值；并且在所述第四状态中，在所述预定时间内面部从所述预定方向向上或者向下的方向小于所述预定第三角度。这使得能够更准确地识别用户的摇头。识别装置可以进一步包括意图识别装置，所述意图识别装置用于基于由动作识别装置识别出的表示用户意图的用户动作来识别用户意图。这使得能够容易且准确地识别用户意图。意图识别装置例如由CPU构成。根据本专利技术的一个方面的识别方法或者程序包括以下步骤面部方向感测步骤，感测用户面部的方向；视线方向感测步骤，感测用户视线的方向；以及动作识别步骤，基于面部方向与视线方向之间的差异来识别表示用户意图的用户动作。按照根据本专利技术的该方面的识别方法或者程序，感测用户面部的方向，感测用户视线的方向，并且基于面部方向与视线方向之间的差异来识别表示用户意图的用户动作。由此可以容易且准确地识别表示用户意图的用户动作。从而可以容易且可靠地识别用户意图。面部方向感测步骤包括以下步骤基于关于用户面部图像的数据，通过CPU来感测用户面部的方向。视线方向感测步骤包括以下步骤基于关于用户面部图像的数据，通过CPU来感测用户视线的方向。动作识别步骤例如包括通过CPU来识别表示用户意图的用户动作。如上所述，本专利技术的该方面使得能够容易且准确地识别表示用户意图的用户动作。这使得能够容易且可靠地识别用户意图。附图说明图1是示出应用了本专利技术的意图检查装置的实施例的框图；图2是例示出图1中的意图检查装置的意图检查处理的流程图；图3是详细例示出图2中的步骤S4中的点头识别处理的流程图；图4是示意性地示出看正前方的人的面部方向和视线方向的图；图5是示意性地示出图4所示的人的眼睛的状态的图；图6是示意性地示出点头的人的面部方向和视线方向的图；图7是示意性地示出图6所示的人的眼睛的状态的图；图8是示出点头的可能性至少是阈值的状态的曲线图；图9是例示出识别驾驶员的点头的示例的曲线图；图10是详细例示出图2中的步骤S5中的摇头识别处理的流程图； 图11是示意性示出看正前方的人的面部方向和视线方向的图；图12是示意性地示出图11所示的人的眼睛的状态的图；图13是示意性地示出摇头的人的面部方向和视线方向的图；图14是示意性地示出图13所示的人的眼睛的状态的图；图15是示出其中摇头的可能性至少是上限阈值或者至多是下限阈值的状态的曲线图；图16是例示出识别驾驶员的摇头的示例的曲线图；图17是例示出对驾驶员的点头进行识别的另一方法的图；图18是例示出对驾驶员的摇头进行识别的另一方法的图；图19是例示出对驾驶员的点头进行识别的又一方法的图；图20是例示出对驾驶员的摇头进行识别的又一方法的图；图21是例示出对驾驶员的点头进行识别的再一本文档来自技高网...

【技术保护点】
一种识别装置，该识别装置包括：面部方向感测装置，用于感测用户面部的方向；视线方向感测装置，用于感测用户视线的方向；以及动作识别装置，用于基于面部方向与视线方向之间的差异来识别表示用户意图的用户动作。

【技术特征摘要】
...

【专利技术属性】
技术研发人员：太田俊二，
申请(专利权)人：欧姆龙株式会社，
类型：发明
国别省市：JP[日本]