控制装置、车辆以及便携终端制造方法及图纸

提供一种控制装置、车辆以及便携终端，能够通过不妨碍驾驶的、无须目视并且简单的操作来控制设备的功能。一种控制装置，连接于路径引导装置，该控制装置包括：手信息检测部，从拍摄图像中检测关于用户的手的信息；以及设备操作命令部，对路径引导装置或连接于路径引导装置的多个设备输出控制命令，其中，设备操作命令部基于由手信息检测部检测出的用户的手的朝向，输出对路径引导装置或设备的控制命令。

Control device, vehicle, and portable terminal

A control device, a vehicle, and a portable terminal capable of controlling the function of a device without obstruction of driving without visual and simple operation. A control device is connected to the path guiding device, the control device comprises a hand information detection section from shooting detection on the hand of the user information in the image; and the operation command, guide device on the path or connection of multiple output devices for route guidance device control command, the command equipment operation Department the information detected by the hand detection part of the user's hand based on the control command device or equipment to guide the path of output.

【技术实现步骤摘要】
控制装置、车辆以及便携终端
本专利技术涉及对路径进行引导的控制装置，尤其涉及对用户的手进行识别，通过用户的手的动作控制设备的控制装置。
技术介绍
车辆里配置有行驶所需的设备和构建舒适空间的设备，以及为了控制这些设备而由用户操作的开关。行驶所需的设备例如有方向盘、反射镜、灯、以及方向指示器等。构建舒适空间的设备例如有空调、音响装置、以及导航仪等。随着车辆里配置的这些设备的数量的增加，以及使这些设备工作的功能的数量的增加，开关的数量也呈现增加的倾向。由于这种开关数量的增加以及开关的多功能化，用于控制设备的操作变得复杂，给驾驶员造成负担。因此，需要提供减少开关以减轻驾驶员负担的接口。例如，已知一种接口，作为非接触接口检测用户的姿势(身体和手的动作)，并基于检测出的姿势控制设备。利用这种接口，用户无须操作开关，能够通过可直观操作的姿势来控制设备，因此能够减轻驾驶员的负担。但是，在如车辆这样所配置的设备数量较多的情况下，即使能够减少开关的数量，操作设备所需的姿势的动作数也会增加，给驾驶员造成负担。作为本
的
技术介绍
，有日本特开2004-171476号公报(专利文献1)。该公报中记载了如下内容：“手模式开关装置根据从照相机3的输入图像识别的手指形状，识别驾驶员(开关操作者)对开关装置的操作意图，并且利用开关控制对象设定单元14识别随后的手指形状或动作，从分组的多个控制对象中选择一个控制对象，输出指定的开关操作信息。各控制对象的多个开关中，将操作·调整方式类似的开关集合在一起并相互关联，容易记忆，从而提高操作性”。专利文献1：日本特开2004-171476号公报专利文献1中，驾驶员为了选择要操作的设备并执行设备功能，需要多次动作，操作性有可能变差。另外，驾驶员在控制车辆上配置的设备时，需要执行不妨碍驾驶的操作，需要执行无须目视并且简单的操作。
技术实现思路
本专利技术的目的在于提供一种控制装置，能够通过不妨碍驾驶的、无须目视并且简单的操作来控制设备的功能。为了解决上述问题，本专利技术提供一种控制装置，连接于路径引导装置，该控制装置包括：手信息检测部，从拍摄图像中检测关于用户的手的信息；以及设备操作命令部，对所述路径引导装置或连接于所述路径引导装置的多个设备输出控制命令，其中，所述设备操作命令部基于由所述手信息检测部检测出的所述用户的手的朝向，输出对所述路径引导装置或所述设备的控制命令。(专利技术效果)根据本专利技术，能够提供一种控制装置，能够通过不妨碍驾驶的、无须目视并且简单的操作来控制设备的功能。上述内容以外的结构和效果通过下面的实施方式的说明变得明了。附图说明图1是本专利技术实施例1的搭载了车载设备接口的车辆的框图。图2是本专利技术实施例1的手形状识别部的手形状识别处理的流程图。图3是本专利技术实施例1的手形状识别部所识别的手形状的例子的说明图。图4是本专利技术实施例1的手朝向识别部的手朝向识别处理的流程图。图5是本专利技术实施例1的手朝向识别部所识别的手的朝向的例子的说明图。图6是本专利技术实施例1的手形状与车载设备群的设备的关系的说明图。图7是本专利技术实施例1的手形状及手的朝向与控制对象设备的功能的关系的说明图。图8是本专利技术实施例1的效果的一例的说明图。图9是本专利技术实施例2的姿势区域的说明图。图10是本专利技术实施例3的照明装置的照射范围的说明图。图11是本专利技术实施例4的照相机的配置位置的说明图。图12是本专利技术实施例5的搭载了车载设备接口的车辆的框图。图13是本专利技术实施例5的利用语音的触发操作的说明图。图14是本专利技术实施例5的利用手的姿势的触发操作的说明图。图15是本专利技术实施例5的变形例的利用手的触发操作的说明图。图16是本专利技术实施例6的输出对语音提问的回答的导航装置的说明图。图17是本专利技术实施例7的搭载了姿势识别的便携终端的框图。图18是本专利技术实施例8的识别结果确定部判定用户的姿势是否是姿势操作的处理的说明图。图19是本专利技术实施例8的手的朝向和手的移动方向与音响装置功能的关系的说明图。图20A是本专利技术实施例8的用户的手的转动动作的说明图。图20B是本专利技术实施例8的转动角度与阈值的关系的说明图。图20C是本专利技术实施例8的导航仪的画面变更的说明图。具体实施方式下面使用附图说明实施例。实施例1使用图1～图16说明本专利技术的实施例1。本实施例中，说明能够通过用户的手形状和手的朝向来控制设备功能的控制装置的例子。例如，该控制装置连接于路径引导装置(导航装置)。图1是本专利技术实施例1的搭载了车载设备接口1的车辆的方框图。图1所示的车辆中，搭载有车载设备接口1以及车载设备群2。车载设备接口1识别用户的手形状以及手的朝向，控制车载设备群2中包含的设备。车载设备接口1包括：图像输入部11、手信息检测部12、手形状识别部13、手朝向识别部14、设备操作命令部15、识别结果确定部720、CPU10、以及RAM19。与手信息检测部12、手形状识别部13、手朝向识别部14、识别结果确定部720、以及设备操作命令部15对应的程序存储在RAM19中，CPU10执行这些程序。此外，将手信息检测部12、手形状识别部13、手朝向识别部14、识别结果确定部720、以及设备操作命令部15称为手信息检测部。图像输入部11例如为照相机等，取得图像数据，并将取得的图像数据输出到手信息检测部12。例如，照相机可以使用取得二维图像数据的RGB照相机、以及能够取得距离数据的红外线照相机，但也可以使用它们之外的照相机。手信息检测部12从图像输入部11取得的图像中检测与用户的手有关的信息。与用户的手有关的信息例如是手的区域信息以及手的位置信息等。作为手的区域信息的检测方法，有将特定颜色的地方检测为手的区域的肤色检测、以及预先学习大量手的图像数据并基于学习数据来检测手的区域的AdaBoost等。AdaBoost的详细情况记载在“P.ViolaandM.Jones，″RapidObjectDetectionusingaBoostedCascadeofSimpleFeatures″，InProc.IEEEConf.0nComputerVisionandPatternRecognition(CVPR)，Kauai，USA，2001.”中，因而省略说明。另外，图像输入部11取得的图像数据中，由于手的朝向以及手的位置不同，有时学习数据和背景不同，由于照明环境的变化，纹理有时也会发生变化，因此，手信息检测部12有时无法检测手的区域信息。为了解决该问题，可以使手信息检测部12预先学习背景统一的手的图像数据，手信息检测部12基于该图像数据检测手的区域。此外，手信息检测部12从所学习的图像数据中排除不适合进行手的区域的检测的图像数据，将排除了不适合数据之后的图像数据用于手的区域的检测，由此能够减少手的区域的误检测。手信息检测部12计算所检测的手的区域的中心或重心的二维坐标，由此计算手的位置信息。此外，为了减少手形状的变化所带来的影响，手信息检测部12最好计算重心的二维坐标。另外，通过按照时间顺序收集手的位置信息，能够计算手的移动信息。手的移动信息可以由移动方向和移动量来表示。手形状识别部13根据手信息检测部12检测出的手的区域信息识别手形状，并将识别结果输出到识别结果确定部720。手形状识别部13的详细情况通过图2进本文档来自技高网...

【技术保护点】
一种控制装置，连接于路径引导装置，该控制装置的特征在于包括：手信息检测部，从拍摄图像中检测关于用户的手的信息；以及设备操作命令部，对所述路径引导装置或连接于所述路径引导装置的多个设备输出控制命令，其中，所述设备操作命令部基于由所述手信息检测部检测出的所述用户的手的朝向，输出对所述路径引导装置或所述设备的控制命令，所述手信息检测部：从所述拍摄图像中检测用户的脸部区域，基于所述拍摄图像内的所述脸部区域的位置，设定要检测所述用户的手的区域，从要检测所述手的区域中除去用于控制所述路径引导装置或所述设备的操作时以外的时间中用户的手放置的区域。

【技术特征摘要】
2012.12.14 JP 2012-2730811.一种控制装置，连接于路径引导装置，该控制装置的特征在于包括：手信息检测部，从拍摄图像中检测关于用户的手的信息；以及设备操作命令部，对所述路径引导装置或连接于所述路径引导装置的多个设备输出控制命令，其中，所述设备操作命令部基于由所述手信息检测部检测出的所述用户的手的朝向，输出对所述路径引导装置或所述设备的控制命令，所述手信息检测部：从所述拍摄图像中检测用户的脸部区域，基于所述拍摄图像内的所述脸部区域的位置，设定要检测所述用户的手的区域，从要检测所述手的区域中除去用于控制所述路径引导装置或所述设备的操作时以外的时间中用户的手放置的区域。2.根据权利要求1所述的控制装置，其特征在于：所述手信息检测部包括：区域识别部，检测所述用户的手的区域；形状识别部，基于检测出的所述手的区域，识别所述用户的手形状；朝向识别部，基于检测出的所述手的区域，识别所述用户的手的朝向；以及运动识别部，基于所述手的区域和所述手的朝向，识别所述用户的手的运动，所述设备操作命令部还基于由所述运动识别部识别的所述手的运动，输出控制命令。3.根据权利要求2所述的控制装置，其特征在于：所述设备操作命令部还基于由所述形状识别部识别的所述手的形状，输出控制命令。4.根据权利要求1所述的控制装置，其特征在于：所述手信息检测部包括：区域识别部，检测所述用户的手的区域；形状识别部，基于检测出的所述手的区域，识别所述用户的手形状；以及朝向识别部，基于检测出的所述手的区域，识别所述用户的手的朝向，所述设备操作命令部还基于由所述形状识别部识别的所述手的形状，输出控制命令。5.根据权利要求4所述的控制装置，其特征在于：保持设备关系信息和功能关系信息，...

【专利技术属性】
技术研发人员：寺田卓马，吉永智明，
申请(专利权)人：歌乐株式会社，
类型：发明
国别省市：日本,JP