输入设备、输入方法和程序技术

一种输入设备(2000)包括运动检测单元(2020)和输入识别单元(2040)。运动检测单元(2020)通过使用包括对象的所捕获的图像来检测该对象的运动。这里，检测到的对象的运动是在基于附着到输入设备(2000)的用户身体上的传感器的检测结果而定义的时段内的对象的运动。输入识别单元(2040)基于检测到的对象的运动来识别对信息处理设备的输入。

Input devices, input methods and programs

An input device (2000) includes a motion detection unit (2020) and an input identification unit (2040). The motion detection unit (2020) detects the movement of the object by using the captured image including the object. Here, the motion of the detected object is the motion of the object within a period of definition based on the detection result of a sensor on the user body attached to the input device (2000). The input recognition unit (2040) identifies the input to the information processing device based on the movement of the detected object.

【技术实现步骤摘要】
【国外来华专利技术】输入设备、输入方法和程序
本专利技术涉及一种输入设备、输入方法和程序。
技术介绍
已经研发出了这样的技术：通过相机对用户在空间上执行的诸如手势输入等动作进行成像，分析所生成的所捕获的图像，并且因此识别出用户在信息处理设备上的输入操作。专利文献1公开了一种根据用户手掌的手势(例如，打开手掌的手势)在手掌上显示菜单屏幕或改变菜单屏幕的技术。专利文献2公开了一种使用在头戴式显示器上显示的虚拟键盘来执行输入的技术。专利文献2公开了如下的技术：将虚拟键盘固定到真实空间中的对象上，因此，即使佩戴头戴式显示器的人的头部发生了移动，虚拟键盘的位置也不会改变。相关文献专利文献[专利文献1]美国专利申请公布号2015/0016777[专利文献2]PCT日本翻译专利公布号2015-504616
技术实现思路
技术问题在对所捕获的图像中所包括的用户的手的运动进行分析的情况下，难以区分出用户为了实现输入操作而移动手的情况和用户为了另一目的而移动手的情况。因此，即使用户没有执行输入操作，也有可能错误地识别出该输入操作，或者即使用户执行了输入操作，该输入操作也可能没有被识别出。本专利技术正是考虑到这个问题而提出的。本专利技术的目的在于提供一种当从所捕获的图像中识别用户的输入操作时提高识别准确度的技术。问题的解决方案根据本专利技术，提供了一种输入设备，包括：1)运动检测单元，该运动检测单元通过使用包括对象的所捕获的图像，在基于附着到用户身体上的传感器的检测结果而定义的时段内检测该对象的运动；以及2)输入识别单元，该输入识别单元基于检测到的对象的运动来识别对信息处理设备的输入。根据本专利技术，提供了一种由计算机执行的输入方法。该输入方法包括：1)通过使用包括对象的所捕获的图像，在基于附着到用户身体上的传感器的检测结果而定义的时段内检测该对象的运动的运动检测步骤；以及2)基于检测到的对象的运动来识别对信息处理设备的输入的输入识别步骤。专利技术的有益效果根据本专利技术，提供了一种当从所捕获的图像中识别用户的输入操作时提高识别准确度的技术。附图说明基于下面描述的优选实施例和以下的附图，上述目的以及其他目的、特征和优点将变得更加明显。图1是示出了根据示例性实施例1的输入设备的框图。图2是从概念上解释输入设备的操作的图。图3是示出了实现输入设备的计算机的配置的图。图4是示出了示例性实施例1的输入设备所执行的过程流程图。图5是示出了在用户点击左臂的情况下在设备的显示屏幕上显示图像的场景的图。图6是示出了使用传感器定时来确定检测目标时段的起点的方法的图。图7是示出了包括用户的模糊手指的所捕获的图像的图。图8是示出了对象的运动所定义的形状被识别为输入的场景的图。图9是示出了将对象的运动转换为形状的场景的图。图10是示出了手势输入的图。图11是示出了根据示例性实施例2的输入设备的框图。图12是用于从概念上解释示例性实施例2的输入设备的操作的图。图13是示出了示例性实施例2的输入设备所执行的过程流程图。图14是示出了显示控制单元校正第一区域的形状以生成第二区域的场景的图。图15是示出了第二区域显示在显示屏幕上以叠加在所捕获的图像上的场景的图。图16是示出了在头戴式显示器的显示屏幕上显示的第二区域的图。图17是示出了实现示例性实施例2的输入设备的计算机的硬件配置的图。图18是示出了眼镜和手表的图。图19是示出了用户执行的检查工作的概览的图。图20是示出了包括在用户视野中的操作选择菜单的图。图21是示出了包括在用户视野中的输入方法选择菜单的图。图22是示出了在数字输入按钮被选择之后的场景的图。图23是示出了在备忘录按钮被选择之后的场景的图。图24是示出了用户对包括在所捕获的图像中的对象执行绘制的场景的图。图25是示出了所捕获的图像的平面上输入位置与对象的位置之间的关系的图。图26是示出了三维空间中的输入位置与对象的位置之间的关系的图。图27是示出了在由用户执行的输入操作所定义的位置处显示第二区域的场景的图。图28是示出了基于标记来定义检测区域的方法的第一图。图29是示出了基于标记来定义检测区域的方法的第二图。图30是示出了基于标记来定义检测区域的方法的第三图。图31是示出了显示控制单元校正第一区域的形状以生成第二区域的场景的第二图。具体实施方式在下文中，将参考附图来描述本专利技术的示例性实施例。在所有附图中，相同的组成元件被赋予了相同的附图标记，并且在适当时将不会重复地对其进行描述。[示例性实施例1]图1是示出了根据示例性实施例1的输入设备2000的框图。在图1中，每个方框表示的不是硬件单元中的配置，而是功能单元中的配置。输入设备2000包括运动检测单元2020和输入识别单元2040。运动检测单元2020通过使用包括对象的所捕获的图像来检测该对象的运动。这里，检测到的对象的运动是在基于附着到输入设备2000的用户身体上的传感器的检测结果而定义的时段中的对象的运动。输入识别单元2040基于检测到的对象的运动来识别对信息处理设备的输入。通过此输入而操作的信息处理设备(作为输入目标的信息处理设备)可以是输入设备2000，或者也可以是其他设备。图2是在概念上解释输入设备2000的操作的图。用户通过移动手指30来执行对信息处理设备的输入。手指30的运动由相机20进行成像。因此，相机20生成包括手指30的捕获图像。输入设备2000基于包括在由相机20生成的捕获图像中的手指30来检测手指30的运动。输入设备2000基于检测到的手指30的运动来识别用户的输入。输入设备2000使用附着到用户的传感器来识别用户执行的输入操作。在图2中，传感器12内置于安装在用户左臂50上的设备10中。例如，传感器12是振动传感器。例如，如果用户在开始输入操作的定时处点击左臂50，则输入设备2000可以识别出的是：包括此定时的用户动作是基于传感器检测到点击的定时的输入操作。因此，输入设备2000在包括该定时的时段中检测手指30的运动，并且因此可以准确地识别用户所期望的输入操作。然而，参照图2描述的输入设备2000的操作可以是用于更好地理解输入设备2000的示例，并且输入设备2000的操作并不局限于上述示例。稍后将描述输入设备2000的操作的细节和变化。<有益效果>如果仅通过使用包括在所捕获的图像中的对象的运动来识别用户的输入操作，则难以区分出用户为了实现输入操作而移动对象的情况和用户为了另一目的而移动对象的情况。因此，即使用户没有执行输入操作，也有可能错误地识别出该输入操作，或者即使用户执行了输入操作，该输入操作也可能没有被识别出。因此，本示例性实施例的输入设备2000通过在基于附着到用户的传感器的检测结果而定义的时段中分析对象的运动来识别输入操作。对象在此时段内的运动有很高概率会是指示输入操作的运动。因此，可以准确地识别用户所期望的输入操作，并且，可以防止即使用户没有执行输入操作，该输入操作也被错误地识别出，或者防止即使用户执行了输入操作，该输入操作无法也被识别出。<输入设备2000的硬件配置的示例>输入设备2000的每个功能配置单元可以通过硬件(例如，硬件电子电路)来实现，或者可以通过硬件和软件的组合来实现(例如，电子电路与用于控制该电子电路的程序的组合)。本文档来自技高网...

【技术保护点】
一种输入设备，包括：运动检测单元，所述运动检测单元通过使用包括对象的所捕获的图像，在基于附着到用户的身体上的传感器的检测结果而定义的时段内检测所述对象的运动；以及输入识别单元，所述输入识别单元基于检测到的所述对象的运动来识别对信息处理设备的输入。

【技术特征摘要】
【国外来华专利技术】2015.09.28 JP 2015-1902381.一种输入设备，包括：运动检测单元，所述运动检测单元通过使用包括对象的所捕获的图像，在基于附着到用户的身体上的传感器的检测结果而定义的时段内检测所述对象的运动；以及输入识别单元，所述输入识别单元基于检测到的所述对象的运动来识别对信息处理设备的输入。2.根据权利要求1所述的输入设备，其中所述运动检测单元通过使用所述传感器的检测定时来确定待检测对象的运动的起点和终点中的至少一个。3.根据权利要求1或2所述的输入设备，其中所述传感器是振动传感器、加速度传感器、振动开关、压力传感器或静电电容传感器。4.根据权利要求1至3中任一项所述的输入设备，其中所述对象是所述用户的身体的一部分或者是设置有所述传感器的设备。5.根据权利要求1至4中任一项所述的输入设备，其中所述输入识别单元基于所述对象的运动来识别绘制第一区域的输入，并且所述输入设备还包括：显示控制单元，所述显...

【专利技术属性】
技术研发人员：则枝真，吉本诚，才田好则，
申请(专利权)人：日本电气株式会社，
类型：发明
国别省市：日本,JP