控制装置、信息处理系统、控制方法和程序制造方法及图纸

该控制设备：接收关于用户手指的运动的信息、和关于用户手的形状的信息；生成基于接收到的关于用户手指的运动的信息所确定的表示用户手的姿势的第一姿势信息；还生成基于接收到的关于用户手的形状的信息所确定的表示用户手的姿势的第二姿势信息；以及根据基于预定条件的标准，将生成的第一姿势信息与生成的第二姿势信息组合，从而生成和输出表示用户手的姿势的信息。

Control device, information processing system, control method and procedure

The control device: receives information about the movement of the user's finger and the shape of the user's hand; generates first posture information representing the user's hand posture determined based on the received information about the movement of the user's finger; also generates second posture information representing the user's hand posture determined based on the received information about the shape of the user's hand; and According to the criteria based on predetermined conditions, the generated first pose information and the generated second pose information are combined to generate and output the information representing the pose of the user's hand.

【技术实现步骤摘要】
【国外来华专利技术】控制装置、信息处理系统、控制方法和程序
本专利技术涉及控制装置、信息处理系统、控制方法和程序。
技术介绍
近年来，用于生成和呈现虚拟空间图像的虚拟现实(VR)设备得到了广泛的应用。虚拟现实设备检测用户的手和手指的实际运动，并将检测到的运动反映在虚拟空间中的对象的运动中。对于这种处理，在过去，用于检测用户手的相机或其他设备被用于捕获用户手的图像、识别用户手的形状以及检测用户的手指是弯曲的或是伸展的。
技术实现思路
[技术问题]然而，在用户处于从相机的位置看不到用户的手指的姿势的情况下，以及在用户的手在相机的视野之外的情况下，使用相机来检测用户的手的上述现有设备无法识别用户手指的形状并检测用户手指的状态。本专利技术是针对上述情况而做出的。本专利技术的目的是提供能够增加检测到用户手的姿势的机会的控制装置、信息处理系统、控制方法和程序。[问题的解决方案]为了解决上述常规问题，提供了一种控制装置，包括：接收装置、第一姿势信息生成装置、第二姿势信息生成装置和姿势信息输出装置。接收装置接收关于用户手指的运动的信息和关于用户手的形状的信息。第一姿势信息生成装置根据接收到的关于用户手指的运动的信息生成指示用户手的姿势的第一姿势信息。第二姿势信息生成装置根据接收到的关于用户手的形状的信息生成指示用户手的姿势的第二姿势信息。姿势信息输出装置根据基于预定条件的标准，将生成的第一姿势信息与生成的第二姿势信息组合，并且生成和输出指示用户手的姿势的信息。[专利技术的有益效果]r>本技术使得能够增加检测到用户手的姿势的机会。附图说明图1是示出根据本专利技术的示例实施例的信息处理系统的示例配置的示意性框图。图2描绘了示出根据本专利技术示例实施例的信息处理系统中使用的操作设备的示例的示意性透视图。图3是示出根据本专利技术示例实施例的信息处理系统中包括的控制装置的示例的功能性框图。图4描绘了示出根据本专利技术的示例实施例的信息处理系统执行的用户手部检测操作的图。图5是示出根据本专利技术的示例实施例的信息处理系统执行的示例处理的流程图。具体实施方式现在将参照附图描述本专利技术的实施例。如图1所示，根据本专利技术实施例的信息处理系统1包括操作设备10L和10R(当这些操作设备不需要彼此区分时，下文中称为操作设备10)、显示设备20和控制装置30。操作设备10L和10R分别安装在用户的左手和右手。显示设备20安装在用户的头部。控制装置30以有线或无线方式通信地连接到操作设备10和显示设备20。如图1示意性地所示，控制装置30包括控制部分31、存储部分32、操作接收部分33和显示控制部分34。例如，如图2所示，操作设备10包括夹持部分11和操作部分12。操作设备10的前视图显示在图2中的(a)处，并且后视图显示在图2中的(b)处。夹持部分11基本上成形为类似于多边形柱。操作部分12从夹持部分11连续地形成。在图2的示例中，操作部分12包括正面上的传感器部分15和按钮操作部分16，并且包括背面上的手指传感器17和按钮18。此外，操作设备10包含控制电路19。控制电路19包括诸如微型计算机的程序控制设备，并且根据存储在诸如存储器的装置中的程序运行。此外，控制电路19连接到传感器部分15、按钮操作部分16、手指传感器17和操作部分12的按钮18，例如从传感器部分15和按钮操作部分16接收诸如用户手指检测结果和操作指示信号的各种信号，并且将接收到的信号发送到控制装置30。控制电路19包括例如诸如蓝牙(注册商标)接口的无线通信接口或诸如通用串行总线(USB)或有线局域网(LAN)接口的有线通信接口，并且通过无线通信接口或有线通信接口向控制装置30发送各种信号、以及从控制装置30接收各种信号。此外，在本实施例中，保持器14固定在操作设备10的左侧或右侧。例如，保持器14是环形柔性带。当操作本示例中描述的操作设备10时，用户将除拇指以外的四个手指穿过保持器14并使操作设备10的主体与拇指的底部接触。图2中的示例假设通过将操作设备10的右侧按压到用户的手掌上来保持操作设备10。此外，操作设备10的尺寸使得当用户通过将手指穿过保持器14自然地抓握操作设备10来握住操作设备10时，用户拇指的末端可以够到操作设备10的正面上的按钮操作部分16。也就是说，本实施例被配置使得例如当用户握住夹持部分11时，操作部分12中的至少一些按钮(包括按钮18)被布置在用户手指触及的范围内。更具体地，当持有操作设备10的用户自然地握住操作设备10时，用户的食指与操作设备10上的按钮18相接触，并且用户通过使用用户手的手掌、中指、无名指和小指抓握夹持部分11。毋庸置疑的是，即使当用户在此状态下打开他/她手时，操作设备10也不会掉落，因为保持器14将操作设备10固定到用户手部。传感器部分15布置在略低于用户拇指末端够到、并且当用户自然地抓握操作设备10时接近用户拇指的底部的位置。传感器部分15能够在朝向操作设备10的前面、沿着操作设备10的表面的法向为中心、并且从操作设备10的前面的左侧延伸到右侧的相对宽的角度范围上实现检测。传感器部分15在这样的角范围内检测用户的拇指。然后，传感器部分15检测检测到用户拇指的位置(在上述角范围内的角度)和传感器部分15与用户拇指之间的距离，并向控制电路19输出检测结果信息(包括关于上述检测到的位置和距离的信息)。传感器部分15可以是诸如相机、光学传感器、热电传感器或电容传感器的任何器件。此外，手指传感器17布置在当用户自然地抓握操作设备10时用户的食指、中指、无名指和小指分别够到的位置。手指传感器17例如是产生指示手指是否接近的信息的电容传感器。手指传感器17的每一个生成指示手指是否接近的信息，并将生成的信息输出到控制电路19。在本示例实施例中，操作设备10实现根据本专利技术的第一检测装置。显示设备20例如是要安装在用户的头部上的头戴式显示器(HMD)。显示设备20有线或无线地接收从控制装置30输出的图像数据，并且显示接收到的图像数据以将其呈现给用户。在本实施例的示例中，显示设备20可以包括左眼图像显示部分和右眼图像显示部分。左眼图像显示部分向用户的左眼呈现图像，右眼图像显示部分向用户的右眼呈现图像。左眼和右眼图像显示部分可以各自包括显示元件，诸如有机电致发光(EL)显示面板或液晶显示面板。在上述情况下，控制装置30生成并输出将由各个图像显示部分显示的左眼图像数据和右眼图像数据。在这种情况下，显示设备20使左眼图像显示部分输出用于显示目的的左眼图像数据，并且使右眼图像显示部分输出用于显示目的的右眼图像数据。在本实施例中，显示设备20可以是非透明显示装置或透明显示装置。非透明显示装置不允许安装它的用户观看外部世界。透明显示装置允许安装它的用户观看通过将外部世界图像与要显示的图像组合而获得的图像。此外，相机21包括在本实施例的示例中。相机21的视野在从显示设备20向前的方向中(在用户安装显示设备20时从用户的面部向前的方向中本文档来自技高网...

【技术保护点】
1.一种控制装置，包括：/n接收装置，其接收关于用户手指的运动的信息和关于用户手的形状的信息；/n第一姿势信息生成装置，其根据所述接收到的关于所述用户手指的运动的信息，生成指示用户手的姿势的第一姿势信息；/n第二姿势信息生成装置，其根据所述接收到的关于所述用户手的形状的信息，生成指示用户手的姿势的第二姿势信息；以及/n姿势信息输出装置，其根据基于预定条件的标准，将所述生成的第一姿势信息与所述生成的第二姿势信息组合，并且生成和输出指示所述用户手的姿势的信息。/n

【技术特征摘要】
【国外来华专利技术】1.一种控制装置，包括：
接收装置，其接收关于用户手指的运动的信息和关于用户手的形状的信息；
第一姿势信息生成装置，其根据所述接收到的关于所述用户手指的运动的信息，生成指示用户手的姿势的第一姿势信息；
第二姿势信息生成装置，其根据所述接收到的关于所述用户手的形状的信息，生成指示用户手的姿势的第二姿势信息；以及
姿势信息输出装置，其根据基于预定条件的标准，将所述生成的第一姿势信息与所述生成的第二姿势信息组合，并且生成和输出指示所述用户手的姿势的信息。


2.根据权利要求1所述的控制装置，其中，
所述姿势信息输出装置在所述预定条件下选择第一检测装置检测到的关于所述用户手指的运动的信息或第二检测装置检测到的关于所述用户手的形状的信息，并且生成和输出指示所述用户手的姿势的信息。


3.根据权利要求1或2所述的控制装置，其中，
所述控制装置连接到所述第一检测装置和所述第二检测装置，所述第一检测装置安装在用户的手上并适于获取关于所述用户手指的运动的信息，所述第二检测装置布置在与所述第一检测装置不同的位置并适于检测在预定视野内所述用户手的形状，
所述接收装置不仅从所述第一检测装置接收关于所述用户手指的运动的信息，而且还从所述第二检测装置接收关于所述用户手的形状的信息，并且
所述预定条件包括基于所述用户手指是否包括在所述第二检测装置的视野内的条件。


4.根据权利要求1至3中任一项所述的控制装置，其中，
所述预定条件包括与关于所述用户手指的运动的信息和关于所述用户手的形状的信息之间的时域变化有关的条件。


5.根据权利要求1至4中任一项所述的控制装置，其中，
指示所述用户手的姿势的所述信息包括指示用户手的朝向、每个用户手指的打开程度和用户拇指的朝向中的至少一个的信息。


6.根据权利要求1至5中任一项所述的控制装置，还包括：
生成要呈现给所述用户的图像信息的装置，其中，
显示包含在所述生成的图像信息中的图像的模式基于指示所述用户手的姿势的所述生成的信息而改变。

<...

【专利技术属性】
技术研发人员：森英树，奥村泰史，
申请(专利权)人：索尼互动娱乐股份有限公司，
类型：发明
国别省市：日本;JP