一种基于智能戒指和节点的便携式VR动作输入方法技术

一种基于智能戒指和节点的便携式VR动作输入方法，在手臂的大臂处附着大臂IMU追踪模块，小臂处附着小臂IMU追踪模块，手背处附着手部IMU追踪模块，食指第一指节处附着食指IMU追踪模块，获取大臂、小臂、手背以及食指第一指节的空间方位，利用无线传输将整个胳膊的动作输入到VR系统，与现有技术相比，本发明专利技术首次为VR系统提供了一种精度、低成本的消费级动作输入方案，同时提供了新的基于动作的交互方式。

【技术实现步骤摘要】
一种基于智能戒指和节点的便携式VR动作输入方法
本专利技术属于虚拟现实
，特别涉及一种基于智能戒指和节点的便携式VR动作输入方法。
技术介绍
当前虚拟现实(VR)输入方案主要分为三类：一是专业VR方案。例如HTCVive，OculusRift等。通过激光场定位头盔与手柄，来实现头部与手部的空间位置追踪和空间朝向追踪。同时手柄的按钮实现交互操作。二是移动VR。例如三星GearVR。将手机置于VR眼镜盒内，并佩戴在头部。利用手机内置的IMU传感器及磁力计，实现对头部空间朝向追踪，提供有限的沉浸感。移动VR一般配备单个手柄，手柄内含9轴传感器，实现对手柄的空间朝向的追踪，利用手柄的空间朝向、以及按钮，实现在虚拟世界中交互。三是VR一体机。与移动VR类似，主要是集成了显示与处理部件，不需要额外放置手机。同样采用类似移动VR的手柄进行交互操作。可以看出，专业VR可以确定头部与手部的空间位置与空间朝向，但其成本较高。移动VR与VR一体机只能确定头部与手部的空间朝向，不能确定空间位置信息。同时这几种VR方案均不具备将人体动作作为交互方式。
技术实现思路
为了克服上述现有技术的缺点，本专利技术的目的在于提供一种基于智能戒指和节点的便携式VR动作输入方法，主要解决目前VR系统没有高精度低成本的消费级动作输入方案的问题。为了实现上述目的，本专利技术采用的技术方法是：一种基于智能戒指和节点的便携式VR动作输入方法，在手臂的大臂处附着大臂IMU追踪模块1，小臂处附着小臂IMU追踪模块2，手背处附着手部IMU追踪模块3，食指第一指节处附着食指IMU追踪模块4，获取大臂、小臂、手背以及食指第一指节的空间方位，利用无线传输将整个胳膊的动作输入到VR系统。所述大臂IMU追踪模块1、小臂IMU追踪模块2和手部IMU追踪模块3通过绑带附着在肢体上；所述食指IMU追踪模块4设置在一个指环或者戒指5上，所述指环或者戒指5上靠近大拇指的一侧具有触摸按钮6，以便于大拇指进行触摸输入。所述触摸按钮6为电容式触摸按键，供用户进行触摸输入，以实现进一步的交互操作。本专利技术可通过所述食指IMU追踪模块4追踪食指第一指节的空间方位信息，并以此信息来模拟整个手部的动作，实现对手部动作的追踪。本专利技术可通过手背以及食指第一指节的空间方位计算出食指第一指节向掌心弯曲的角度即食指第一指节与手背的夹角a1以及食指向外侧伸展的角度α，根据手指节与手背的几何关系以及手指节之间的几何关系，模拟出整个手部的动作。用β表示无名指向外侧的伸展角度为，θ表示小指向外侧的伸展角度，a2表示食指第二指节与第一指节的夹角，a3表示食指第三指节与第二指节的夹角，则模拟整个手部的动作的方法为：当做简单的手部运动时，认为β≈-α，θ≈-2α，模拟出整个手部的姿态；当手部抓握物体时，认为a2≈a1*1.37，a3≈a1*1.47或者认为a1≈a2≈a3，模拟出手指抓握的姿态。当全部满足以下条件时，可认为抓握住物体：1.a1大于一定抓握阈值，认为抓握了物体，当a1小于此阈值时，认为松开了物体；2.手与物体的具体小于一定距离；3.掌心方向朝向物体，角度偏差小于一定角度；4.抓握/松开时，食指具有一定的角速度。由于胳膊运动时，大臂、小臂、手背及食指第一指节的空间方位会发生变化。因此根据追踪模块的数据进行计算，可追踪大臂、小臂、手背、及食指第一指节的空间方位。获取大臂、小臂、手背以及食指第一指节的空间方位后，计算手臂各个关节的空间位置信息，各个关节空间位置如下：J1＝J0+V0*L0J2＝J1+V1*L1＝J0+V0*L0+V1*L1J3＝J2+V2*L2＝J0+V0*L0+V1*L1+V2*L2J4＝J3+V3*L3＝J0+V0*L0+V1*L1+V2*L2+V3*L3其中，J0是肩关节的三维空间位置坐标，J1是肘关节的三维空间位置坐标，J2是腕关节的三维空间位置坐标，J3是食指第一指节的三维空间位置坐标，J4是食指第二指节的三维空间位置坐标，V0是朝着肢体末端的大臂空间方位三维向量，V1是朝着肢体末端的小臂空间方位三维向量，V2是朝着肢体末端的手背空间方位三维向量，V3是朝着肢体末端的食指第一指节空间方位三维向量，L0是大臂长度，L1是小臂长度，L2是手背长度，L3是食指第一指节长度。通过记录各个关节的空间位置信息，计算各个关节的运动速度与方向。与现有技术相比，本专利技术首次为VR系统提供了一种精度、低成本的消费级动作输入方案，同时提供了新的基于动作的交互方式。附图说明图1是本专利技术IMU追踪模块设置示意图。图2是本专利技术食指IMU追踪模块的设置结构示意图。图3是本专利技术手指向外侧的伸展角度示意图。图4是本专利技术手指抓握模拟示意图。具体实施方式下面结合附图和实施例详细说明本专利技术的实施方式。本专利技术所描述的可穿戴方法，基于IMU传感器技术与无线传输技术，同时追踪用户的大臂、前臂、手背与手部空间方位，将整个胳膊的动作输入到VR系统。具体地，如图1所示，在手臂的大臂处附着大臂IMU追踪模块1，小臂处附着小臂IMU追踪模块2，手背处附着手部IMU追踪模块3，食指第一指节处附着食指IMU追踪模块4，获取大臂、小臂、手背以及食指第一指节的空间方位，利用无线传输将整个胳膊的动作输入到VR系统。同时，经过计算，可以得知手臂各个关节的空间位置信息，因此提供了包括手部的整个胳膊的位置定位功能。各IMU追踪模块均为可穿戴设计，设计为小巧的戒指与节点。穿戴及使用方便，不需要笨重的手柄，最大限度解放用户肢体及双手，用户操作更自然，动作更准确。同时，本专利技术实现了追踪模块的数量最小化，利用手部食指第一指节的食指IMU追踪模块4来追踪食指第一指节的方位信息，并以此信息来模拟整个手部的动作。可以实现对手部抓握、抛扔等动作的追踪。其中，大臂IMU追踪模块1、小臂IMU追踪模块2和手部IMU追踪模块3通过绑带附着在肢体上；食指IMU追踪模块4设置在一个指环或者戒指5上，参考图2，在指环或者戒指5上靠近大拇指的一侧具有触摸按钮6，以便于大拇指进行触摸输入。触摸按钮6可为普通的电容式触摸按键，供用户进行触摸输入，以实现进一步的交互操作。本专利技术可通过食指IMU追踪模块4追踪食指第一指节的空间方位信息，并以此信息来模拟整个手部的动作，实现对手部动作的追踪。假设各个关节的空间位置分别是：J0，肩关节的三维空间位置坐标J1，肘关节的三维空间位置坐标J2，腕关节的三维空间位置坐标J3，食指第一指节的三维空间位置坐标J4，食指第二指节的三维空间位置坐标假设朝着肢体末端的方位分别是：V0，大臂空间方位三维向量V1，小臂空间方位三维向量V2，手背空间方位三维向量V3，食指第一指节空间方位三维向量假设肢体长度(相邻两关节间的距离)分别是：L0，大臂长度L1，小臂长度L2，手背长度L3，食指第一指节长度则可以计算出各个关节空间位置如下：J1＝J0+V0*L0J2＝J1+V1*L1＝J0+V0*L0+V1*L1J3＝J2+V2*L2＝J0+V0*L0+V1*L1+V2*L2J4＝J3+V3*L3＝J0+V0*L0+V1*L1+V2*L2+V3*L3同时，通过记录各个关节的位置信息，可以计算出各个关节点的运动速度与方向。参考图3和图4，通过手背以及食指第一指节的空间方位计算本文档来自技高网...

【技术保护点】
1.一种基于智能戒指和节点的便携式VR动作输入方法，其特征在于，在手臂的大臂处附着大臂IMU追踪模块(1)，小臂处附着小臂IMU追踪模块(2)，手背处附着手部IMU追踪模块(3)，食指第一指节处附着食指IMU追踪模块(4)，获取大臂、小臂、手背以及食指第一指节的空间方位，利用无线传输将整个胳膊的动作输入到VR系统。

【技术特征摘要】
1.一种基于智能戒指和节点的便携式VR动作输入方法，其特征在于，在手臂的大臂处附着大臂IMU追踪模块(1)，小臂处附着小臂IMU追踪模块(2)，手背处附着手部IMU追踪模块(3)，食指第一指节处附着食指IMU追踪模块(4)，获取大臂、小臂、手背以及食指第一指节的空间方位，利用无线传输将整个胳膊的动作输入到VR系统。2.根据权利要求1所述基于智能戒指和节点的便携式VR动作输入方法，其特征在于，所述大臂IMU追踪模块(1)、小臂IMU追踪模块(2)和手部IMU追踪模块(3)通过绑带附着在肢体上；所述食指IMU追踪模块(4)设置在一个指环或者戒指(5)上，所述指环或者戒指(5)上靠近大拇指的一侧具有触摸按钮(6)，以便于大拇指进行触摸输入。3.根据权利要求2所述基于智能戒指和节点的便携式VR动作输入方法，其特征在于，所述触摸按钮(6)为电容式触摸按键，供用户进行触摸输入，以实现进一步的交互操作。4.根据权利要求1所述基于智能戒指和节点的便携式VR动作输入方法，其特征在于，通过所述食指IMU追踪模块(4)追踪食指第一指节的空间方位信息，并以此信息来模拟整个手部的动作，实现对手部动作的追踪。5.根据权利要求4所述基于智能戒指和节点的便携式VR动作输入方法，其特征在于，通过手背以及食指第一指节的空间方位计算出食指第一指节向掌心弯曲的角度即食指第一指节与手背的夹角a1以及食指向外侧伸展的角度α，根据手指节与手背的几何关系以及手指节之间的几何关系，模拟出整个手部的动作。6.根据权利要求5所述基于智能戒指和节点的便携式VR动作输入方法，其特征在于，用β表示无名指向外侧的伸展角度为，θ表示小指向外侧的伸展角度，a2表示食指第二指节与第一指节的夹角，a3表示食指第三指节与第二指节的夹...

【专利技术属性】
技术研发人员：党宏武，
申请(专利权)人：梦卓科技深圳有限公司，
类型：发明
国别省市：广东,44