基于AR或VR系统的人机交互方法和装置制造方法及图纸

本发明专利技术实施例公开了一种基于AR或VR系统的人机交互装置，包括移动终端，所述移动终端包括显示模块、触摸控制模块和数据处理模块，所述显示模块与所述触摸控制模块分别与所述数据处理模块连接，所述触摸控制模块设于所述显示模块表面，其中，所述触摸控制模块包括触摸面和设于所述触摸面上的指点杆。本发明专利技术实施例提供的基于AR或VR系统的人机交互方法和装置通过触摸控制模块的触摸面和指点杆接收输入的受力信息的大小来确定光标在三维环境中的视觉深度的位置，通过受力信息的方向来确定光标在该深觉深度所在画面的位置，操作简单，大幅降低了设备成本和计算机系统的计算量，提高虚拟现实、增强现实的人机交互体验。

【技术实现步骤摘要】

本专利技术涉及一种人机交互方法和装置，尤其是一种基于AR或VR技术中的人机交互方法和装置。
技术介绍
虚拟现实(virtual reality)，简称VR技术，也称灵境技术或人工环境，是利用电脑模拟产生一个三度空间的虚拟世界，提供使用者关于视觉、听觉、触觉等感官的模拟，让使用者如同身历其境一般，可以及时、没有限制地观察三度空间内的事物。增强现实(Augmented Reality，简称AR)，是通过计算机系统提供的信息增加用户对现实世界感知的技术，将虚拟的信息应用到真实世界，并将计算机生成的虚拟物体、场景或系统提示信息叠加到真实场景中，从而实现对现实的增强。在视觉化的增强现实中，用户利用头盔显示器，把真实世界与电脑图形多重合成在一起，便可以看到真实的世界围绕着它。一般情况下，上述的两种技术往往以头戴式显示系统的形式出现。当用户移动或者控制操控发生时，计算机场景将进行实时的响应，以便使用户获得真实的临场感。这两种技术涉及了计算机图形学、图像处理、人工智能、光学、集成电路、传感器技术等技术，是一种技术含量较高的计算机辅助生成的显示技术。这种显示技术的影像往往是一种立体影像，即是3D影像。目前，比较主流的虚拟现实和增强现实人机交互方式，主要基于手势识别和跟踪、手套、手柄、玩具枪等等。与传统的人机交互方式相比，虚拟现实技术和增强现实技术需要一种全新的人机交互方式。
技术实现思路
本专利技术的目的在于提供一种基于AR或VR系统的人机交互方法和装置，旨在解决改进现有的人机交互方式，提升AR或VR系统的交互体验。为了解决上述问题，本专利技术实施例首先提供了一种基于AR或VR系统的人机交互装置，包括移动终端，所述移动终端包括显示模块、触摸控制模块和数据处理模块，所述显示模块与所述触摸控制模块分别与所述数据处理模块连接，所述触摸控制模块设于所述AR或者VR系统的外表面，其中，所述触摸控制模块包括触摸面和设于所述触摸面上的指点杆。根据本专利技术实施例提供的基于AR或VR系统的人机交互装置，所述触摸面为包括基板，所述基板上设有电路阵列，或者，所述触摸面为表面声波式触摸屏、声学脉冲识别式触摸屏术、电容式触摸屏、或者是电阻式触摸屏中的一种或多种组合。根据本专利技术实施例提供的基于AR或VR系统的人机交互装置，所述指点杆的底部设有若干与所述指点杆连接的陶瓷片。根据本专利技术实施例提供的基于AR或VR系统的人机交互装置，所述指点杆的两侧设有第一按键和第二按键，所述第一按键和第二按键的之间还设有锁定按键。根据本专利技术实施例提供的基于AR或VR系统的人机交互装置，所述触摸控制模块设于所述移动终端的左右侧面或者顶面。此外，本专利技术实施例还提供了一种基于AR或VR系统的人机交互方法，应用在移动终端上，所述移动终端包括触摸控制模块，所述触摸控制模块包括触摸面和指点杆，包括：检测所述触摸面和所述指点杆输入的受力信息；根据受力信息的在平行于所述触摸面并且相互垂直的第一分量和第二分量；以及获取所述受力信息在垂直所述触摸面方向的第三分量；根据所述第三分量设置光标在三维环境中的视觉深度，以及根据所述第一分量和第二分量设置所述光标在该视觉深度下的位置。根据本专利技术实施例提供的基于AR或VR系统的人机交互方法，所述第三分量为所述受力信息的大小，所述第一分量和第二分量为所述受力信息的方向。根据本专利技术实施例提供的基于AR或VR系统的人机交互方法，还包括：根据所述第一分量和第二分量设置所述光标在该视觉深度下的位移动方向。根据本专利技术实施例提供的基于AR或VR系统的人机交互方法，所述根据所述第三分量设置光标在三维环境中的视觉深度，光标在三维环境中的视觉深度，可以通过控制“视差图像对”的视差来进行控制。以及根据所述第一分量和第二分量设置所述光标在该视觉深度下的位置的步骤包括：根据所述第三分量持续的时间提高所述光标在所述三维环境中的视觉深度的移动速度，以及根据所述第一分量和第二分量持续的时间提高所述光标在该视觉深度下的移动速度。根据本专利技术实施例提供的基于AR或VR系统的人机交互方法，所述根据所述第三分量设置光标在三维环境中的视觉深度，以及根据所述第一分量和第二分量设置所述光标在该视觉深度下的位置的步骤包括：根据所述第三分量的大小设置所述光标在所述三维环境中的视觉深度的移动速度，以及根据所述第一分量和第二分量的大小提高所述光标在该视觉深度下的移动速度。相较于现有技术，本专利技术实施例提供的基于AR或VR系统的人机交互方法和装置通过触摸控制模块的触摸面和指点杆接收输入的受力信息的大小来确定光标在三维环境中的视觉深度的位置，通过受力信息的方向来确定光标在该深觉深度所在画面的位置，操作简单，而且不需要其他辅助设备以及判断手势等计算，大幅降低了设备成本和计算机系统的计算量，提高虚拟现实、增强现实的人机交互体验。附图说明下面结合附图对本专利技术的具体实施方式作进一步详细的说明，其中：图1是本专利技术实施例提供的基于AR或VR系统的人机交互装置一实施方式的结构示意图；图2是本专利技术实施例提供的基于AR或VR系统的人机交互装置一实施方式中触摸控制模块在移动终端上的示意图；图3是本专利技术实施例提供的基于AR或VR系统的人机交互装置另一实施方式中触摸控制模块在移动终端上的示意图；图4是本专利技术实施例提供的基于AR或VR系统的人机交互装置一实施例中触摸控制模块的结构示意图；图5是本专利技术实施例提供的基于AR或VR系统的人机交互装置另一实施例中触摸控制模块的结构示意图；图6是本专利技术实施例提供的基于AR或VR系统的人机交互方法一实施例的流程图；图中：100：移动终端；110：显示模块；120：数据处理模块；130：触摸控制模块；131：触摸面；132：指点杆。具体实施方式本专利技术实施例提供的一种基于AR或VR系统的人机交互方法和装置通过触摸控制模块的触摸面和指点杆接收输入的受力信息的大小来确定光标在三维环境中的视觉深度的位置，通过受力信息的方向来确定光标在该深觉深度所在画面的位置，提供了一种应用在虚拟现实、增强现实系统中的新型人机交互方式。请参阅图1，图1是本专利技术实施例提供的基于AR或VR系统的人机交互装置一实施方式的结构示意图。图1示出的基于AR或VR系统的人机交互装置包括移动终端100，这种移动终端100是以一种头戴式显示系统的形式实现。其中，移动终端100包括显示模块110、触摸控制模块130和数据处理模块120。显示模块110与数据处理模块120连接，用于生成计算机三维环境，并通过体显示或者视差式立体显示的方式，使用户感受到立体影像。体显示可以在空间中生成体像素，这些体像素可以在空间中产生、吸收或者散射光线，使得用户可以在不同的侧面观看到物体不同侧面的图像信息。视差式立体显示可以通过让双眼分别接收具有视差的左右眼图像，从而让人感知到物体空间的三维信息。如果这种显示模块110是虚拟现实显示模块110，则人眼可以看到纯粹的计算机图形。如果这种显示模块110是增强现实显示模块，则人眼可以看到计算机图形叠加在现实场景的视觉路径中。数据处理模块120用于在接收触摸控制模块130发送的信息后，将操作数据反馈给显示模块110，从而调整图像对的视差信息，或者重新渲染计算机图形。触摸控制模块130与数据处理模块120连接，设于AR或VR系统的本文档来自技高网...

【技术保护点】
一种基于AR或VR系统的人机交互装置，其特征在于，包括移动终端，所述移动终端包括显示模块、触摸控制模块和数据处理模块，所述显示模块与所述触摸控制模块分别与所述数据处理模块连接，所述触摸控制模块设于所述AR或者VR系统的外表面，其中，所述触摸控制模块包括触摸面和设于所述触摸面上的指点杆。

【技术特征摘要】
1.一种基于AR或VR系统的人机交互装置，其特征在于，包括移动终端，所述移动终端包括显示模块、触摸控制模块和数据处理模块，所述显示模块与所述触摸控制模块分别与所述数据处理模块连接，所述触摸控制模块设于所述AR或者VR系统的外表面，其中，所述触摸控制模块包括触摸面和设于所述触摸面上的指点杆。2.如权利要求1所述的基于AR或VR系统的人机交互装置，其特征在于，所述触摸面为包括基板，所述基板上设有电路阵列，或者，所述触摸面为表面声波式触摸屏、声学脉冲识别式触摸屏术、电容式触摸屏、或者是电阻式触摸屏中的一种或多种组合。3.如权利要求1所述的基于AR或VR系统的人机交互装置，其特征在于，所述指点杆的底部设有若干与所述指点杆连接的陶瓷片。4.如权利要求1所述的基于AR或VR系统的人机交互装置，其特征在于，所述指点杆的两侧设有第一按键和第二按键，所述第一按键和第二按键的之间还设有锁定按键。5.如权利要求1-4任一项所述的基于AR或VR系统的人机交互装置，其特征在于：所述触摸控制模块设于所述移动终端的左右侧面或者顶面。6.一种基于AR或VR系统的人机交互方法，应用在移动终端上，所述移动终端包括触摸控制模块，所述触摸控制模块包括触摸面和指点杆，其特征在于，该人机交互方法包括：检测所述触摸面和所述指点杆输入的受力信息；根据受力信息的在平行于所述触摸面并且相互垂直的第一分量和第二分量；以及获取所述受力...

【专利技术属性】
技术研发人员：范杭，
申请(专利权)人：范杭，
类型：发明
国别省市：广东;44