基于头戴式显示设备的交互方法及装置制造方法及图纸

本发明专利技术提供一种基于头戴式显示设备的交互方法，包括以下步骤：获取全景图像；连接头戴式显示设备与手持式外设，确定所述手持式外设在所述全景图像对应的空间坐标系中的坐标；根据所述手持式外设在所述空间坐标系中的坐标，在所述头戴式显示设备的显示界面中显示所述手持式外设对应的标识。本发明专利技术同时提供一种基于头戴式显示设备的交互装置。本发明专利技术基于头戴式显示设备的交互方法及装置，能够使使用者在佩戴头戴式显示设备时，便捷地通过持握手持式外设对显示界面中的内容进行交互操作，显著地提升了头戴式显示设备使用者的操作体验。

Interactive method and device based on head mounted display device

The present invention provides an interactive method based on a head wearing display device, including the following steps: obtaining a panoramic image, connecting a head wearing display device and a handheld peripherals, determining the coordinates of the handheld peripherals in the spatial coordinate system corresponding to the panoramic image, and according to the handheld peripherals in the spatial coordinate system. The coordinates corresponding to the handheld peripheral display are displayed in the display interface of the head mounted display device. The invention also provides an interactive device based on a head mounted display device. The invention is based on the interactive method and device of the head wearing display device, which enables users to operate the content of the display interface conveniently by holding a handshake holding device when wearing a head wearing display device, and greatly improves the operation experience of the users of the head wearing display equipment.

【技术实现步骤摘要】
基于头戴式显示设备的交互方法及装置
本专利技术涉及智能可穿戴设备与人机交互
，尤其涉及一种基于头戴式显示设备的交互方法及装置。
技术介绍
虚拟现实(VirtualReality，VR)技术通过计算机系统模拟出虚拟的三维世界，借助显示系统和交互系统，向使用者提供视觉、听觉、触觉等感官的模拟体验，同时使用者能够与虚拟场景进行互动交互，带给使用者身临其境的感受。因此，交互技术是虚拟现实系统实现的关键性技术之一，决定了使用者如何在虚拟世界中与目标进行互动。现有技术方案中，头戴式显示设备通过检测使用者的头部动作，控制显示内容切换、光标或锚点移动等，从而完成视角转换、菜单选择或内容输入等基础的交互操作。然而，基于头部运动检测的交互操作方式，用户操作的复杂度高，操作精度低，无法适用于要求高精度、低时延的交互操作场景中。
技术实现思路
本专利技术的目的是提供一种基于头戴式显示设备的交互方法及装置，配合手持式外设，降低头戴式显示设备使用者进行交互操作的复杂度，提高交互操作效率。有鉴于此，本专利技术一方面提供一种基于头戴式显示设备的交互方法，包括以下步骤：获取全景图像；连接头戴式显示设备与手持式外设，确定所述手持式外设在所述全景图像对应的空间坐标系中的坐标；根据所述手持式外设在所述空间坐标系中的坐标，在所述头戴式显示设备的显示界面中显示所述手持式外设对应的标识。优选地，所述根据所述手持式外设在所述空间坐标系中的坐标，在所述头戴式显示设备的显示界面中显示所述手持式外设对应的标识的步骤之前，还包括：根据所述手持式外设的姿态确定所述手持式外设在所述全景图像上的虚拟投影点。优选地，所述根据所述手持式外设在所述空间坐标系中的坐标，在所述头戴式显示设备的显示界面中显示所述手持式外设对应的标识的步骤，具体为：获取所述手持式外设的虚拟投影点在所述全景图像对应的空间坐标系中的坐标；根据所述头戴式显示设备当前显示界面中显示的全景图像区域对应的坐标区间，判断所述虚拟投影点坐标是否位于所述坐标区间内；若是，在所述头戴式显示设备的显示界面中，显示连接所述手持式外设坐标与所述虚拟投影点坐标的标识线。优选地，所述在所述头戴式显示设备的显示界面中，显示连接所述手持式外设坐标与所述虚拟投影点坐标的标识线的步骤，具体为：当检测到所述手持式外设的第一端指向所述头戴式显示设备当前显示界面中显示的全景图像区域时，在所述头戴式显示设备的显示界面中，显示连接所述手持式外设坐标与所述虚拟投影点坐标的第一标识线；以及，当检测到所述手持式外设的第二端指向所述头戴式显示设备当前显示界面中显示的全景图像区域时，在所述头戴式显示设备的显示界面中，显示连接所述手持式外设坐标与所述虚拟投影点坐标的第二标识线。优选地，所述第一标识线为实线，所述第二标识线为虚线。本专利技术另一方面提供一种基于头戴式显示设备的交互装置，包括：图像获取模块：用于获取全景图像；外设连接模块：用于连接头戴式显示设备与手持式外设；坐标确定模块：用于确定所述手持式外设在所述全景图像对应的空间坐标系中的坐标；标识显示模块：用于根据所述手持式外设在所述空间坐标系中的坐标，在所述头戴式显示设备的显示界面中显示所述手持式外设对应的标识。优选地，所述坐标确定模块，还用于：根据所述手持式外设的姿态确定所述手持式外设在所述全景图像上的虚拟投影点；以及，根据所述手持式外设在所述全景图像上的虚拟投影点，确定所述虚拟投影点在所述空间坐标系中的坐标。优选地，所述标识显示模块，还包括：获取单元：用于获取所述手持式外设的虚拟投影点在所述全景图像对应的空间坐标系中的坐标；判断单元：用于根据头戴式显示设备当前显示界面中显示的全景图像区域对应的坐标区间，判断所述虚拟投影点坐标是否位于所述坐标区间内；显示单元：用于在所述头戴式显示设备的显示界面中，显示连接所述手持式外设坐标与所述虚拟投影点坐标的标识线。优选地，所述显示单元，还用于：当所述手持式外设的第一端指向所述头戴式显示设备当前显示界面中显示的全景图像区域时，在所述头戴式显示设备的显示界面中显示连接所述手持式外设坐标与所述虚拟投影点坐标的第一标识线；以及，当所述手持式外设的第二端指向所述头戴式显示设备当前显示界面中显示的全景图像区域时，在所述头戴式显示设备的显示界面中显示连接所述手持式外设坐标与所述虚拟投影点坐标的第二标识线。本专利技术还提供一种头戴式显示设备，包括上述基于头戴式显示设备的交互装置。本专利技术基于头戴式显示设备的交互方法及装置，将手持式外设与头戴式显示设备连接，通过检测手持式外设的空间姿态，在头戴式显示设备的显示界面中显示对应的标识，从而通过手持式外设与显示界面中的内容进行交互操作。使用者在佩戴头戴式显示设备时，可以便捷地通过持握手持式外设对显示界面中的内容进行交互操作，显著地提升了头戴式显示设备使用者的操作体验。附图说明为了更清楚地说明本专利技术实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本专利技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图：图1示出了本专利技术一个实施例的基于头戴式显示设备的交互方法的流程示意图；图2示出了本专利技术实施例的头戴式显示设备的第一种交互界面的示意图；图3示出了本专利技术实施例的头戴式显示设备的第二种交互界面的示意图；图4示出了本专利技术一个实施例的基于头戴式显示设备的交互装置的结构示意图；图5示出了本专利技术实施例的基于头戴式显示设备的交互装置的标识显示模块的结构示意图。具体实施方式为了能够更清楚地理解本专利技术的目的、特征和优点，下面结合附图和具体实施方式对本专利技术做进一步的详细描述。需要说明的是，在不冲突的情况下，本申请的实施例及实施例中的特征可以相互结合。在下面的描述中阐述了很多具体细节以便于充分理解本专利技术，但是，这仅仅是本专利技术的一些实施例，本专利技术还可以采用其他不同于在此描述的其他方式来实施，因此，本专利技术的保护范围并不受下面公开的具体实施例的限制。实施例一图1示出了本专利技术一个实施例的基于头戴式显示设备的交互方法的流程示意图。根据本专利技术实施例的基于头戴式显示设备的交互方法，如图1所示，包括：步骤S101，获取全景图像；步骤S102，连接头戴式显示设备与手持式外设，确定所述手持式外设在所述全景图像对应的空间坐标系中的坐标；步骤S103，根据所述手持式外设在所述空间坐标系中的坐标，在所述头戴式显示设备的显示界面中显示所述手持式外设对应的标识。在上述技术方案中，头戴式显示设备可以向使用者呈现虚拟的360°全景图像，使用者佩戴头戴式显示设备时，通过头戴式显示设备的显示屏幕，使用者在某一时刻能够看到屏幕显示区域中显示的虚拟全景图像的部分区域，屏幕显示区域中显示的虚拟全景图像的部分区域经头戴式显示设备的光学系统放大后，与人类的自然视野范围相同或近似，从而令使用者感受身处虚拟场景环境的真实感。使用者通过控制指令可以控制显示屏幕中显示虚拟全景图像中的不同区域，从而浏览完整的虚拟全景图像，例如，使用者转动头部，根据使用者头部的转动方向与转动角度，调整显示屏幕中显示的虚拟全景图像的区域，结合听觉、触觉、动作等方面的交互体验，带给使用者置身虚拟环境中的沉浸感。在上本文档来自技高网...

【技术保护点】
1.一种基于头戴式显示设备的交互方法，其特征在于，包括以下步骤：获取全景图像；连接头戴式显示设备与手持式外设，确定所述手持式外设在所述全景图像对应的空间坐标系中的坐标；根据所述手持式外设在所述空间坐标系中的坐标，在所述头戴式显示设备的显示界面中显示所述手持式外设对应的标识。

【技术特征摘要】
1.一种基于头戴式显示设备的交互方法，其特征在于，包括以下步骤：获取全景图像；连接头戴式显示设备与手持式外设，确定所述手持式外设在所述全景图像对应的空间坐标系中的坐标；根据所述手持式外设在所述空间坐标系中的坐标，在所述头戴式显示设备的显示界面中显示所述手持式外设对应的标识。2.根据权利要求1所述的基于头戴式显示设备的交互方法，其特征在于，所述根据所述手持式外设在所述空间坐标系中的坐标，在所述头戴式显示设备的显示界面中显示所述手持式外设对应的标识的步骤之前，还包括：根据所述手持式外设的姿态确定所述手持式外设在所述全景图像上的虚拟投影点。3.根据权利要求2所述的基于头戴式显示设备的交互方法，其特征在于，所述根据所述手持式外设在所述空间坐标系中的坐标，在所述头戴式显示设备的显示界面中显示所述手持式外设对应的标识的步骤，具体为：获取所述手持式外设的虚拟投影点在所述全景图像对应的空间坐标系中的坐标；根据所述头戴式显示设备当前显示界面中显示的全景图像区域对应的坐标区间，判断所述虚拟投影点坐标是否位于所述坐标区间内；若是，在所述头戴式显示设备的显示界面中，显示连接所述手持式外设坐标与所述虚拟投影点坐标的标识线。4.根据权利要求3所述的基于头戴式显示设备的交互方法，其特征在于，所述在所述头戴式显示设备的显示界面中，显示连接所述手持式外设坐标与所述虚拟投影点坐标的标识线的步骤，具体为：当检测到所述手持式外设的第一端指向所述头戴式显示设备当前显示界面中显示的全景图像区域时，在所述头戴式显示设备的显示界面中，显示连接所述手持式外设坐标与所述虚拟投影点坐标的第一标识线；以及，当检测到所述手持式外设的第二端指向所述头戴式显示设备当前显示界面中显示的全景图像区域时，在所述头戴式显示设备的显示界面中，显示连接所述手持式外设坐标与所述虚拟投影点坐标的第二标识线。5.根据权利要求4所述的基于头戴式显示设备的交互方...

【专利技术属性】
技术研发人员：徐梦瑶，
申请(专利权)人：成都虚拟世界科技有限公司，
类型：发明
国别省市：四川,51