用于与头戴显示设备进行交互的方法、装置和交互系统制造方法及图纸

本公开实施例公开了一种用于与头戴显示设备进行交互的方法、装置和交互系统，其中，该方法包括：响应于检测到穿戴有头戴显示设备的用户进行了预设的操纵杆模式手势动作，激活操纵杆模式；在激活操纵杆模式的状态下，基于用户的手部位置和头戴显示设备的显示画面的位置中的至少一种确定虚拟操纵杆坐标系的原点位置，并基于虚拟操纵杆坐标系的原点位置确定虚拟操纵杆坐标系；基于用户的目标手部在虚拟操纵杆坐标系的投影，确定虚拟操纵杆的输入键值。本公开实施例可以在没有配备真实操纵杆的情况下对头戴显示设备进行操纵杆操作，提升用户体验。户体验。户体验。

【技术实现步骤摘要】
用于与头戴显示设备进行交互的方法、装置和交互系统


[0001]本公开涉及虚拟现实
，尤其是一种用于与头戴显示设备进行交互的方法、装置和交互系统。

技术介绍

[0002]在虚拟现实(Virtual Reality，VR)、增强现实(Augmented Reality，AR)、混合现实(Mixed Reality，MR)，或扩展显示等场景中，终端通过构建虚拟环境给用户提供可交互的沉浸式体验。
[0003]在一些与头戴显示设备进行交互场景中，通常需要通过操纵杆与头戴显示设备进行交互，但是一些头戴显示设备并未配备操纵杆。如何没有配备操纵杆的情况下实现对头戴显示设备的操纵杆操作，是一种亟待解决的问题。

技术实现思路

[0004]为了解决上述技术问题，提出了本公开。本公开的实施例提供了一种用于与头戴显示设备进行交互的方法、装置和交互系统。
[0005]根据本公开实施例的第一方面，提供了一种用于与头戴显示设备进行交互的方法，包括：
[0006]响应于检测到穿戴有头戴显示设备的用户进行了预设手势动作，激活操纵杆模式；
[0007]在激活操纵杆模式的状态下，基于用户的手部位置和头戴显示设备的显示画面的位置中的至少一种确定虚拟操纵杆坐标系的原点位置，并基于虚拟操纵杆坐标系的原点位置确定虚拟操纵杆坐标系；
[0008]基于用户的目标手部在虚拟操纵杆坐标系的投影，确定虚拟操纵杆的输入键值。
[0009]根据本公开实施例的第二方面，提供了一种用于与头戴显示设备进行交互的装置，包括：
[0010]操纵杆模式激活模块，用于当检测到用户进行了预设手势动作，激活操纵杆模式；
[0011]虚拟操纵杆坐标系确定模块，用于在激活操纵杆模式的状态下，基于用户的手部位置和头戴显示设备的显示画面的位置中的至少一种确定虚拟操纵杆坐标系的原点位置，并基于虚拟操纵杆坐标系的原点位置确定虚拟操纵杆坐标系；
[0012]输入键值确定模块，用于基于用户的目标手部在虚拟操纵杆坐标系的投影，确定虚拟操纵杆的输入键值。
[0013]根据本公开实施例的第三方面，提供了一种计算机可读存储介质，计算机可读存储介质存储有计算机程序，该计算机程序用于执行上述第一方面的用于与头戴显示设备进行交互的方法。
[0014]根据本公开实施例的第四方面，提供了一种电子设备，电子设备包括：
[0015]处理器；
[0016]用于存储处理器可执行指令的存储器；
[0017]处理器，用于从存储器中读取可执行指令，并执行指令以实现上述第一方面的用于与头戴显示设备进行交互的方法。
[0018]下面通过附图和实施例，对本公开的技术方案做进一步的详细描述。
附图说明
[0019]通过结合附图对本公开实施例进行更详细的描述，本公开的上述以及其他目的、特征和优势将变得更加明显。附图用来提供对本公开实施例的进一步理解，并且构成说明书的一部分，与本公开实施例一起用于解释本公开，并不构成对本公开的限制。在附图中，相同的参考标号通常代表相同部件或步骤。
[0020]图1是可以应用于本公开的用于与头戴显示设备进行交互的方法或装置的实施例的示例性系统架构图；
[0021]图2是本公开一个实施例中用于与头戴显示设备进行交互的方法的流程示意图；
[0022]图3是本公开一个实施例中步骤S4的流程示意图；
[0023]图4是本公开另一个实施例中步骤S4的流程示意图；
[0024]图5是本公开一个实施例中步骤S6的流程示意图；
[0025]图6是本公开一个示例中基于输入值进行归一化处理的示意图；
[0026]图7是本公开一个示例中控制虚拟手柄或虚拟操纵杆的手势动作的示意图；
[0027]图8是本公开一个实施例中用于与头戴显示设备进行交互的装置的结构框图；
[0028]图9是本公开一个实施例中电子设备的结构框图。
具体实施方式
[0029]下面，将参考附图详细地描述根据本公开的示例实施例。显然，所描述的实施例仅仅是本公开的一部分实施例，而不是本公开的全部实施例，应理解，本公开不受这里描述的示例实施例的限制。
[0030]应注意到：除非另外具体说明，否则在这些实施例中阐述的部件和步骤的相对布置、数字表达式和数值不限制本公开的范围。
[0031]本领域技术人员可以理解，本公开实施例中的“第一”、“第二”等术语仅用于区别不同步骤、设备或模块等，既不代表任何特定技术含义，也不表示它们之间的必然逻辑顺序。
[0032]还应理解，在本公开实施例中，“多个”可以指两个或两个以上，“至少一个”可以指一个、两个或两个以上。
[0033]还应理解，对于本公开实施例中提及的任一部件、数据或结构，在没有明确限定或者在前后文给出相反启示的情况下，一般可以理解为一个或多个。
[0034]另外，本公开中术语“和/或”，仅仅是一种描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。另外，本公开中字符“/”，一般表示前后关联对象是一种“或”的关系。
[0035]还应理解，本公开对各个实施例的描述着重强调各个实施例之间的不同之处，其相同或相似之处可以相互参考，为了简洁，不再一一赘述。
[0036]以下对至少一个示例性实施例的描述实际上仅仅是说明性的，决不作为对本公开及其应用或使用的任何限制。
[0037]对于相关领域普通技术人员已知的技术、方法和设备可能不作详细讨论，但在适当情况下，所述技术、方法和设备应当被视为说明书的一部分。
[0038]应注意到：相似的标号和字母在下面的附图中表示类似项，因此，一旦某一项在一个附图中被定义，则在随后的附图中不需要对其进行进一步讨论。
[0039]本公开实施例可以应用于终端设备、计算机系统、服务器等电子设备，其可与众多其它通用或专用计算系统环境或配置一起操作。适于与终端设备、计算机系统、服务器等电子设备一起使用的众所周知的终端设备、计算系统、环境和/或配置的例子包括但不限于：个人计算机系统、服务器计算机系统、瘦客户机、厚客户机、手持或膝上设备、基于微处理器的系统、机顶盒、可编程消费电子产品、网络个人电脑、小型计算机系统、大型计算机系统和包括上述任何系统的分布式云计算技术环境，等等。
[0040]终端设备、计算机系统、服务器等电子设备可以在由计算机系统执行的计算机系统可执行指令(诸如程序模块)的一般语境下描述。通常，程序模块可以包括例程、程序、目标程序、组件、逻辑、数据结构等等，它们执行特定的任务或者实现特定的抽象数据类型。计算机系统/服务器可以在分布式云计算环境中实施，分布式云计算环境中，任务是由通过通信网络链接的远程处理设备执行的。在分布式云计算环境中，程序模块可以位于包括存储设备的本地或远程计算系统存储介质上。
[0041]图1是可以应用于本公开的用于与头戴显示本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种用于与头戴显示设备进行交互的方法，包括：响应于检测到穿戴有所述头戴显示设备的用户进行了预设的操纵杆模式手势动作，激活操纵杆模式；在激活所述操纵杆模式的状态下，基于所述用户的手部位置和所述头戴显示设备的显示画面的位置中的至少一种确定虚拟操纵杆坐标系的原点位置，并基于所述虚拟操纵杆坐标系的原点位置确定所述虚拟操纵杆坐标系；基于所述用户的目标手部在所述虚拟操纵杆坐标系的投影，确定虚拟操纵杆的输入键值。2.根据权利要求1所述的方法，其中，所述基于所述用户的手部位置和显示画面的位置中的至少一种确定虚拟操纵杆坐标系的原点位置，并基于所述虚拟操纵杆坐标系的原点位置确定所述虚拟操纵杆坐标系，包括：基于激活所述操纵杆模式时所述用户的手指关节位置，确定所述虚拟操纵杆坐标系的原点位置；将经过所述原点位置、且与所述头戴显示设备的坐标系的第一坐标轴平行的方向确定为所述虚拟操纵杆坐标系的第一坐标轴方向，并将经过所述原点位置、且与所述头戴显示设备的坐标系的第二坐标轴平行的方向确定为所述虚拟操纵杆坐标系的第二坐标轴方向。3.根据权利要求1所述的方法，其中，所述基于所述用户的手部位置和显示画面的位置中的至少一种确定虚拟操纵杆坐标系的原点位置，并基于所述虚拟操纵杆坐标系的原点位置确定所述虚拟操纵杆坐标系，包括：基于所述显示画面的一个预设显示平面中的预设位置，确定为所述虚拟操纵杆坐标系的原点位置；将所述预设显示平面的第一预设方向确定为所述虚拟操纵杆坐标系的第一坐标轴方向，并将所述预设显示平面的第二预设方向确定为所述虚拟操纵杆坐标系的第二坐标轴方向。4.根据权利要求1
‑
3任一项所述的方法，其中，所述基于所述用户的目标手部在所述虚拟操纵杆坐标系的投影，确定虚拟操纵杆的输入键值，包括：获取所述目标手部的目标手指在所述虚拟操纵杆坐标系的正交投影坐标；对所述正交投影坐标进行归一化处理，确定所述虚拟操纵杆的输入键值。5.根据权利要求4所述的方法，其中，所述对所述正交投影坐标进行归一化处理，确定虚拟操纵杆的输入键值，包括：基于所述虚拟操纵杆坐标系的预设最小坐标绝对值、预设数值处理宽度和预设过冲系数，对所述正交投影坐标进行归一化处理，确定所述虚拟操纵杆的输入键值，所述预设最小坐标绝对值为所述正交投影坐标的坐标值。6.根据权利要求5所述的方法，其中，所述基于所述虚拟操纵杆坐标系的预设最小坐标绝对值、预设数值处理宽度和预设过冲系数，对所述正交投影坐标进行归一化处理，确定所述虚拟操纵杆的输入键值，包括：基于所述正交投影坐标确定输入值；基于所述预设最小坐标绝对值确定第一数值处理范围，并基于所述预设最小坐标绝对值和所述预设数值处理宽度确定第二数值处理范围，并基于所述预设最小坐标绝对值、所
述预设数值处理宽度和所述预设过充系数确定第三数值处理范围，其中，所述第一数值范围的最大数值边界小于所述第二数值范围的最大数值边界，且所述第一数值范围的最小数值边界大于所述第二数值范围的最小数值边界，所述第二数值范围的最大数值边界小于所述第三数值范围的最大数值边界，且所述第二数值范围的最小数值边界大于所述第三数值范围的最小数值边界；若所述输入值位于所述第一数值处理范围内，确定所述输入键值为0；若所述输入值位...

【专利技术属性】
技术研发人员：吴维，
申请(专利权)人：闪耀现实无锡科技有限公司，
类型：发明
国别省市：