一种人机交互方法、装置、设备和存储介质制造方法及图纸

本申请实施例提供了一种人机交互方法、装置、设备和存储介质。该方法包括：响应于检测到的目标手势，在虚拟空间内呈现待交互界面的选中特效；根据所述目标手势的关联运动，控制所述待交互界面在所述虚拟空间内执行对应的交互操作；其中，所述目标手势包括双手框选手势和单手捏合手势中的其中一种。本申请实施例可以实现虚拟空间内任一空间界面的便捷交互，增强虚拟空间内的交互多样性和趣味性，提升虚拟空间内的交互氛围。空间内的交互氛围。空间内的交互氛围。

【技术实现步骤摘要】
一种人机交互方法、装置、设备和存储介质


[0001]本申请实施例涉及扩展现实(Extended Reality，XR)
，尤其涉及一种人机交互方法、装置、设备和存储介质。

技术介绍

[0002]目前，XR技术的应用场景越来越广泛了，具体包含虚拟现实(Virtual Reality，简称为VR)、增强现实(Augmented Reality，简称为AR)和混合现实(Mixed Reality，简称为MR)等。在虚拟场景下会存在多个空间界面，用户可以在各个空间界面上进行相应交互，来沉浸式体验真实的虚拟场景。
[0003]通常情况下，用户通过在虚拟空间内发出一条指向性的虚拟射线，来与远距离下的各个空间界面进行交互，使得虚拟场景下的交互效果比较单一，缺乏一定的交互趣味性。

技术实现思路

[0004]本申请实施例提供一种人机交互方法、装置、设备和存储介质，实现虚拟空间内任一空间界面的便捷交互，增强虚拟空间内的交互多样性和趣味性。
[0005]第一方面，本申请实施例提供了一种人机交互方法，应用于XR设备，该方法包括：
[0006]响应于检测到的目标手势，在虚拟空间内呈现待交互界面的选中特效；
[0007]根据所述目标手势的关联运动，控制所述待交互界面在所述虚拟空间内执行对应的交互操作；
[0008]其中，所述目标手势包括双手框选手势和单手捏合手势中的其中一种。
[0009]第二方面，本申请实施例提供了一种人机交互装置，配置于XR设备，该装置包括：
[0010]界面选中模块，用于响应于检测到的目标手势，在虚拟空间内呈现待交互界面的选中特效；
[0011]界面交互模块，用于根据所述目标手势的关联运动，控制所述待交互界面在所述虚拟空间内执行对应的交互操作；
[0012]其中，所述目标手势包括双手框选手势和单手捏合手势中的其中一种。
[0013]第三方面，本申请实施例提供了一种电子设备，该电子设备包括：
[0014]处理器和存储器，该存储器用于存储计算机程序，该处理器用于调用并运行该存储器中存储的计算机程序，以执行本申请第一方面中提供的人机交互方法。
[0015]第四方面，本申请实施例提供了一种计算机可读存储介质，用于存储计算机程序，该计算机程序使得计算机执行如本申请第一方面中提供的人机交互方法。
[0016]第五方面，本申请实施例提供了一种计算机程序产品，包括计算机程序/指令，该计算机程序/指令使得计算机执行如本申请第一方面中提供的人机交互方法。
[0017]通过本申请技术方案，进入虚拟空间后会实时检测目标手势，该目标手势可以包括双手框选手势和单手捏合手势中的其中一种。响应于检测到的目标手势，会在虚拟空间内呈现待交互界面的选中特效。然后，实时检测目标手势执行的关联运动，以此控制待交互
界面在虚拟空间内执行对应的交互操作，从而实现虚拟空间内任一空间界面的便捷交互，增强虚拟空间内的交互多样性和趣味性，提升虚拟空间内的交互氛围。
附图说明
[0018]为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
[0019]图1为本申请实施例提供的一种人机交互方法的流程图；
[0020]图2为本申请实施例提供的双手框选手势的示例性示意图；
[0021]图3为本申请实施例提供的另一种人机交互方法的流程图；
[0022]图4a为本申请实施例提供的通过双手框选手势确定待交互界面的示例性示意图；
[0023]图4b为本申请实施例提供的在双手框选手势对应的双手框选区域内呈现待交互界面的界面分身的示例性示意图；
[0024]图4c为本申请实施例提供的双手框选手势中的双手发生交叠的示例性示意图；
[0025]图5a为本申请实施例提供的单手捏合手势的一种示例性示意图；
[0026]图5b为本申请实施例提供的单手捏合手势的另一种示例性示意图；
[0027]图6为本申请实施例提供的通过单手捏合手势呈现待交互界面的选中特效的示例性示意图；
[0028]图7a为本申请实施例提供的通过第二类单手捏合手势唤出待交互界面的快捷功能面板的示例性示意图；
[0029]图7b为本申请实施例提供的第二类单手捏合手势对于快捷功能面板内任一功能控件的滑动选中操作的示例性示意图；
[0030]图8为本申请实施例提供的一种人机交互装置的示意图；
[0031]图9为本申请实施例提供的电子设备的示意性框图。
具体实施方式
[0032]下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都属于本申请保护的范围。
[0033]需要说明的是，本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或服务器不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
[0034]本申请实施例中，“示例性的”或者“例如”等词用于表示作例子、例证或说明，本申
请实施例中被描述为“示例性的”或者“例如”的任何实施例或方案不应被解释为比其它实施例或方案更优选或更具优势。确切而言，使用“示例性的”或者“例如”等词旨在以具体方式呈现相关概念。
[0035]为了解决虚拟空间内通过虚拟射线与各个空间界面交互时交互效果较为单一的问题，本申请的专利技术构思是：针对虚拟空间内的空间界面交互，预先设定对应的目标手势，该目标手势可以包括双手框选手势和单手捏合手势中的其中一种，符合真实场景下的用户手势操作习惯。在虚拟空间内通过实时检测目标手势和目标手势的关联运动，来控制待交互界面在虚拟空间内执行对应的交互操作，从而实现虚拟空间内任一空间界面的便捷交互，增强虚拟空间内的交互多样性和趣味性。
[0036]图1为本申请实施例提供的一种人机交互方法的流程图，该方法可以应用于XR设备中，但不限于此。该方法可以由本申请提供的人机交互装置来执行，其中，人机交互装置可以通过任意的软件和/或硬件的方式实现。示例性地，人机交互装置可配置于AR/VR/MR等能够模拟虚拟场景的电子设备，本申请对电子设备的具体类型不作任何限制。
[0037]具体的，本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种人机交互方法，其特征在于，应用于扩展现实XR设备，所述方法包括：响应于检测到的目标手势，在虚拟空间内呈现待交互界面的选中特效；根据所述目标手势的关联运动，控制所述待交互界面在所述虚拟空间内执行对应的交互操作；其中，所述目标手势包括双手框选手势和单手捏合手势中的其中一种。2.根据权利要求1所述的方法，其特征在于，如果所述目标手势为双手框选手势，则所述在虚拟空间内呈现待交互界面的选中特效，包括：根据所述双手框选手势中的双手位姿和用户头部位姿，确定虚拟空间内的待交互界面和双手框选区域；在所述双手框选区域内呈现所述待交互界面的选中特效。3.根据权利要求2所述的方法，其特征在于，所述在所述双手框选区域内呈现所述待交互界面的选中特效，包括：确定所述双手框选手势的静态持续时长；如果所述静态持续时长小于预设持续阈值，则在所述双手框选区域内呈现所述待交互界面的界面分身，并调整所述待交互界面的透明度；如果所述静态持续时长大于等于所述预设持续阈值，则将所述待交互界面吸附到所述双手框选区域内而呈现。4.根据权利要求2所述的方法，其特征在于，所述根据所述目标手势的关联运动，控制所述待交互界面在所述虚拟空间内执行对应的交互操作，包括：响应于所述双手框选手势对应的双手相向运动，在所述双手框选区域呈现所述待交互界面的虚拟缩放特效；当所述双手框选手势中的双手发生交叠时，控制所述待交互界面执行对应的最小化操作或关闭操作。5.根据权利要求1所述的方法，其特征在于，如果所述目标手势为双手框选手势，所述方法还包括：响应于所述双手框选手势中任一单手的翻转操作，控制所述待交互界面返回到未交互状态。6.根据权利要求1所述的方法，其特征在于，如果所述目标手势为单手捏合手势，则所述在虚拟空间内呈现待交互界面的选中特效，包括：根据所述单手捏合手势发出的虚拟射线，确定虚拟空间内的待交互界面；在所述虚拟空间内呈现所述待交互界面的选中特效。7.根据权利要求1所述的方法，其特征在于，所述单手捏合手势按照手势朝向分为第一类单手捏合手势和第二类单手捏合手势。8.根据权利要求7所述的方法，其特征在于，如果所述目标手势为第一类单手捏合手势，则所述根据所述目标手势的...

【专利技术属性】
技术研发人员：刘静薇，刘硕，
申请(专利权)人：北京字跳网络技术有限公司，
类型：发明
国别省市：