一种基于混合现实技术的虚拟物体交互方法技术

本发明专利技术涉及一种基于混合现实技术的虚拟物体交互方法，采用面向对象的菜单界面作为交互操作选择界面，包括步骤：(1)选择交互对象：采用眼动追踪方法获得用户当前凝视点；采用手势识别方法识别用户特定手势预定手势；使用主要交互手做出并保持特定手势预定手势，用于选择该虚拟物体作为交互对象；(2)进入菜单界面：使用未做出任意特定手势预定手势的次要交互手做出特定手势预定手势；(3)选择交互操作：通过移动主要交互手位置或改变主要交互手姿态，选择菜单界面中目标操作所对应的菜单选项；(4)进入操作界面：用户使用次要交互手做出特定手势预定手势，或使用主要交互手在相反方向上进行移动达到阈值，进入操作界面；步骤(5)完成交互操作。成交互操作。成交互操作。

【技术实现步骤摘要】
一种基于混合现实技术的虚拟物体交互方法


[0001]本专利技术涉及计算机图形交互
，尤其是一种基于混合现实技术的虚拟物体交互方法。

技术介绍

[0002]混合现实：混合现实技术(Mixed Reality)是虚拟现实技术的进一步发展，该技术通过在虚拟环境中引入现实场景信息，在虚拟世界、现实世界和用户之间搭起一个交互反馈的信息回路，以增强用户体验的真实感。
[0003]混合现实技术通过将计算机生成的虚拟信息叠加到真实场景中的方式，把物理世界与数字世界联系在一起。常见的混合现实设备包括智能手机、智能眼镜、混合现实头戴式显示器等。用户可以通过使用这些设备实现与虚拟物体或虚拟场景的直接交互。例如，用户可以做出预定手势的方式选择目标物体，并通过改变手部姿态的方式对目标物体执行旋转、平移、缩放等交互操作。
[0004]随着混合现实交互应用的增加，同一种手势或手部姿态在相同应用场景中可以表示的操作类型也在增多，用户在与虚拟物体进行交互时需要对当前所要执行的操作进行选择。混合现实菜单界面是一种常见的操作选择方式。现有的混合现实菜单界面主要本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于混合现实技术的虚拟物体交互方法，采用面向对象的菜单界面作为交互操作选择界面，菜单界面包括菜单选项和选择提示，其特征在于，该交互方法包括步骤：步骤(1)选择交互对象：采用眼动追踪方法获得用户当前凝视点；采用手势识别方法识别用户预定手势；当用户当前凝视点停留于虚拟物体上时，用户需选择任意一只手作为主要交互手，选择另一只手作为次要交互手，使用主要交互手做出并保持预定手势，用于选择该虚拟物体作为交互对象；步骤(2)进入菜单界面：保持选择虚拟物体状态，使用未做出预定手势的次要交互手做出预定手势；或使用主要交互手在用户所面向方向上进行移动使得移动距离达到阈值，进入选择菜单界面；步骤(3)选择交互操作：保持操作选择界面显示状态，通过移动主要交互手位置或改变主要交互手姿态，选择菜单界面中目标操作所对应的菜单选项；通过菜单界面中的选择提示确认已选择的交互操作；步骤(4)进入操作界面：与步骤(2)进入菜单界面相似地，用户使用未做出任意预定手势的次要交互手做出预定手势，或使用主要交互手在步骤(2)中移动方向的相反方向上进行移动达到阈值，进入操作界面；步骤(5)完成交互操作：保持选择虚拟物体状态，移动主要交互手位置或改变主要交互手姿态，执行交互操作；操作执行的程度与主要交互手位置或姿态改变的幅度存在映射关系；对于仅包含单一操作的交互任务，在操作达到用户预期目标后，解除主要交互手预定手势，完成交互操作；对于包含多个不同操作的交互任务，在当前操作...

【专利技术属性】
技术研发人员：沈旭昆，卢亚光，胡勇，
申请(专利权)人：北京航空航天大学，
类型：发明
国别省市：