【技术实现步骤摘要】
人机交互方法及装置、存储介质及电子设备
[0001]本公开涉及混合现实
，尤其涉及一种人机交互方法及装置、存储介质及电子设备。
技术介绍
[0002]交互问题是MR(Mix reality，混合现实)发展过程中亟需解决的核心问题之一，传统的解决方案大都选择配备手柄控制器，手柄的出现确实能够一定程度解决MR设备的交互问题，但是手柄也会束缚住用户的双手，长时间的握持体验也不是很友好。
[0003]目前也有采用手势交互的方案，但这种方案大多采用手臂伸直点击的方式，长时间操作会由于手臂伸直带来疲劳甚至肌肉拉伤的问题。
[0004]需要说明的是，在上述
技术介绍
部分公开的信息仅用于加强对本公开的背景的理解，因此可以包括不构成对本领域普通技术人员已知的现有技术的信息。
技术实现思路
[0005]本公开提供一种人机交互方法及装置、存储介质及电子设备，至少在一定程度上克服由于相关技术的人机交互疲劳及肌肉拉伤的问题。
[0006]本公开的其他特性和优点将通过下面的详细描述变得显然，或部分地通过本公开
【技术保护点】
【技术特征摘要】
1.一种人机交互方法，其特征在于，包括：基于环境图像数据，在环境中渲染虚拟对象；根据手部图像数据，确定手指捏合交互手势；根据所述手指捏合交互手势对所述虚拟对象的交互操作，渲染所述虚拟对象的交互操作结果。2.根据权利要求1所述的人机交互方法，其特征在于，根据手部图像数据，确定手指捏合交互手势，包括：根据手部图像数据，识别用户手掌的用户手指；将所述用户手指中的拇指与其他手指中的一个手指或多个手指的捏合动作，确定为手指捏合交互手势；所述捏合动作为所述拇指的指腹与其他手指的指腹的距离从设定捏合阈值到指腹贴合的过程。3.根据权利要求2所述的人机交互方法，其特征在于，还包括：根据眼动信息，在所述虚拟对象上渲染虚拟光标，所述虚拟光标随着所述眼动信息中的用户视线移动。4.根据权利要求3所述的人机交互方法，其特征在于，根据眼动信息，在所述虚拟对象上渲染虚拟光标，包括：根据眼动信息中的用户视线，确定以用户眼睛为起点以所述用户视线为方向的第一射线；将所述第一射线在所述虚拟对象表面的抵达位置处渲染虚拟光标。5.根据权利要求3所述的人机交互方法，其特征在于，还包括：若所述虚拟对象与用户眼睛的距离大于设定远场交互阈值，则在所述环境中渲染投射光线，所述投射光线的起点为用户周围的预设位置，所述投射光线的终点为所述虚拟光标，所述投射光线用于通过所述手指捏合交互手势对大于设定远场交互阈值的所述虚拟对象进行交互操作。6.根据权利要求4所述的人机交互方法，其特征在于，还包括：根据眼动信息中的单位时间眨眼频率，确定所述第一射线是否显示，在确定所述第一射线不显示时，所述虚拟光标保持显示。7.根据权利要求3所述的人机交互方法，其特征在于，根据所述手指捏合交互手势对所述虚拟对象的交互操作，渲染所述虚拟对象的交互操作结果，包括：响应于所述虚拟光标选中所述虚拟对象，将所述虚拟对象转换为激活状态；响应于所述手指捏合交互手势对所述激活状态的虚拟对象的交互操作，渲染所述虚拟对象的交互操作结果。8.根据权利要求7所述的人机交互方法，其特征在于，所述交互操作，包括对所述虚拟对象捏合后结合拖拽动作实现的复合动作；对所述虚拟对象捏合，包括：对所述虚拟对象本身捏合或对包裹所述虚拟对象的控件工具捏合；所述复合动作，至少包括如下一种或多种的组合：翻页，拖动，旋转，缩放。9.根据权利要求7所述的人机交互方法，其特征在于，在所述交互操作过程中，若所述虚拟对象与用户眼睛的距离超过设定距离阈值，则根据所述虚拟对象与用户眼睛的距离调整所述虚拟光标...
【专利技术属性】
技术研发人员：王龙辉，苗京花，李茜，王雪丰，
申请(专利权)人：北京京东方显示技术有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。