一种增强现实中眼手协同三维操控方法技术

本公开的实施例公开了一种增强现实中眼手协同三维操控方法。该方法的一具体实施方式包括：计算初始通用眼动参数，以及对新用户执行隐式校准以获取用户瞳孔坐标原点，计算用户注视点；采集三维交互空间中的隐式校准样本点，使用最新的样本点集和初始收集的通用校准数据集代入眼动估计模型；用户通过捏合手势控制指示器越过遮挡物，用户释放手势，则会选中一定范围内离指示器最近的物体；用户先通过捏合手势调整视线方向对齐想要放置物体的目标位置，释放手势后，视线方向固定，然后用户再次保持捏合手势控制物体沿着固定的视线方向移动到目标位置，释放手势。该实施方式可以有效解决遮挡问题，不需要多次重复操作移开遮挡物，提高了交互效率。提高了交互效率。提高了交互效率。

【技术实现步骤摘要】
一种增强现实中眼手协同三维操控方法


[0001]本公开的实施例涉及计算机
，具体涉及一种增强现实中眼手协同三维操控方法。

技术介绍

[0002]近些年随着增强现实领域的不断发展，基于眼动的人机交互受到国内外越来越多的关注，且在各领域有着非常好的应用前景。视线作为揭示人理解外界环境方式的重要线索，大脑中接收的信息中有80％以上来自我们的眼睛，眼睛凝视的位置直观地表明了用户感兴趣的地方。眼动快速自然且不费力，但也有它的局限性。眼动交互常常因为眼动追踪精度不足以及“Midas Touch”问题而造成准确性低，而手势是一个自然精细但稍微有点费力的交互方式，眼睛和手的结合也是我们日常生活中和周围物体互动的核心，将两种交互方式结合在一起通过互补可以带来更加自然准确的交互体验。
[0003]增强现实环境中的眼动与手势融合的多模态交互已经经过了多年的长足发展并应用到了各种领域，面对各种场景有着很多的探索与研究。但是其中的AR环境多是不复杂无遮挡的开阔环境，鲜有在部分遮挡甚至完全遮挡环境下利用眼动线索引导如何进行高效的三维物体操控问题的讨论，尚不能本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种增强现实中眼手协同三维操控方法，包括：对多名用户进行九点显式校准收集校准样本数据集计算初始通用眼动参数，以及对新用户执行隐式校准以获取用户瞳孔坐标原点，计算用户注视点；利用眼手协同交互线索，采集三维交互空间中的隐式校准样本点，使用最新的样本点集和初始收集的通用校准数据集代入眼动估计模型，在线对用户的眼动参数实时更新；用户通过捏合手势控制指示器越过遮挡物，使遮挡物变得透明从而显示出被遮挡的目标物体，用户释放手势，则会选中一定范围内离指示器最近的物体；用户先通过捏合手势调整视线方向对齐想要放置物体的目标位置，此时视线方向以白色光束形式展现，释放手势后，视线方向固定，然后用户再次保持捏合手势控制物体沿着固定的视线方向移动到目标位置，释放手势。2.根据权利要求1所述的方法，其中，所述对多名用户进行九点显式校准收集校准样本数据集计算初始通用眼动参数，以及对新用户执行隐式校准以获取用户瞳孔坐标原点，计算用户注视点，包括：对n名用户通过九点显式校准方法收集了每名用户的校准样本组成通用校准数据集，每条数据包括用户的瞳孔中心坐标和校准点位置，当每名用户看向屏幕中心坐标时，用户此时的瞳孔坐标为坐标原点，瞳孔中心坐标是用户看向屏幕任意点时的瞳孔坐标与该原点的相对值；对新用户的隐式校准是将屏幕中心点作为校准点引入到了用户交互中；将通用数据集和隐式校准点代入眼动校准参数计算模型得到参数解，用该参数初始化眼动算法。3.根据权利要求1所述的方法，其中，所述利用眼手协同交互线索，采集三维交互空间...

【专利技术属性】
技术研发人员：陆峰，王嘉茜，鲍屹伟，
申请(专利权)人：北京航空航天大学，
类型：发明
国别省市：