System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 人眼注视区域的检测方法、装置及头戴增强现实设备制造方法及图纸_技高网

人眼注视区域的检测方法、装置及头戴增强现实设备制造方法及图纸

技术编号:40131568 阅读:5 留言:0更新日期:2024-01-23 22:13
本申请公开了一种人眼注视区域的检测方法、装置及头戴增强现实设备。该方法应用于头戴增强现实设备,其中,头戴增强现实设备包括多个光源,至少一个光源的形状和其他光源的形状不相同。该方法包括:获取人眼图像;基于人眼图像,确定亮斑的形状信息;基于亮斑的形状信息,确定亮斑与光源之间的对应关系;基于亮斑与光源之间的对应关系,确定人眼注视区域。本方法通过确定出亮斑的形状信息,即使在人眼图像中亮斑缺失的情况下,头戴增强现实设备基于光源的形状信息,能够快速且准确地确定出亮斑和光源之间的对应关系,正确的亮斑和光源的对应关系可以保证人眼注视区域确定的准确性,使得用户的使用体验极佳。

【技术实现步骤摘要】

本申请涉及增强现实,更具体地,涉及一种人眼注视区域的检测方法、装置及头戴增强现实设备


技术介绍

1、眼动追踪技术被广泛应用在头戴增强现实设备中,其可以实现眼动交互、眼动渲染等功能。

2、相关技术提供的眼动追踪技术具体如下:头戴增强现实设备的指定表面设置有红外光源,当用户佩戴头戴式显示装置时,红外光源处于发光状态,此时头戴显示装置中的近眼相机采集包含红外亮斑的人眼图像,进而确定出红外光源与红外亮斑的对应关系,即可求解用户的人眼注视区域。

3、其中,确定红外光源与红外亮斑的对应关系的方案如下:头戴增强现实设备通过亮斑提取算法提取人眼图像中的亮斑,之后以最亮的亮斑为起点,假设多种红外光源与红外亮斑的映射关系,最后通过贝叶斯模型求解假设出来的映射关系的概率,将概率最大的假设出来的映射关系确定为用于求解人眼注视区域的映射关系。

4、但是,上述确定红外光源与红外亮斑的对应关系的方案存在如下缺陷:当红外光源在照射用户的眼部区域时,并非全部的红外光源能够在眼镜的角膜区域发生反射形成亮斑,因此,采集到的人眼图像中会发生亮斑缺失的情况,也即,人眼图像中的亮斑数量小于红外光源的数量。在这种情况下,贝叶斯模型难以准确确定出红外光源与红外亮斑的映射关系,导致后续头戴增强现实设备无法确定出用户的注视区域,降低了用户的使用体验。


技术实现思路

1、本申请实施例提供一种人眼注视区域的检测方法、装置及头戴增强现实设备。

2、第一方面,本申请一些实施例提供一种人眼注视区域的检测方法,该方法应用于头戴增强现实设备。其中,头戴增强现实设备包括多个光源,至少一个光源的形状和其他光源的形状不相同。该方法包括:获取人眼图像,人眼图像是对佩戴头戴显示装置的用户的眼睛区域采集得到的,人眼图像包含至少两个亮斑;基于人眼图像,确定亮斑的形状信息;基于亮斑的形状信息,确定亮斑与光源之间的对应关系;基于亮斑与光源之间的对应关系,确定人眼注视区域。

3、第二方面,本申请一些实施例还提供一种人眼注视区域的检测装置,该装置应用于头戴增强现实设备。其中,头戴增强现实设备包括多个光源,至少一个光源的形状和其他光源的形状不相同。该装置包括:图像获取模块、第一确定模块、第二确定模块和第三确定模块。其中,图像获取模块用于获取人眼图像,人眼图像是对佩戴头戴显示装置的用户的眼睛区域采集得到的,人眼图像包含至少两个亮斑。第一确定模块用于基于人眼图像,确定亮斑的形状信息。第二确定模块用于基于亮斑的形状信息,确定亮斑与光源之间的对应关系。第三确定模块用于基于亮斑与光源之间的对应关系,确定人眼注视区域。

4、第三方面,本申请一些实施例还提供一种头戴增强现实设备。该头戴增强现实设备包括:多个光源、一个或多个处理器、存储器以及一个或多个应用程序。其中,至少一个光源的形状和其他光源的形状不相同,一个或多个应用程序被存储在存储器中并被配置为由一个或多个处理器执行,一个或多个程序配置用于执行上述的人眼注视区域的检测方法。

5、第四方面,本申请实施例还提供一种计算机可读存储介质,计算机可读存储介质存储有计算机程序指令。其中,计算机程序指令可被处理器调用执行上述的人眼注视区域的检测方法。

6、第五方面,本申请实施例还提供一种计算机程序产品,该计算机程序产品被执行时,实现上述的人眼注视区域的检测方法。

7、本申请提供了一种人眼注视区域的检测方法、装置及头戴增强现实设备。本申请中的检测方法应用于包括多个光源的头戴增强现实设备,在多个光源中至少一个光源的形状和其他光源的形状不相同,因此,多个光源照射在用户眼睛区域所形成亮斑的形状也不相同。本申请中的检测方法通过确定出亮斑的形状信息,即使在人眼图像中亮斑缺失的情况下,头戴增强现实设备基于光源的形状信息,能够快速且准确地确定出亮斑和光源之间的对应关系,进而在后续过程中,在确定用户的人眼注视区域时,正确的亮斑和光源的对应关系可以保证人眼注视区域确定的准确性。

本文档来自技高网...

【技术保护点】

1.一种人眼注视区域的检测方法,其特征在于,所述方法应用于头戴增强现实设备,所述头戴增强现实设备包括多个光源,其中,至少一个所述光源的形状和其他所述光源的形状不相同,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,针对每一所述亮斑,所述基于所述人眼图像,确定所述亮斑的形状信息,包括:

3.根据权利要求2所述的方法,其特征在于,所述基于所述人眼图像,确定所述亮斑的位置信息,包括:

4.根据权利要求2所述的方法,其特征在于,所述基于所述亮斑标记图像,确定所述亮斑的形状信息,包括:

5.根据权利要求1至4任一项所述的方法,其特征在于,基于所述亮斑与光源之间的对应关系,确定人眼注视区域,包括:

6.根据权利要求5所述的方法,其特征在于,所述基于所述人眼图像,确定所述人眼图像中瞳孔中心的位置信息和瞳孔的轮廓信息,包括:

7.根据权利要求4所述的方法,其特征在于,所述分类模型的训练过程如下:

8.一种人眼注视区域的检测装置,其特征在于,所述装置应用于头戴增强现实设备,所述头戴增强现实设备包括多个光源,其中,至少一个所述光源的形状和其他所述光源的形状不相同,所述装置包括:

9.一种头戴增强现实设备,其特征在于,包括:

10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有计算机程序指令,所述计算机程序指令可被处理器调用执行如权利要求1-7任一项所述的方法。

...

【技术特征摘要】

1.一种人眼注视区域的检测方法,其特征在于,所述方法应用于头戴增强现实设备,所述头戴增强现实设备包括多个光源,其中,至少一个所述光源的形状和其他所述光源的形状不相同,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,针对每一所述亮斑,所述基于所述人眼图像,确定所述亮斑的形状信息,包括:

3.根据权利要求2所述的方法,其特征在于,所述基于所述人眼图像,确定所述亮斑的位置信息,包括:

4.根据权利要求2所述的方法,其特征在于,所述基于所述亮斑标记图像,确定所述亮斑的形状信息,包括:

5.根据权利要求1至4任一项所述的方法,其特征在于,基于所述亮斑与光源之间的对应关系,确定人眼注视区域,包括...

【专利技术属性】
技术研发人员:戴红霞弓殷强郭俊佳李屹
申请(专利权)人:深圳光峰科技股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1