【技术实现步骤摘要】
一种多模组视线追踪方法、系统和视线追踪设备
本专利技术的实施方式涉及人工智能
,更具体地,本专利技术的实施方式涉及一种多模组视线追踪方法、系统和视线追踪设备。
技术介绍
视线追踪技术是测量眼睛运动信息并确定眼睛注视轨迹的技术,目前被广泛应用于AR眼镜、智能驾舱等AI领域。然而目前的视线追踪设备普遍存在视线追踪范围较窄,无法在大视角下确定用户视线方向或计算精度较低的缺陷。
技术实现思路
出于现有技术无法在大视角下确定用户视线方向或计算精度较低的原因,本专利技术提供一种多模组视线追踪方法、系统和视线追踪设备来解决上述问题。在本专利技术实施方式的第一方面中,提供了一种多模组视线追踪系统,其包括:至少两个模组;各个模组用于从不同的角度发出红外光照射用户并采集用户图像;初始视线确定单元,用于根据每个模组采集的用户图像计算用户视线信息,其中,每个模组对应一组用户视线信息;真实视线确定单元,用于接收各个模组对应的多组用户视线信息,并从中选择一组用户视线信息确定为用户真实视线信息。在本专利技术实施方式的第二方面中,提供了一种多模组视线追踪方法,其包括:利用至少两个模组从不同的角度发出红外光照射用户并采集用户图像;根据每个模组采集的用户图像计算用户视线信息,其中,每个模组对应一组用户视线信息;从各个模组对应的多组用户视线信息中选择一组用户视线信息确定为用户真实视线信息。在本专利技术实施方式的第三方面中,提供了一种视线追踪设备,包括处理器、存储器及存储在存储器上并可在处理器上运行的计算机 ...
【技术保护点】
1.一种多模组视线追踪系统,其特征在于,包括:/n至少两个模组;各个模组用于从不同的角度发出红外光照射用户并采集用户图像;/n初始视线确定单元,用于根据每个模组采集的用户图像计算用户视线信息,其中,每个模组对应一组用户视线信息;/n真实视线确定单元,用于接收各个模组对应的多组用户视线信息,并从中选择一组用户视线信息确定为用户真实视线信息。/n
【技术特征摘要】
1.一种多模组视线追踪系统,其特征在于,包括:
至少两个模组;各个模组用于从不同的角度发出红外光照射用户并采集用户图像;
初始视线确定单元,用于根据每个模组采集的用户图像计算用户视线信息,其中,每个模组对应一组用户视线信息;
真实视线确定单元,用于接收各个模组对应的多组用户视线信息,并从中选择一组用户视线信息确定为用户真实视线信息。
2.根据权利要求1所述的多模组视线追踪系统,其特征在于,初始视线确定单元还用于确定每组用户视线信息的置信度;则,
真实视线确定单元还用于接收每组用户视线信息的置信度,并从多组用户视线信息中选择置信度最高的用户视线信息确定为用户真实视线信息。
3.根据权利要求2所述的多模组视线追踪系统,其特征在于,初始视线确定单元确定每组用户视线信息的置信度,包括:
初始视线确定单元通过分析每个模组采集的用户图像,确定相应组用户视线信息的置信度。
4.根据权利要求3所述的多模组视线追踪系统,其特征在于,初始视线确定单元通过分析每个模组采集的用户图像,确定相应组用户视线信息的置信度,包括:
初始视线确定单元从每个模组采集的用户图像中提取眼部区域图像,从眼部区域图像中确定瞳孔对应的椭圆,并分析瞳孔对应的椭圆的形状特征,根据瞳孔对应的椭圆的形状特征确定相应组用户视线信息的置信度。
5.根据权利要求3所述的多模组视线追踪系统,其特征在于,初始视线确定单元通过分析每个模组采集的用户图像,确定相应组用户视线信息的置信度,包括:
初始视线确定单元从每个模组采集的用户图像中提取眼部区域图像,从眼部区域图像中确定因用户眼睛反射红外光而出现的光斑,并分析光斑的形状特征,根据光斑的形状特征确定相应组用户视线信息的置信度。
6.根据权利要求3所述的多模组视线追踪系统,其特征在于,初始视线确定单元通过分析每个模组采集的用户图像,确定相应组用户视线信息的置信度,包括:
初始视线确定单元从每个模组采集的用户图像中提取眼部区域图像,从眼部区域图像中确定瞳孔和因用户眼睛反射红外光而出现的光斑,分别确定用户两只眼睛中瞳孔和光斑的相对位置,并比对用户两只眼睛中瞳孔和光斑的相对位置的一致程度,根据该一致程度确定相应组用户视线信息的置信度。
7.根据权利要求3所述的多模组视线追踪系统,其特征在于,初始视线确定单元通过分析每个模组采集的用户图像,确定相应组用户视线信息的置信度,包括:
初始视线确定单元从每个模组采集的用户图像中提取眼部区域图像,从眼部区域图像中分别确定用户两只眼睛的视轴,并计算用户两只眼睛的视轴的偏差,根据用户两只眼睛的视轴的偏差确定相应组用户视线信息的置信度。
8.根据权利要求3所述的多模组视线追踪系统,其特征在于,初始视线确定单元通过分析每个模组采集的用户图像,确定相应组用户视线信息的置信度,包括:
初始视线确定单元根据每个模组采集的用户图像确定用户头部朝向,并确定用户头部朝向与每个模组采集用户图像的角度之间的偏差,根据用户头部朝向与每个模组采集用户图像的角度之间的偏差确定相应组用户视线信息的置信度。
9.根据权利要求1所述的多模组视线追踪系统,其特征在于,每个模组包括:
光源,用于产生红外光,并使所述红外光照射用户;
相机,用于采集用户图像。
10.根据权利要求9所述的多模组视线追踪系统,其特征在于,各个模组中的光源产生具有相同波长的红外光,且,多模组视线追踪系统还包括:模组控制单元,用于控制具有光斑干扰关系的各个模组分时工作,以使每个模组采集的用户图像中最多只有因用户眼睛反射本模组产生的红外光而出现的光斑;其中,具有光斑干扰关系的模组为如下类型的模组:当采用相同波长的红外光同时照射用户时,会导致至少一个模组采集的用户图像中出现因用户眼睛反射其他模组产生的红外光而出现的光斑。
11.根据权利要求9所述的多模组视线追踪系统,其特征在于,具有光斑干扰关系的各个模组中的光源产生具有不同波长的红外光,且,具有光斑干扰关系的各个模组中的相机采用可透过本模组产生的红外光、滤除其他模组产生的不同波长的红外光的滤光片,以使每个模组采集的用户图像中最多只有因用户眼睛反射本模组产生的红外光而出现的光斑;其中,具有光斑干扰关系的模组为如下类型的模组:当采用相同波长的红外光同时照射用户时,会导致至少一个模组采集的用户图像中出现其他模组产生的因用户眼睛反射红外光而出现的光斑。
12.一种多模组视线追踪方法,其特征在于,包括:
利用至少两个模组从不同的角度发出红外光照射用户并采集用户图像;
根据每个模组采集的用户图像计算用户视线信息,其中,每个模组对应一组用户视线信息;<...
【专利技术属性】
技术研发人员:朱成彦,
申请(专利权)人:北京未动科技有限公司,
类型:发明
国别省市:北京;11
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。