眼动追踪方法、装置、电子设备及计算机可读存储介质制造方法及图纸

技术编号:38001326 阅读:10 留言:0更新日期:2023-06-30 10:15
本申请适用于终端技术领域,提供了一种眼动追踪方法、装置、电子设备及计算机可读存储介质。在眼动追踪方法中,电子设备在接收到通知信息时,获取环境光亮度值;基于该环境光亮度值和预设亮度阈值,启动与环境亮度值对应的图像数据流;基于该图像数据流,获取用户的眼动数据;基于该眼动数据和与图像数据流对应的眼动校准数据,确定用户在通知信息所在区域上的注视点的目标位置;从而可以在不同的环境光亮度值下,确定用户在电子设备显示的通知信息区域的注视点的位置,实现对用户眼动更加准确地追踪,使得在与接收到通知信息的界面进行交互的过程中,用户操作便捷,提升用户体验感。提升用户体验感。提升用户体验感。

【技术实现步骤摘要】
眼动追踪方法、装置、电子设备及计算机可读存储介质


[0001]本申请属于终端
,尤其涉及一种眼动追踪方法、装置、电子设备及计算机可读存储介质。

技术介绍

[0002]随着各种电子设备的不断发展,电子设备的功能也越来越丰富,人机交互的方式也越来越多样化。眼动控制作为一种非接触式的人机交互方式,通过眼动追踪来分析用户注视点的位置来实现交互。
[0003]目前,用户在接收到的通知(例如短信/微信消息)内容较长时,该通知的高度和宽度有限,用户不能直接看到完整消息内容,需要使用另一只手点击/滑动通知才可以展开,操作复杂、不便捷;而相关的眼动追踪技术,在设备使用过程中,需要根据限定的眼动方式或者结合头部运动才可控制设备,操作过程繁琐且应用场景比较局限,用户体验不高。

技术实现思路

[0004]本申请提供了一种眼动追踪方法、装置、电子设备及计算机可读存储介质,可以在不同的环境光下基于眼动数据实现对用户的眼动追踪,确定用户注视点,使得在与接收到通知信息的界面进行交互的过程中,用户操作便捷,提升用户体验感。
[0005]本申请的第一方面提供了一种眼动追踪方法,包括:电子设备在接收到通知信息时,获取环境光亮度值;基于该环境光亮度值和预设亮度阈值,启动与环境亮度值对应的图像数据流;基于该图像数据流,获取用户的眼动数据;基于该眼动数据和与图像数据流对应的眼动校准数据,确定用户在通知信息所在区域上的注视点的目标位置。
[0006]通过上述方式,可以在不同的环境光亮度值下,确定电子设备出图的图像数据流,进而基于该图像数据流获取到用户的眼动数据,并结合与该图像数据流对应眼动校准数据,确定出用户在电子设备显示的通知信息区域的注视点的目标位置,可以实现对用户眼动的追踪,使得在与接收到通知信息的界面进行交互的过程中,眼动追踪更准确,用户操作便捷,提升用户体验感。
[0007]在第一方面的一种可能的实现方式中,在获取环境光亮度值之前,该方法还包括:响应于眼动校准启动指令,基于图像数据流获取用户的眼动校准数据。
[0008]在第一方面的一种可能的实现方式中,响应于眼动校准启动指令,基于图像数据流获取用户的眼动校准数据,包括:响应于眼动校准启动指令,启动图像数据流;基于图像数据流,获取用户的校准图像;对校准图像进行眼动识别处理,得到用户的眼动校准数据。
[0009]示例性的,该图像数据流为启动摄像装置进行图像采集并传输的数据流,通过眼动算法对获取到的校准图像进行眼动识别处理,得到该用户的眼动校准数据。
[0010]通过上述方式,由于不同用户的眼动习惯及特征不同,眼动识别算法针对不同的用户可能存在一定的偏差,通过获取与用户对应的眼动校准数据,从而可以基于不同用户的眼动校准数据对眼动识别结果进行校准,从而实现更加准确的眼动追踪,同时使得眼动
追踪的位置准确度更高,使得基于眼动追踪进行人机交互的功能可以更加精准,体验感更强。
[0011]在第一方面的一种可能的实现方式中,图像数据流包括第一数据流和第二数据流,眼动校准数据包括第一数据流对应的第一眼动校准数据和第二数据流对应的第二眼动校准数据;响应于眼动校准启动指令,基于图像数据流获取用户的眼动校准数据,包括:
[0012]响应于眼动校准启动指令,分别获取通过第一数据流传输的第一图像和第二数据流传输的第二图像;对第一图像和第二图像进行眼动识别处理,得到第一眼动校准数据和第二眼动校准数据。
[0013]在第一方面的一种可能的实现方式中,基于环境光亮度值和预设亮度阈值,启动与环境亮度值对应的图像数据流,包括:
[0014]若环境光亮度值大于或等于预设亮度阈值,则启动第一数据流;或者,若环境光亮度值小于预设亮度阈值,则启动第二数据流。
[0015]在第一方面的一种可能的实现方式中,基于图像数据流,获取用户的眼动数据,包括:
[0016]基于图像数据流,获取用户的待识别图像;对待识别图像进行眼动识别处理,得到眼动数据。
[0017]示例性的,通过图像数据流对应的摄像装置采集用户面部的待识别图像,并通过眼动识别算法对该待识别图像进行眼动识别处理,从而得到用户当前的眼动数据;基于用户当前的眼动数据,可以预测用户的注视位置。
[0018]在第一方面的一种可能的实现方式中,基于图像数据流,获取用户的眼动数据,包括:
[0019]基于第一数据流,获取用户的所述眼动数据;或者,基于第二数据流,获取用户的所述眼动数据。
[0020]在第一方面的一种可能的实现方式中,基于眼动数据和与图像数据流对应的眼动校准数据,确定用户在通知信息区域上的注视点的目标位置,包括:
[0021]基于眼动数据和第一眼动校准数据,确定用户在通知信息所在区域上的注视点的目标位置;或者,基于眼动数据和第二眼动校准数据,确定用户在通知信息所在区域上的注视点的目标位置。
[0022]通过上述方式,电子设备设置有两路进行图像采集的数据流,以及两路数据流对应的眼动校准数据;在实际应用过程中,则基于环境光亮度值与预设亮度阈值,选择一条数据流获取用户的待识别图像,并选择其中一个数据流的眼动校准数据对待识别图像对应的眼动数据进行校准,实现眼动追踪,可以提高在执行眼动追踪时的灵活性,可以适应在不同环境光的情况下,均能更加准确的实现眼动追踪,降低环境对眼动追踪的影响与干扰。
[0023]在第一方面的一种可能的实现方式中,响应于眼动校准启动指令,基于图像数据流获取用户的眼动校准数据,包括:
[0024]响应于眼动校准启动指令,在显示屏上显示校准点,该校准点用于在录入眼动校准数据过程中提示用户的注视方位;对获取到的用户的校准图像进行识别处理,得到用户的预测注视位置;基于该预测注视位置与校准点对应的实际注视位置的偏差,确定眼动校准数据。
[0025]示例性的,通过在显示屏上设置多个不同位置处的校准点,记录多个校准点的眼动校准数据,提高眼动校准数据的可靠性,从而在基于眼动校准数据进行校准得到注视点的目标位置过程中,提高对眼动追踪的准确度。
[0026]在第一方面的一种可能的实现方式中,该方法还包括:
[0027]显示屏上依次显示多个校准点,在对每个所述校准点进行校准,并记录该用户的对应每个校准点的眼动校准数据之后,通过显示屏显示对所有的校准点完成校准的提示信息。
[0028]示例性的,在显示该提示信息的同时,生成每个校准点的标识,将校准点的标识反馈至上层应用系统,并提示校准结果。
[0029]通过上述方式,基于实现不同的人机交互功能,电子设备可设置有在不同位置上的多个校准点,记录不同位置的校准点对应的眼动校准数据,从而可以形成用户的眼动校准数据模型,提高眼动校准数据的可靠性,使得后续眼动追踪的计算的注视点的目标位置更加准确,提高眼动追踪功能的识别精准度。
[0030]在第一方面的一种可能的实现方式中,基于眼动数据和与图像数据流对应的眼动校准数据,确定用户在通知信息所在区域上的注视点的本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种眼动追踪方法,其特征在于,包括:在接收到通知信息时,获取环境光亮度值;基于所述环境光亮度值和预设亮度阈值,启动与所述环境亮度值对应的图像数据流;基于所述图像数据流,获取用户的眼动数据;基于所述眼动数据和与所述图像数据流对应的眼动校准数据,确定所述用户在所述通知信息所在区域上的注视点的目标位置。2.如权利要求1所述的方法,其特征在于,在所述获取环境光亮度值之前,所述方法还包括:响应于眼动校准启动指令,基于图像数据流获取用户的眼动校准数据。3.如权利要求2所述的方法,其特征在于,所述响应于眼动校准启动指令,基于图像数据流获取用户的眼动校准数据,包括:响应于眼动校准启动指令,启动所述图像数据流;基于所述图像数据流,获取所述用户的校准图像;对所述校准图像进行眼动识别处理,得到所述用户的所述眼动校准数据。4.如权利要求2所述的方法,其特征在于,所述图像数据流包括第一数据流和第二数据流,所述眼动校准数据包括所述第一数据流对应的第一眼动校准数据和所述第二数据流对应的第二眼动校准数据;所述响应于眼动校准启动指令,基于图像数据流获取用户的眼动校准数据,包括:响应于所述眼动校准启动指令,分别获取通过所述第一数据流传输的第一图像和所述第二数据流传输的第二图像;对所述第一图像和所述第二图像进行眼动识别处理,得到所述第一眼动校准数据和所述第二眼动校准数据。5.如权利要求4所述的方法,其特征在于,所述基于所述环境光亮度值和预设亮度阈值,启动与所述环境亮度值对应的图像数据流,包括:若所述环境光亮度值大于或等于所述预设亮度阈值,则启动所述第一数据流;或者,若所述环境光亮度值小于所述预设亮度阈值,则启动所述第二数据流。6.如权利要求1所述的方法,其特征在于,所述基于所述图像数据流,获取用户的眼动数据,包括:基于所述图像数据流,获取所述用户的待识别图像;对所述待识别图像进行眼动识别处理,得到所述眼动数据。7.如权利要求5所述的方法,其特征在于,所述基于所述图像数据流,获取用户的眼动数据,包括:基于所述第一数据流,获取所述用户的所述眼动数据;或者,基于所述第二数据流,获取所述用户的所述眼动数据。8.如权利要求7所述的方法,其特征在于,所述基于所述眼动数据和与所述图像数据流对应的眼动校准数据,确定所述用户在所述通知信息所在区域上的注视点的目标位置,包括:
基于所述眼动数据和所述第一眼动校准数据,确定所述用户在所述通知信息...

【专利技术属性】
技术研发人员:费志杰袁江峰黄文汉
申请(专利权)人:荣耀终端有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1