眼睛跟踪制造技术

检测包括眼睛注视(211)的第一用户动作(201)。基于所述第一用户动作(201)的所述眼睛注视(211)的方向(212)，选择来自多个菜单项的至少一个菜单项。检测第二用户动作(202)。基于所述第二用户动作(202)，激活与所述至少一个第一菜单项中给定的一个相关联的功能(209)。

Eye tracking

Detection includes eye gaze (211) of the first user action (201). Based on the direction (212) of the eye gaze (211) of the first user action (201), at least one menu item from a plurality of menu items is selected. Detection of second user action (202). Based on the second user action (202), an associated function (209) is activated with one given in at least one of the first menu items.

【技术实现步骤摘要】
【国外来华专利技术】眼睛跟踪
示例涉及一种方法，包括：检测第一用户动作，该第一用户动作包括与用户的眼睛相关联的眼睛注视；基于眼睛注视的方向选择至少一个第一菜单项；检测第二用户动作；以及激活与所述至少一个第一菜单项中给定的一个相关联的功能。进一步的示例涉及对应的装置。
技术介绍
眼睛追踪技术提供了与图形用户界面(GUI)交互的潜力。例如，从EP2891953A2中已知能够基于眼睛注视来致动GUI的技术。然而，这些技术面临某些限制。例如，用户在操作GUI时的灵活性可能受到限制。
技术实现思路
因此，需要先进的眼睛跟踪技术。具体地，需要这种能够基于眼睛注视动态地激活GUI的菜单项的眼睛跟踪技术。独立权利要求的特征满足了这种需要。从属权利要求限定了实施方案。在示例中，一种方法包括显示GUI。GUI包括多个菜单项。该方法还包括检测第一用户动作。所述第一用户动作包括与用户的眼睛相关联的眼睛注视。该方法还包括：基于第一用户动作的眼睛注视的方向，从多个菜单项中选择至少一个第一菜单项。该方法还包括检测第二用户动作。该方法还包括基于第二用户动作激活与所述至少一个第一菜单项中给定的一个相关联的功能。在示例中，一种装置包括至少一个显示器、存储器和至少一个处理器。所述存储器被配置为存储程序代码。所述至少一个处理器与所述存储器和所述至少一个显示器耦接。所述至少一个处理器被配置为执行程序代码。程序代码的执行使得所述至少一个处理器执行以下操作：控制显示器以显示包括多个菜单项的GUI；检测包括与用户眼睛相关联的眼睛注视的第一用户动作；基于第一用户动作的眼睛注视的方向，从多个菜单项中选择至少一个第一菜单项；检测第二用户动作；并且基于第二用户动作，激活与所述至少一个第一菜单项中给定的一个相关联的功能。在示例中，一种计算机程序产品包括将由至少一个处理器执行的程序代码。执行程序代码使得所述至少一个处理器执行一种方法。该方法包括显示GUI。GUI包括多个菜单项。该方法还包括检测第一用户动作。第一用户动作包括与用户的眼睛相关联的眼睛注视。该方法还包括：基于第一用户动作的眼睛注视的方向，从多个菜单项中选择至少一个第一菜单项。该方法还包括检测第二用户动作。该方法还包括基于第二用户动作激活与所述至少一个第一菜单项中给定的一个相关联的功能。除非另外特别说明，否则之前和之后描述的示例可以彼此组合。附图说明图1A示意性地示出了根据各种示例的装置，该装置包括处理器、显示器和人机界面(HMI)。图1B是根据各种示例的方法的流程图。图2示意性地示出了第一用户动作和第二用户动作，所述第一用户动作包括与用户的眼睛相关联的眼睛注视，其中基于第二用户动作，激活与基于眼睛注视的方向被选择的至少一个第一菜单项中给定的一个相关联的功能。图3示意性地示出了第一用户动作和第二用户动作，所述第一用户动作包括与用户的眼睛相关联的眼睛注视，其中基于第二用户动作，激活与基于眼睛注视的方向被选择的至少一个第一菜单项中给定的一个相关联的功能。图4示意性地示出了第一用户动作和第二用户动作，所述第一用户动作包括与用户的眼睛相关联的眼睛注视，其中基于第二用户动作，激活与基于眼睛注视的方向被选择的至少一个第一菜单项中给定的一个相关联的功能。图5示意性地示出了根据各种示例基于眼睛注视的方向从GUI的多个菜单项中选择所述至少一个第一菜单项。图6A示意性地示出了根据各种示例基于眼睛注视的方向从GUI的多个菜单项中选择所述至少一个第一菜单项。图6B示意性地示出了根据各种示例基于眼睛注视的方向从GUI的多个菜单项中选择所述至少一个第一菜单项。图7示意性地示出了用于示例GUI的眼睛跟踪技术，其中通过光学阻尼其他菜单项来突出显示选定的菜单项。图8示意性地示出了用于示例GUI的眼睛跟踪技术，其中针对选定的菜单项描绘了工具提示信息。图9示意性地示出了用于示例GUI的眼睛跟踪技术，其中菜单项通过模糊和非模糊效果突出显示。图10示意性地示出了用于示例GUI的眼睛跟踪技术，其中菜单项通过模糊和非模糊效果突出显示。图11示意性地示出了用于示例GUI的眼睛跟踪技术，其中通过改变其形状和信息内容来突出显示选定的菜单项。图12示意性地示出了用于示例GUI的眼睛跟踪技术，其中通过改变多个其他菜单项的可见性来突出显示选定的菜单项。图13示意性地示出了用于示例GUI的眼睛跟踪技术，其中针对选定的菜单项描绘了工具提示信息。图14示意性地示出了用于示例GUI的眼睛跟踪技术。图15示出了与眼睛跟踪相关联的图标。图16示意性地示出了根据各种示例的基于第一用户动作和第二用户动作的功能的两步激活，其中第二用户动作包括进一步的眼睛注视。图17示意性地示出了根据各种示例的基于第一用户动作和第二用户动作的功能的两步激活，其中第二用户动作包括眉毛扬起。图18示意性地示出了根据各种示例的基于第一用户动作和第二用户动作的功能的两步激活，其中第二用户动作包括关于响应于选择第一菜单项而可见的另一菜单项的进一步的眼睛注视。图19示意性地示出了根据各种示例的基于第一用户动作和第二用户动作的功能的两步激活，其中第二用户动作包括关于响应于选择第一菜单项而可见的另一菜单项的进一步的眼睛注视。图20示意性地示出了根据各种示例的基于第一用户动作和第二用户动作的功能的两步激活，其中第二用户动作包括关于响应于选择第一菜单项而可见的另一菜单项的进一步的眼睛注视。图21示意性地示出了根据各种示例的基于第一用户动作和第二用户动作的功能的两步激活，其中第二用户动作包括进一步的眼睛注视。具体实施方式附图应被看作是示意性表示，并且附图中所示的元件未必按比例示出。更确切地，表示各种元件使得它们的功能和一般目的对于本领域技术人员而言是明显的。在附图中示出或本文描述的功能块、装置、部件或其他物理或功能单元之间的任何连接或耦接也可以通过间接连接或耦接来实现。部件之间的耦接还可通过无线连接来建立。功能块可以硬件、固件、软件或其组合实现。在下文中，描述了关于采用眼睛跟踪系统的各种技术。在一些示例中，眼睛跟踪可以用在诸如客车的车辆中。所述技术使得用户能够通过用眼睛选择性地聚焦不同的菜单项来动态地激活菜单项。在各种示例中，检测或跟踪与用户的眼睛相关联的眼睛注视的方向。详细地，可以检测眼睛注视相对于图形用户界面(GUI)的菜单项的方向。基于眼睛注视的方向的用户动作可以对应于：用户正在观看显示器的给定点；眼睛跟踪系统识别/计算为坐标以及可选地为视觉焦点的方差度/不准确度并将数据传递给处理器。然后，基于眼睛注视的方向，可以确定是否应激活某个功能。可以在一个或多个显示器上描绘GUI。例如，GUI可以被描绘在车辆的组合仪表显示器、中控台显示器、信息娱乐显示器和/或平视显示器(HUD)上。而且，可以想到三维显示器，例如自动立体显示器。在激活给定菜单项的情况下，可激活或触发与相应菜单项相关联的对应功能。功能的激活可以包括以下各项中的一个或多个：触发使用(例如)弹出窗口(例如)在GUI的保留区域中和/或在激活的菜单项附近显示附加信息。例如，功能可以是任何视听反应，例如显示弹出菜单、浏览菜单等。附加信息也可以例如通过改变其形状或形式显示在菜单项内。替代地或另外，功能可以对应于改变车辆部件的内部状态的非视觉反应。在一些示例中，该功能可以对应本文档来自技高网...

【技术保护点】
1.一种方法，其包括：‑显示包括多个菜单项(301‑316、320)的图形用户界面(500)，‑检测包括与用户的眼睛(213)相关联的眼睛注视(211)的第一用户动作(201)，‑基于所述第一用户动作(201)的所述眼睛注视(211)的方向(212)，从所述多个菜单项(301‑316、320)中选择至少一个第一菜单项(301‑316、320)，‑检测第二用户动作(202)，以及‑基于所述第二用户动作(202)，激活与所述至少一个第一菜单项(301‑316、320)中给定的一个相关联的功能(209)。

【技术特征摘要】
【国外来华专利技术】2016.05.24 EP 16171074.41.一种方法，其包括：-显示包括多个菜单项(301-316、320)的图形用户界面(500)，-检测包括与用户的眼睛(213)相关联的眼睛注视(211)的第一用户动作(201)，-基于所述第一用户动作(201)的所述眼睛注视(211)的方向(212)，从所述多个菜单项(301-316、320)中选择至少一个第一菜单项(301-316、320)，-检测第二用户动作(202)，以及-基于所述第二用户动作(202)，激活与所述至少一个第一菜单项(301-316、320)中给定的一个相关联的功能(209)。2.如权利要求1所述的方法，其中所述第一用户动作(201)和所述第二用户动作(202)在一个实例中发出，并且其中所述第二用户动作(202)在所述第一用户动作(201)开始之后开始。3.如权利要求2所述的方法，其中所述第一用户动作(201)在所述第二用户动作(202)的至少第一部分期间是持续的。4.如前述权利要求中任一项所述的方法，其中所述功能(209)的所述激活还基于所述第一用户动作(201)的所述眼睛注视(211)的所述方向。5.如前述权利要求中任一项所述的方法，其中所述眼睛注视(211)的所述方向瞄准与所述至少一个第一菜单项(301-316、320)不同的进一步的菜单项(301-316、320)，其中所述方法还包括：-响应于选择所述至少一个进一步的菜单项(301-316、320)，激活所述至少一个进一步的菜单项(301-316、320)的可见性。6.如权利要求1-4中任一项所述的方法，其中所述眼睛注视(211)的所述方向瞄准所述至少一个第一菜单项(301-316、320)，其中所述方法还包括：-响应于选择所述至少一个第一菜单项(301-316、320)，突出显示所述至少一个菜单项(301-316、320)。7.如权利要求6所述的方法，其中所述突出显示所述至少一个菜单项(301-316、320)包括以下各项中的至少一个：将光标符号悬停在所述至少一个菜单项(301-316、320)上方；改变所述至少一个菜单项(301-316、320)的模糊或所述至少一个菜单项(301-316、320)的背景；改变所述至少一个菜单项(301-316、320)的大小；改变所述至少一个菜单项(301-316、320)的几何形状；改变所述至少一个菜单项(301-316、320)的信息内容；以及改变所述至少一个菜单项(301-316、320)的颜色。8.如前述权利要求中任一项所述的方法，其还包括：-响应于选择所述至少一个第一...

【专利技术属性】
技术研发人员：A罗尔巴克尔，
申请(专利权)人：哈曼贝克自动系统股份有限公司，
类型：发明
国别省市：德国,DE