所公开的计算机实现的方法包括：(1)通过生物传感器获取由用户产生的生物信号(例如，指示注视动态的生物信号)；(2)使用这些生物信号来预期用户与计算系统(例如，扩展现实系统)的交互意图；以及(3)向智能促进子系统提供指示了用户的交互意图的交互意图信号。所公开的计算系统包括：(1)目标确定子系统，该目标确定子系统使用户能够明确地将一个或多个对象确定为目标以用于交互；(2)交互子系统，该交互子系统使用户能够在该一个或多个对象被确定为目标时与该一个或多个对象中的一个或多个进行交互；以及(3)智能促进子系统，该智能促进子系统响应于交互意图信号，代表用户将多个对象中的一个或多个对象确定为目标。还公开了各种其他方法、系统和计算机可读介质。系统和计算机可读介质。系统和计算机可读介质。
【技术实现步骤摘要】
【国外来华专利技术】用于预测交互意图的系统和方法
[0001]本公开总体上针对用于使用生物信号(例如，眼动追踪数据、或指示注视动态(例如，瞳孔动态)的其他生物信号)来实时预期和信号传递用户与所公开系统的交互意图的开始时间的系统和方法。
技术介绍
[0002]增强现实(Augmented Reality，AR)系统、虚拟现实(Virtual Reality，VR)系统和混合现实(Mixed Reality，MR)系统(统称为扩展现实(Extended Reality，XR)系统)是当前个人计算系统的正在发展的部分。XR系统(尤其是可穿戴的XR系统(例如，头戴式XR系统))可能会即将通过向用户提供持续的“始终在线(always
‑
on)”的协助来开启一个全新的个人计算时代，这些协助可以无缝地结合到用户的日常生活中，而不会造成干扰。与更传统的个人计算设备(例如，笔记本电脑或智能手机)相比，XR设备可能能够以更易访问、更低摩擦的方式向用户显示输出。例如，一些头戴式XR设备可以包括这样的显示器：所述显示器始终在用户的视场中，XR设备可以利用所述显示器向用户呈现视觉输出。在一些实例中，头戴式XR设备可以(例如，通过在真实世界的对象上放置标签或菜单)将所显示的输出紧密地结合到用户的物理环境，使得用户可能不需要将视线从其物理环境中移开来浏览所显示的输出。
[0003]与传统的个人计算设备相比，XR设备通常依赖于这样的输入模式(例如，手势或语音)：所述输入模式是复杂的、模棱两可的、较低精度的和/或较大噪声的，这些输入模式可能使得访问由传统XR设备提供的信息和/或选项在身体上和/或认知上令人疲劳，并且难以访问和/或导航。此外，在一些实例中，这些输入模式可能并不总是由与XR设备的有意交互来驱动。例如，XR设备的用户可能会在对话期间指向重点，但并不想要该指向指示对XR设备的目标确定或选择输入。类似地，用户可能会在对话期间说出与XR设备的语音命令相关联的单词或短语，而不想要触发XR设备执行与该语音命令相关联的动作。
[0004]与传统的个人计算设备不同，XR设备通常具有这样的交互环境：所述交互环境是未知的、较不为人知的或未预先指定的，这可能会导致一些XR系统消耗相当大量的计算资源来发现这种环境内的XR设备的用户可与之交互的对象。如果用户没有立即与其环境中的对象进行交互的意图，则发现对象和/或用户交互所消耗的任何资源都可能会被浪费。另外，如果XR设备能够呈现关于用户环境中的对象的信息、和/或用于与用户环境中的对象交互的选项，则每当用户没有立即与其环境中的对象进行交互的意图时，用户就可能会被这些信息和/或选项分心或烦恼。
技术实现思路
[0005]根据本公开的第一方面，提供了一种计算机实现的方法，该方法包括：通过一个或多个生物传感器获取由计算系统的用户产生的一个或多个生物信号，该计算系统包括：至少一个目标确定子系统，该至少一个目标确定子系统使用户能够明确地将与该计算系统相关联的一个或多个对象确定为目标，以用于交互；至少一个交互子系统，该至少一个交互子
系统使用户能够在该一个或多个对象被确定为目标时与该一个或多个对象中的一个或多个进行交互；以及智能促进子系统，该智能促进子系统响应于交互意图信号，代表该用户将多个对象中的一个或多个对象确定为目标；使用一个或多个生物信号来预期用户与计算系统的交互意图；以及响应于用户的交互意图，向智能促进子系统提供指示了用户的交互意图的交互意图信号。
[0006]在一些实施例中，该计算机实现的方法还可以包括：通过智能促进子系统响应于接收到交互意图信号，识别多个对象中用户最有可能与之交互的至少一个对象；通过智能促进子系统代表用户将多个对象中的至少一个对象确定为目标；通过交互子系统接收来自用户的、与多个对象中被智能促进子系统确定为目标的至少一个对象进行交互的请求；以及响应于接收到与多个对象中的至少一个对象进行交互的请求，而执行操作。
[0007]在一些实施例中，该智能促进子系统可以在接收到交互意图信号之前，不对多个对象中的至少一个对象进行识别。
[0008]在一些实施例中，该一个或多个生物传感器可以包括一个或多个眼动追踪传感器；该一个或多个生物信号包括指示用户的注视动态的信号；并且指示用户的注视动态的信号用于预期用户的交互意图。
[0009]在一些实施例中，指示用户的注视动态的信号可以包括注视速度的度量。
[0010]在一些实施例中，指示用户的注视动态的信号可以包括以下中的至少一者：环境注意力的度量；或焦点注意力的度量。
[0011]在一些实施例中，指示用户的注视动态的信号可以包括扫视动态的度量。
[0012]在一些实施例中，该一个或多个生物传感器可以包括一个或多个手部追踪传感器；该一个或多个生物信号包括指示用户的手部动态的信号；并且指示用户的手部动态的信号用于预期用户的交互意图。
[0013]在一些实施例中，该一个或多个生物传感器可以包括一个或多个神经肌肉传感器；该一个或多个生物信号包括从用户的身体获得的神经肌肉信号；并且从用户的身体获得的神经肌肉信号用于预期用户的交互意图。
[0014]在一些实施例中，与计算系统相关联的对象可以包括来自用户的真实世界环境的一个或多个物理对象。
[0015]在一些实施例中，该计算系统可以包括扩展现实系统；该计算机实现的方法还包括通过该扩展现实系统向用户显示虚拟对象；并且与该计算系统相关联的对象包括所述虚拟对象。
[0016]在一些实施例中，该计算系统可以包括扩展现实系统；该计算机实现的方法还包括通过该扩展现实系统向用户显示菜单；并且与该计算系统相关联的对象包括菜单的视觉元素。
[0017]在一些实施例中，该计算机实现的方法还可以包括：对预测模型进行训练，以输出交互意图信号。
[0018]根据本公开的另一个方面，提供了一种系统，该系统包括：至少一个目标确定子系统，该至少一个目标确定子系统适于使用户能够明确地将一个或多个对象确定为目标，以用于交互；至少一个交互子系统，该至少一个交互子系统适于使用户能够在一个或多个对象被确定为目标时与该一个或多个对象中的一个或多个进行交互；智能促进子系统，该智
能促进子系统适于响应于交互意图信号，代表用户将该一个或多个对象确定为目标；一个或多个生物传感器，该一个或多个生物传感器适于检测由用户产生的生物信号；至少一个物理处理器；以及物理存储器，该物理存储器包括计算机可执行指令，所述计算机可执行指令在被该物理处理器执行时使得该物理处理器：通过一个或多个生物传感器获取由用户产生的一个或多个生物信号；使用该一个或多个生物信号来预期用户与系统的交互意图；以及响应于用户的交互意图，向智能促进子系统提供指示了用户与系统的交互意图的交互意图信号。
[0019]在一些实施例中，该一个或多个生物传感器可以包括一个或多个眼动追踪传感器，该一个或多个眼动追踪传感器适于测量用户的注视动态；该一个或多个生物信号包括指示用户的注视动态的信号；并且该用户的注视动态用于预本文档来自技高网...
【技术保护点】
【技术特征摘要】
【国外来华专利技术】1.一种计算机实现的方法，包括：通过一个或多个生物传感器获取由计算系统的用户产生的一个或多个生物信号，所述计算系统包括：至少一个目标确定子系统，所述至少一个目标确定子系统使所述用户能够明确地将与所述计算系统相关联的一个或多个对象确定为目标，以用于交互；至少一个交互子系统，所述至少一个交互子系统使所述用户能够在所述一个或多个对象被确定为目标时与所述一个或多个对象中的一个或多个进行交互；以及智能促进子系统，所述智能促进子系统响应于交互意图信号，代表所述用户将多个对象中的一个或多个对象确定为目标；使用所述一个或多个生物信号，来预期所述用户与所述计算系统的交互意图；以及响应于所述用户的所述交互意图，向所述智能促进子系统提供指示了所述用户的所述交互意图的交互意图信号。2.根据权利要求1所述的计算机实现的方法，还包括：通过所述智能促进子系统响应于接收到所述交互意图信号，识别所述多个对象中所述用户最有可能与之交互的至少一个对象；通过所述智能促进子系统代表所述用户将所述多个对象中的所述至少一个对象确定为目标；通过所述交互子系统接收来自所述用户的、与所述多个对象中被所述智能促进子系统确定为目标的所述至少一个对象进行交互的请求；以及响应于接收到与所述多个对象中的所述至少一个对象进行交互的请求，而执行操作。3.根据权利要求2所述的计算机实现的方法，其中，所述智能促进子系统在接收到所述交互意图信号之前，不对所述多个对象中的所述至少一个对象进行识别。4.根据权利要求1、2或3所述的计算机实现的方法，其中：所述一个或多个生物传感器包括一个或多个眼动追踪传感器；所述一个或多个生物信号包括指示所述用户的注视动态的信号；并且指示所述用户的注视动态的信号用于预期所述用户的所述交互意图。5.根据权利要求4所述的计算机实现的方法，其中，指示所述用户的注视动态的信号包括以下中的一者或多者：i.注视速度的度量；ii.以下中的至少一者：a.环境注意力的度量；或b.焦点注意力的度量；和/或iii.扫视动态的度量。6.根据前述权利要求中任一项所述的计算机实现的方法，其中：所述一个或多个生物传感器包括一个或多个手部追踪传感器；所述一个或多个生物信号包括指示所述用户的手部动态的信号；并且指示所述用户的手部动态的信号用于预期所述用户的所述交互意图。7.根据前述权利要求中任一项所述的计算机实现的方法，其中：
所述一个或多个生物传感器包括一个或多个神经肌肉传感器；所述一个或多个生物信号包括从所述用户的身体获得的神经肌肉信号；并且从所述用户的身体获得的所述神经肌肉信号用于预期所述用户的所述交互意图。8.根据前述权利要求中任一项所述的计算机实现的方法，其中，与所述计算系统相关联的对象包括来自所述用户的真实世界环境的一个或多个物理对象。9.根据前述权利要求中任一项所述的计算机实现的方法，其中：所述计算系统包括扩展现实系统；所述计算机实现的方法还包括以下中的一者或多者：i.通过所述扩展现实系统向所述用户显示虚拟对象；其中，与所述计算系统相关联的对象包括所述虚拟对象；和/或ii.通过所述扩展现实系统向所述用户显示菜单；其中，与所述计算系统相关联的对象包括所述菜单的视觉元素。10.根据前述权利要求中任一项所述的计算机实现的方法，还包括：对预测模型进行训练，以输出所述交互意图信号。11.一种系统，包括：至少一个目标确定子系统，所述至少一个目标确定子系统适于使用户能够明确地将一个或多个对象确定为目标，以用于交互；...
【专利技术属性】
技术研发人员：坦娅，
申请(专利权)人：元平台技术有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。