在凝视跟踪方法和设备中视觉改变的非视觉反馈技术

一种提供非视觉反馈以警告显示器的观看者已经触发了视觉改变的计算方法和设备，使用来自凝视跟踪系统的凝视跟踪数据来确定观看者改变了凝视位置。基于确定出所述观看者改变了凝视位置，触发视觉改变，并且向观看者提供非视觉反馈以表明视觉改变的触发。如果在预定的时间帧内接收到取消改变输入，则不显示视觉改变。如果在所述时间帧内未接收到取消改变输入，则经由显示器显示所述视觉改变。

【技术实现步骤摘要】
【国外来华专利技术】
技术介绍
内容创建和/或输送设备可以利用凝视跟踪系统来使得用户能够与设备经由用户的凝视交互。在一些例子中，用户可以通过改变用户凝视的位置在两个或更多的不同用户界面和/或通过单个设备或多个设备输送的内容流之间切换。在一个例子中，用户可能对两个足球游戏感兴趣，并且可以在单个电视机上显示两个游戏。第一个游戏可以显示在整个电视机屏幕上，而第二个游戏可以显示在靠近屏幕的一个角落的较小嵌入窗口中(例如，“画中画”特征)。用户的凝视位置可以确定两个游戏中的哪一个占据整个屏幕。因此，当用户看着在嵌入窗口中显示的第二个游戏时，可以放大该内容流以占据整个屏幕。然后，第一个游戏的内容流可以显示在较小的嵌入窗口中。然而，用户眼睛的移动不会总是对应于用户控制这种设备的意图。例如，在嵌入窗口中显示的游戏中的闪光或其它视觉干扰将引起用户扫视窗口。然后可能切换两个足球游戏的显示，尽管用户并不打算执行这种切换。
技术实现思路
本文公开了各种实施例，其涉及使用非视觉反馈以警告显示设备的观看者已经触发了在显示设备中的视觉改变。例如，一个公开实施例在计算设备中提供了一种方法，包括从凝视跟踪系统接收观看者的凝视跟踪数据。利用所述凝视跟踪数据，确定观看者将凝视位置从第一凝视位置改变到第二凝视位置。基于确定观看者将凝视位置改变到第二凝视位置，触发视觉改变，并将表示已经触发视觉改变的非视觉反馈提供给观看者。如果在预定时间帧内接收到取消改变输入，则不经由显示设备显示视觉改变。如果在预定时间帧内未接收到取消改变输入，则经由显示设备显示视觉改变。提供该“
技术实现思路
”是为了引入将在下文“具体实施方式”中进一步描述的简化形式的概念的选择。该“
技术实现思路
”并不意图标识所要求保护主题的关键特征或必要特征，并且也不意图用于限制所要求保护主题的范围。此外，所要求保护的主题不限于解决在本公开的任何部分提及的任意或所有缺点的实现方式。附图说明图1是根据本公开的例子的计算设备的示意性视图，所述计算设备使用非视觉反馈来警告显示设备的观看者已经触发了视觉改变。图2是根据本公开的例子的若干观看者在房间中与计算设备和显示器交互的示意性图示，所述计算设备和显示器使用非视觉反馈来警告观看者已经触发了视觉改变。图3和图4是根据本公开的例子的显示设备的示意性图示，所述显示设备显示由观看者改变凝视位置而触发的视觉改变。图5是在计算设备显示器上显示的两个聊天窗口的示意性图示。图6A和6B是根据本公开的例子的方法的流程图，所述方法用于使用非视觉反馈来警告显示设备的观看者已经触发了显示设备中的视觉改变。图7是计算设备的例子的简化示意图示。具体实施方式图1示出了计算设备的示例性实现方式的示意性视图，所述计算设备用于提供非视觉反馈来警告显示设备的观看者已经触发了在显示设备中的视觉改变。如下文更详细描述的，计算设备使用凝视跟踪数据来确定观看者改变他或她的凝视位置。触发视觉改变，并将非视觉反馈提供给观看者以表示已经触发了改变。如果观看者在预定时间帧内提供取消改变输入，则不显示视觉改变。如果在所述时间帧内观看者未提供取消改变输入，则显示视觉改变。在各种例子中，计算设备可以物理上与和观看者交互的显示设备分离或与其集成。图1示意性示出了计算设备10的例子，其在物理上与显示设备14分离。在该例子中，计算设备10可以包括或集成到单独的设备，例如，机顶盒、游戏控制台、网络摄像机、可穿戴设备、头部安装计算设备或其它可穿戴计算机设备、键盘、专用外围部件、或不包括集成的显示器的其它类似设备。计算设备10可以操作地利用有线连接与显示设备14连接，或者可以采用经由WiFi、蓝牙或任意其它适当的无线通信协议的无线连接。例如，计算设备10可以通信地耦合到网络16上。网络16可以采取局域网(LAN)、广域网(WAN)、有线网络、无线网络、个域网或其组合的形式，并可以包括因特网。关于计算设备10的部件和计算方面的额外细节将在下文结合图7更详细地描述。图1还示出了集成到头部安装的显示(HMD)设备18中的计算设备12的例子。HMD设备18可以创建并向第一观看者22显示虚拟现实环境或混合现实环境。在这些例子中，HMD设备18可以包括显示程序26，其可以生成经由HMD设备显示的虚拟环境或混合现实环境。虚拟环境可以包括经由HMD设备18生成和显示的虚拟图像形式的一个或多个视觉元素，例如三维(3D)全息对象和二维(2D)虚拟图像。在混合现实环境中，HMD设备18可以使得观看者能够在观看者周围的物理环境中观看这种虚拟图像。在一些例子中，HMD设备18可以包括支撑在观看者的一只或两只眼睛前方的透明的、半透明的或不透明的显示器。HMD设备18可以包括从物理环境中接收物理环境数据的各种传感器和相关系统。例如，HMD设备18可以包括深度传感器系统30，其包括生成深度图像数据的一个或多个深度摄像机。在一些例子中，HMD设备18可以包括使用至少一个向外的传感器(例如，RGB摄像机或其它光传感器)的光传感器系统32。向外的传感器可以从物理环境捕捉二维图像信息。HMD设备18还可以包括位置传感器系统34，其包括一个或多个加速计、陀螺仪、头部跟踪系统和/或用于确定用户的位置或方向的其它传感器。额外地，图1中示出的例子显示了集成到HMD设备18中的计算设备12。可以理解的是，在其它例子中，计算设备12可以是与HMD设备18分离的部件。可以使用具有各种形状因子的许多类型和配置的HMD设备18，并且其落入本公开的范围内。还可以理解的是，计算设备12可以包括或集成到任意其它适当类型或形式的显示设备，例如，平板计算机、笔记本计算机、智能电话、或其它移动计算设备、台式计算设备、独立监视器、壁装式显示器、交互式白板、或具有集成显示器的其它类似设备。计算设备10和计算设备12可以包括上下文切换程序38，其可以存储于大容量存储设备40中。上下文切换程序38可以加载到存储器42中，并由处理器46执行以实现在下文更详细描述的一个或多个方法和过程。计算设备10和计算设备12可以接收来自凝视跟踪系统54的凝视跟踪数据50。在各个例子中，凝视跟踪系统54可以位于显示设备14、HMD设备18中，或者与任意其它适当类型或形式的显示设备在共同的外壳内，包括但不限于具有上述集成显示器的那些示例性设备。在其它例子中，凝视跟踪系统54和计算设备10可以集成到不包括集成显示器的共同外壳内，例如，头部安装或其它可穿戴设备，或者在不包括集成显示器的任意其它适当类型或形式的计算设备中，包括但不限于上述不具有集成显示器的那些示例性设备。继续参考图1，示例性显示设备14可以包括显示系统58，用于向第二个观看者62呈现一个或多个视觉元素。如下文更详细描述的，上下文切换程序38可以利用来自凝视跟踪系统54的凝视跟踪数据50来触发经由显示设备14向第二个观看者62显示的一个或多个视觉元素中的视觉改变。类似地，在示例性HMD设备18中，上下文切换程序38可以利用来自HMD设备中的凝视跟踪系统54的凝视跟踪数据来触发经由HDM设备显示给第一个观看者22的一个或多个视觉元素中的视觉变化。显示器14和HMD设备18还可以包括换能器系统62，其包括将电信号转换为另一形式的能量的一个或多个致动器。在一些例子中，换能器系统6本文档来自技高网...

【技术保护点】
一种在计算设备中用于使用非视觉反馈警告显示设备的观看者已经触发了在所述显示设备中的视觉改变的方法，所述方法包括：从凝视跟踪系统接收所述观看者的凝视跟踪数据；利用所述凝视跟踪数据，确定所述观看者将凝视位置从第一凝视位置改变到第二凝视位置；基于确定出所述观看者将所述凝视位置改变到所述第二凝视位置，触发所述视觉改变；基于确定出所述观看者将所述凝视位置改变到所述第二凝视位置，向所述观看者提供所述非视觉反馈以表明已经触发了所述视觉改变；如果在预定的时间帧内未接收到取消改变输入，则控制所述显示设备显示所述视觉改变；以及如果在所述预定的时间帧内接收到所述取消改变输入，则控制所述显示设备以避免显示所述视觉改变。

【技术特征摘要】
【国外来华专利技术】2014.04.10 US 14/250,2801.一种在计算设备中用于使用非视觉反馈警告显示设备的观看者已经触发了在所述显示设备中的视觉改变的方法，所述方法包括：从凝视跟踪系统接收所述观看者的凝视跟踪数据；利用所述凝视跟踪数据，确定所述观看者将凝视位置从第一凝视位置改变到第二凝视位置；基于确定出所述观看者将所述凝视位置改变到所述第二凝视位置，触发所述视觉改变；基于确定出所述观看者将所述凝视位置改变到所述第二凝视位置，向所述观看者提供所述非视觉反馈以表明已经触发了所述视觉改变；如果在预定的时间帧内未接收到取消改变输入，则控制所述显示设备显示所述视觉改变；以及如果在所述预定的时间帧内接收到所述取消改变输入，则控制所述显示设备以避免显示所述视觉改变。2.根据权利要求1所述的方法，其中，所述视觉改变包括：从包含第一内容音频的第一内容流切换到第二内容流；并且提供所述非视觉反馈包括：在所述预定的时间帧减小所述第一内容音频的音量。3.根据权利要求1所述的方法，其中，第二内容流包括第二内容音频，并且提供所述非视觉反馈还包括：在所述预定的时间帧增加所述第二内容音频的音量。4.根据权利要求1所述的方法，其中，所述非视觉反馈包括耳听信号。5.根据权利要求1所述的方法，其中，所述第一凝视位置对应于第一内容流，并且所述第二凝视位置对应于第二内容流。6.一种用于提供音频反馈以警告显示设备的观看者已经触发了...

【专利技术属性】
技术研发人员：W·威莱拉特，I·埃登，V·图克拉尔，D·尼斯特，V·普拉迪普，
申请(专利权)人：微软技术许可有限责任公司，
类型：发明
国别省市：美国;US