利用亮度变化来确定用户特征制造技术

本公开涉及用亮度变化来确定用户特征。本文公开的一些实施方式基于用户对其中一部分或全部内容快速变得更亮或更暗的亮度变化事件的生理(例如，瞳孔)响应来识别用户的状态(例如，专心、分心、走神等)。走神等)。走神等)。

【技术实现步骤摘要】
利用亮度变化来确定用户特征
[0001]本申请是申请号为202080054433.9、申请日为2020年7月22日、专利技术名称为“利用亮度变化来确定用户特征”的专利技术专利申请的分案申请。
[0002]相关申请的交叉引用
[0003]本专利申请要求于2019年7月30日提交的美国临时专利申请序列号62/880,206和于2020年7月21日提交的美国专利申请序列号16/934,071的权益，上述专利申请中的每个专利申请全文以引用方式并入本文。


[0004]本公开整体涉及在电子设备上显示内容，并且具体地涉及用于评估正在观看电子设备上显示的内容的用户的状态的系统、方法和设备。

技术介绍

[0005]当观看电子设备上的内容时，用户的状态(例如，分心、专心等)可能对用户的体验具有显著影响。基于能够确定用户的状态，内容创建者和显示系统可能能够提供用户更可能享受、理解和学习的更好且更定制的用户体验。

技术实现思路

[0006]内容的属性可导致观看内容的用户的身体中的特定类型的生理响应。例如，用户的瞳孔可以响应于内容的亮度变化而自动经历扩张或收缩，例如，当内容从大部分昏暗变化到大部分明亮时，反之亦然。本文的具体实施认识到用户对此类内容变化的生理响应可取决于用户的状态。例如，用户的瞳孔对亮度快速变化的响应的幅度或动态可根据用户的状态而不同。例如，如果内容的亮度在用户是专心且专注的时候增加，则与用户在相同亮度增加期间空闲或疲劳的情况相比，瞳孔响应可能较慢且在幅度方面更小。本文公开的一些具体实施基于用户对其中一部分或全部内容快速变得更亮或更暗的亮度变化事件的生理(例如，瞳孔)响应如何来识别用户的状态(例如，专心、分心、走神等)。一些具体实施基于检测用户状态而通过提供替代内容和/或建议(例如，用户休息)来在用户体验期间改进用户的享受和/或理解。
[0007]在一些具体实施中，具有处理器、显示器和传感器的设备实施一种方法。该方法识别与显示器上的内容相关联的亮度变化事件。该亮度变化事件可能是对用户观看的更亮或更暗内容的相对快速变化。亮度变化事件可以在用户浏览内容时自然地发生、或有意地嵌入该内容中以用于触发可以用于评估状态的响应。该方法使用传感器来获得感知与显示器上的内容相关联的亮度变化事件的用户的生理响应(例如，瞳孔扩张或收缩)。在一些具体实施中，例如，头戴式设备(HMD)上的面向内的相机捕获用户的眼睛的图像，并且通过计算机视觉技术确定瞳孔直径/半径。该方法基于瞳孔响应来评估用户的状态。可以基于瞳孔响应的幅度和/或动态来确定该状态。在一些具体实施中，将瞳孔响应与用户自身的先前响应进行比较以确定用户的当前状态。在一些具体实施中，基于多个用户对各种类型的内容的
瞳孔响应来评估瞳孔响应，例如，比较用户的当前瞳孔响应与对类似的亮度变化事件的典型或平均用户响应。在一些具体实施中，使用统计的或基于机器学习的分类技术来确定状态。
[0008]根据一些具体实施中，非暂态计算机可读存储介质中存储有指令，所述指令是计算机可执行的以执行或使得执行本文所述的任何方法。根据一些具体实施，一种设备包括一个或多个处理器、非暂态存储器以及一个或多个程序；该一个或多个程序被存储在非暂态存储器中并且被配置为由一个或多个处理器执行，并且该一个或多个程序包括用于执行或使得执行本文所述方法中的任一种的指令。
附图说明
[0009]因此，本公开可被本领域的普通技术人员理解，更详细的描述可参考一些例示性具体实施的方面，其中一些具体实施在附图中示出。
[0010]图1示出了根据一些具体实施的显示内容并从用户获取生理数据的设备。
[0011]图2示出了图1的用户的瞳孔，其中瞳孔的直径变化。
[0012]图3是用于基于用户的瞳孔对亮度变化事件的响应如何来识别用户的状态的方法的流程图表示。
[0013]图4是示出示例性中央凹亮度记录的图表。
[0014]图5是示出对亮度增加的瞳孔半径响应的图表。
[0015]图6是示出对亮度减小的瞳孔半径响应的图表。
[0016]图7是示出根据一些具体实施的示例性设备的设备部件的框图。
[0017]图8是根据一些具体实施的示例性头戴式设备(HMD)的框图。
[0018]根据通常的做法，附图中示出的各种特征部可能未按比例绘制。因此，为了清楚起见，可以任意地扩展或减小各种特征部的尺寸。另外，一些附图可能未描绘给定的系统、方法或设备的所有部件。最后，在整个说明书和附图中，类似的附图标号可用于表示类似的特征部。
具体实施方式
[0019]描述了许多细节以便提供对附图中所示的示例具体实施的透彻理解。然而，附图仅示出了本公开的一些示例方面，因此不应被视为限制。本领域的普通技术人员将会知道，其他有效方面或变体不包括本文所述的所有具体细节。此外，没有详尽地描述众所周知的系统、方法、部件、设备和电路，以免模糊本文所述的示例性具体实施的更多相关方面。
[0020]图1示出了物理环境5，其包括具有显示器15的设备10。该设备10向用户25显示内容20。该内容可以包括视频、展示、其他时变内容或作为计算机生成的现实(CGR)环境的一部分呈现的内容。设备10被配置为经由传感器35从用户25获取生理数据(例如，瞳孔数据、心电图(ECG)数据)。
[0021]虽然设备10被示出为手持式设备，但是其它具体实施涉及用户与之交互但无需手持的设备和由用户佩戴的设备。在一些具体实施中，如图1所示，设备10是手持电子设备(例如，智能手机或平板电脑)。在一些具体实施中，设备10是膝上型计算机或台式计算机。在一些具体实施中，设备10具有触控板，并且在一些具体实施中，设备10具有触敏显示器(也称
为“触摸屏”或“触摸屏显示器”)。在一些具体实施中，设备10是可穿戴头戴式显示器(“HMD”)。
[0022]此外，尽管本文讨论的该示例和其他示例示出了物理环境5中的单个设备10，但是本文公开的技术适用于多个设备以及多个现实世界环境。例如，设备10的功能可由多个设备执行。
[0023]在一些具体实施中，设备10包括用于检测眼睛位置和眼睛移动的眼睛跟踪系统。例如，眼睛跟踪系统可包括一个或多个红外(IR)发光二极管(LED)、眼睛跟踪相机(例如，近红外(NIR)照相机)和向用户25的眼睛发射光(例如，NIR光)的照明源(例如，NIR光源)。此外，设备10的照明源可发射NIR光以照明用户25的眼睛，并且NIR相机可捕获用户25的眼睛的图像。在一些具体实施中，可分析由眼睛跟踪系统捕获的图像以检测用户25的眼睛的位置和移动，或检测关于眼睛的其他信息诸如瞳孔扩张或瞳孔直径。此外，从眼睛跟踪图像起估计的注视点可使得能够与内容进行基于注视的交互。
[0024]在一些具体实施中，设备10具有图形用户界面(GUI)、一个或多个处理器、存储器以及存储在存储器中的用于执行多个功能的一个或多个模块、程序或指令集。在一些具体实施中，用户25通过触敏表面上的手指接触和手势与本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种用于评估用户的状态的方法，所述方法包括：在包括处理器、显示器和传感器的设备处：识别与所述显示器上的内容相关联的亮度变化事件；使用所述传感器获得感知与所述显示器上的所述内容相关联的所述亮度变化事件的用户的瞳孔响应；确定所述用户对所述亮度变化事件的所述瞳孔响应的幅度；基于感知所述亮度变化的所述用户的所述瞳孔响应的幅度来评估所述用户的状态，其中，相对较大的所述瞳孔响应的幅度被确定为对应于第一状态，而相对较小的所述瞳孔响应的幅度被确定为对应于与所述第一状态不同的第二状态；以及基于所述用户的状态提供响应。2.根据权利要求1所述的方法，其中所述响应包括对所述用户的建议、反馈或通知。3.根据权利要求1所述的方法，其中所述响应包括让用户休息的建议。4.根据权利要求1所述的方法，其中所述响应包括让用户重新观看所述内容的特定部分的建议。5.根据权利要求1所述的方法，其中所述响应包括让用户改变内容呈现速度的建议。6.根据权利要求1所述的方法，其中所述响应包括标识其他内容中的相似时刻的建议。7.根据权利要求1所述的方法，其中所述响应包括让用户在特定时间或在特定条件下观看所述内容或其他内容的建议。8.根据权利要求1所述的方法，其中所述响应包括为用户提供替代内容以供观看而代替所述内容。9.根据权利要求1所述的方法，其中所述响应包括自动调整所述内容。10.根据权利要求1所述的方法，其中所述响应包括自动调整内容显示参数。11.根据权利要求1所述的方法，其中所述响应包括将所述内容分成多条，其间具有休息。12.根据权利要求1所述的方法，其中所述响应包括向所述内容的创建者提供反馈。13.根据权利要求1所述的方法，其中所述响应包括向所述内容的创建者提供反馈，标识所述内容的与表现出所述状态的一个或多个用户相关联的部分。14.一种系统，包括：非暂态计算机可读存储介质；以及一个或多个处理器，所述处理器耦接到所述非暂态计算机可读存储介质，其中所述非暂态...

【专利技术属性】
技术研发人员：I，
申请(专利权)人：苹果公司，
类型：发明
国别省市：