具有自动化提取的辅助层制造技术

一般而言，本公开涉及通过计算设备输出应用的图形用户界面并用于在与所述计算设备操作性耦合的显示组件处显示的技术。所述计算设备从包括在所述图形用户界面中的内容确定场镜数据。所述计算设备至少部分基于所述场镜数据，进一步确定与所述图形用户界面中包括的内容场镜相关的帮助指示。所述计算设备输出所述帮助指示。

Auxiliary layer with automatic extraction

Generally speaking, the present disclosure relates to the technology of displaying graphical user interfaces by computing devices and displaying them at display components coupled with computing devices. The computing device determines the field mirror data from the content included in the graphical user interface. The computing device is at least partly based on the data of the field mirror, and further determines the help instructions related to the content field mirror included in the graphical user interface. The calculation device outputs the help instructions described.

【技术实现步骤摘要】
【国外来华专利技术】具有自动化提取的辅助层
技术介绍
计算设备(例如，智能手机，平板电脑，智能手表，活动跟踪器，平视显示组件等)可以输出屏幕内容用于显示。例如，计算设备可以输出包括一个或多个图形元素的图形用户界面(GUI)。计算设备可以允许用户基于各种不同的输入，例如单点触控和多点触控手势、语音输入、定点设备和键盘，与所述设备上的信息交互。为了帮助用户查找信息或执行各种任务，一些计算设备可以作为自动化的个人助理操作。例如，所述计算设备可以输出建议以便减少定位信息或执行任务所需的用户工作量。然而，一些计算设备可能产生与用户的相关性有限的建议。在这样的情况下，用户可能需要花费额外的工作来定位信息或执行任务。附图说明图1是根据本公开的一个或多个方面，示出包括计算设备的示例性系统的概念图，所述计算设备基于显示组件的确定的屏幕场镜提供帮助指示。图2是根据本公开的一个或多个方面，示出示例性计算设备的框图。图3是根据本公开的一种或多种技术，示出输出屏幕内容以在远程设备处显示的示例性计算设备的框图。图4是根据本公开的一个或多个方面，示出包括服务器设备的示例性系统的概念图，所述服务器设备基于远程显示组件的确定的屏幕场镜提供帮助本文档来自技高网...

【技术保护点】
一种方法，包含：通过计算设备输出应用的图形用户界面并用于在与所述计算设备操作性耦合的显示组件处显示；从在被输出用于显示的所述图形用户界面中包括的内容确定场镜数据；至少部分基于所述场镜数据，确定与在所述图形用户界面中包括的所述内容场镜相关的帮助指示；以及通过所述计算设备输出所述帮助指示。

【技术特征摘要】
【国外来华专利技术】2015.05.27 US 62/167,257;2015.07.21 US 14/804,8611.一种方法，包含：通过计算设备输出应用的图形用户界面并用于在与所述计算设备操作性耦合的显示组件处显示；从在被输出用于显示的所述图形用户界面中包括的内容确定场镜数据；至少部分基于所述场镜数据，确定与在所述图形用户界面中包括的所述内容场镜相关的帮助指示；以及通过所述计算设备输出所述帮助指示。2.根据权利要求1所述的方法，其中确定所述场镜数据包含：访问所述计算设备处的视图层次；以及识别所述视图层次在所述图形用户界面中表现的视图对象。3.根据权利要求2所述的方法，还包含：提取所述视图对象的至少一个属性；以及至少部分基于所述至少一个属性，确定所述场镜数据的至少一部分。4.根据权利要求1-3中的任一项所述的方法，其中来自在所述图形用户界面中包括的内容的所述场镜数据是主要场镜数据，并且其中确定所述帮助指示包含：至少部分基于所述图形用户界面的主要场镜数据和次要场镜数据来确定所述帮助指示，其中所述次要场镜数据包含位置、时间、用户身份、云计算数据、日历信息、联系人信息、在先应用、以及当前时间和所述在先应用被运行的时间之间的时间关系中的至少一个。5.根据权利要求1-4中的任一项所述的方法，其中确定所述场镜数据包含：捕获所述应用的图形用户界面的屏幕截图；对所述屏幕截图进行图像分析；以及至少部分基于所述图像分析确定所述场镜数据。6.根据权利要求5所述的方法，其中进行所述图像分析包含：对所述屏幕截图进行光学字符识别处理以确定所述屏幕截图中的一个或多个字符；以及至少部分基于所述一个或多个字符确定所述场镜数据。7.根据权利要求1-6中的任一项所述的方法，其中确定所述场镜数据包含：分析所述应用的视图层次；对于所述视图层次中包括的视图对象：识别所述视图对象；确定与所识别的视图对象相关联的信息；以及至少部分基于所确定的信息来确定所述场镜数据的至少一部分。8.根据权利要求1-7中的任一项所述的方法，其中确定所述帮助指示还包含：向远程计算设备发送所述场镜数据，其中所述远程计算设备从所述场镜数据确定用于所述帮助指示的信息；从所述远程计算设备接收用于所述帮助指示的所述信息；以及至少部分基于所述信息，生成用于宣告的所述帮助指示。9.一种计算设备，包含：至少一个处理器；和至少一个模...

【专利技术属性】
技术研发人员：托马斯·莱蒙·卡尔洛，阿帕纳·陈那帕莱嘎达，迈克尔·安德鲁·克莱龙，乌拉什·基拉兹吉，丹尼尔·马克·贾坦·希普拉科夫，奥塔尔·汉松，杰夫·博特兹，黛安娜·哈克伯恩，
申请(专利权)人：谷歌公司，
类型：发明
国别省市：美国,US