用于写图形设备的用户接口制造技术

一种通过用户创建的图形元素来实现用于设备的用户接口的方法和系统。所述方法包括识别用户创建的图形元素图标。一旦识别，则访问与所述图形元素图标相关的功能并且根据该功能提供输出。所述功能与所述图形元素图标持久关联。通过与所述图形元素图标的交互来执行菜单选择和导航。可听见地再现与所述图形元素图标关联的选项的列表。响应于对所述选项之一的选择，调用所选的选项。

【技术实现步骤摘要】

实施例涉及交互式设备、计算机、电子设备、装置、玩具等的控制和使用。实施例涉及一种实施用于采用所写图形元素的设备的用户接口的方法和系统。
技术介绍
如光学读取器或光学笔的设备一般发射从表面反射到检测器或成像器的光。当所述设备相对于所述表面移动时(或反过来)，快速捕捉连续图像。通过分析所述图像，可跟踪所述光学设备相对于所述表面的移动。一种光学笔与其上打印了很小的点的纸片一起使用。所述点以具有约0.3毫米(0.01英寸)的标称间隔的图案而打印于页面上。所述页面上任何区域内的点的图案对该区域是唯一的。光学笔本质上是获取所述表面的快照，也许一秒100次或更多。通过解释每次快照所捕捉的点位置，光学笔可精确地确定其相对于页面的位置。利用光学笔相对于表面的位置的信息的应用已经设计或正在设计。具有蓝牙或其它无线能力的光学笔可链接到其它设备并可用来发送电子邮件(e-mail)或传真。嵌入式计算机系统增强的能力及其能够实现的功能的复杂度一直需要一种更直观、用户友好的利用这种能力的方式。典型的现有技术光学笔通过用户操作光学笔的一个或多个按钮/开关或控制以激活一个或多个软件程序、例程、嵌入式设备等来实施其预期的功能。所述笔可包括计算机系统或与计算机系统通信。在激励这样的控制时，所述笔设备执行其预期的功能。通过笔本身上设置的有限数量和配置的开关、按钮等或者任何远程耦合的计算机系统设备来利用功能越来越强大的光学笔的能力并非一种令人满意的安排。一种现有技术解决方案使用光学笔来识别用户限定的命令，并使用该命令调用笔的某种功能(如，PCT申请WO/01/48590A1)。例如，用户的书写可识别(如，实时地)和解释为用于光学笔的命令。该解决方案的缺点是对笔的功能的交互和控制需要实时识别用户的手写(如当用户在纸片上写命令时)。该解决方案令人不满意之处在于与光学笔的较复杂功能性的交互需要用户重复写下一个或多个命令以访问笔所提供的不同选择、选项或功能。虽然对于非常简单的、单步骤类型的应用(如“关断”“存储”等)来说该解决方案可能是令人满意的，在需要较复杂、令人满意、丰富的功能性的情况下，该解决方案就过于麻烦而有限了。
技术实现思路
因此，这样一种用户接口方法和系统将是有价值的其使能与具有与其相关联的计算机系统的光学笔的更复杂的功能性的交互，并使能对所述笔设备提供的不同选择、选项和功能的更有效的访问。另外所期望的是一种可用来与驻留于笔设备上或与笔设备通信的操作系统交互的方法和交互式接口。根据本专利技术的实施例提供这些和其它优点。在一个实施例中，本专利技术实施为一种方法，其实现采用在表面上的用户创建或写的图形元素和/或打印的图形元素的设备的用户接口。所述方法包括识别表面上的所创建的图形元素图标(如，用户所创建的)。一旦识别，访问与该图形元素图标相关的功能并提供根据该功能的输出。所述功能性可驻留于笔设备上而且可使用笔设备来写出所写图形元素。图形元素图标可以是用户在表面上创建的符号、字符或标记，其由该设备的解释功能性(interpreting functionality)(如，光学传感器、嵌入式计算机系统等)同样识别。输出典型地为经由音频输出设备(如，耦合到或驻留于该设备的扬声器)提供的音频输出。所述功能与所述图形元素图标持久地相关联，使得通过随后笔设备对该图形元素图标的激励(如，敲击)能够实现对该功能的随后访问。在一个实施例中，选择所写或打印的图形元素图标使得笔设备可听见地再现可供用户写出或选择的进一步选择的列表。在这种情况下，第一图形元素图标起菜单项目的作用，当选择它时，使得笔设备再现与该第一图形元素图标相关的子菜单项目。任何或所有所述子菜单项目可写在表面上且本身得以选择，由此使得笔设备执行相关功能性。概括而言，本书面内容公开一种用于通过用户创建的图形元素来实现设备的用户接口的方法和系统。该方法包括识别用户创建的图形元素图标。一旦识别，访问与图形元素图标相关的功能并提供根据该功能的输出。该功能与该图形元素图标持久关联。菜单选择和导航通过与图形元素图标交互来实现。可听见地再现与该图形元素图标相关联的选项列表。响应于选项之一的选择，调用所选选项。通过阅读在附图中图示的下面的详细描述，本领域技术人员将理解本专利技术的这些和其它目的和优点。附图说明引入并构成本说明书的一部分的附示了本专利技术的实施例并且与本说明一起用来解释本专利技术的原理图1是其上可实现本专利技术的实施例的一设备的框图。图2是其上可实现本专利技术的实施例的另一设备的框图。图3示出根据本专利技术一实施例的设置有标记图案的示范性纸片。图4示出根据本专利技术一实施例的示范性纸片上的标记图案的放大。图5示出根据本专利技术一实施例的设备用户接口过程步骤的计算机控制的流程图。图6示出根据本专利技术一实施例的分层设备用户接口过程步骤的计算机控制的流程图。图7示出根据本专利技术一实施例的菜单项目树目录。图8A示出根据本专利技术一实施例的菜单项目可听见提示过程。图8B示出根据本专利技术一实施例的菜单项目选择过程。图8C示出根据本专利技术一实施例的子菜单项目选择过程。图9示出根据本专利技术一实施例的表面上的多个不同类型的图形项目图标。具体实施例方式现在将详细参考本专利技术的优选实施例，其实例在附图中示出。虽然将结合优选实施例来描述本专利技术，应该理解其并非用来将本专利技术限制为这些实施例。相反，本专利技术意欲覆盖可包括在所附权利要求所限定的精神和范围内的替换、修改和等效形式。另外，在以下对本专利技术实施例的详述中，提出了很多具体细节以使本专利技术得到彻底理解。然而，本领域普通技术人员应理解的是，没有这些具体细节也可实施本专利技术。在其它实例中，为了不模糊本专利技术的实施例的方面，未详细描述公知的方法、过程、部件和电路。符号和术语以下详细描述的一些部分是按照过程、步骤、逻辑块、处理及对计算机存储器内数据位的操作的其它符号表示来提出的。这些描述和表示是数据处理领域的技术人员所使用的、为了将其工作的实质最有效地传达给该领域其它技术人员的手段。这里，过程、计算机执行的步骤、逻辑块、进程等通常被当作导致期望结果的自相一致的步骤或指令序列。所述步骤需要对物理量的物理操纵。通常，尽管不必要，这些量是电或磁信号的形式，能够在计算机系统中存储、传递、组合、比较或另外操纵。已经证明，主要是为了公共使用的原因，将这些信号称作位、值、元素、符号、字符、项目、数字等有时是方便的。然而，应牢记在心的是，所有这些和相似的术语应与适当的物理量相关联并且仅仅是应用于这些量的方便标记。除非特别指明，否则如以下描述中所显而易见的，应理解在整个本专利技术中，讨论所用的术语，如“处理”、“计算”、“配置”、“产生”等，指的是微控制器、计算机系统或类似电子计算设备的动作或过程，其将寄存器和存储器内的表示为物理(电子)量的数据操纵或转换为类似地表示为物理量的其它数据。本专利技术的实施例图1是其上可实施本专利技术的实施例的笔设备100的框图。通常，笔设备100可称为光学设备，更具体地可称为光学读取器、光学笔或数字笔。该设备可包括计算机系统和驻留其上的操作系统。应用程序也可驻留其上。在图1的实施例中，笔设备100包括壳体62内的处理器32。在一个实施例中，壳体62具有笔或其它书写或标记工具或装置的形式。处理器32可操作为处理用来实施笔设备100功能的本文档来自技高网...

【技术保护点】
一种用于解释用户命令的方法，包括：识别表面上的所创建的图形元素图标；访问与所述图形元素图标相关的功能；根据所述功能提供输出；以及将所述功能与所述图形元素图标相关联。

【技术特征摘要】
US 2005-1-12 11/034,4911.一种用于解释用户命令的方法，包括识别表面上的所创建的图形元素图标；访问与所述图形元素图标相关的功能；根据所述功能提供输出；以及将所述功能与所述图形元素图标相关联。2.如权利要求1的方法，进一步包括通过存储所述功能与所述图形元素图标的关联，响应于对所述图形元素图标的随后的选择，使能对所述功能的随后的访问。3.如权利要求2的方法，其中对所述功能与所述图形元素图标的关联的存储实现了经由与所述图形元素图标的交互、在预定量的时间内的所述功能的持久可用性。4.一种用于解释用户命令的方法，包括识别表面上的所创建的图形元素图标；访问与所述图形元素图标相关的功能；根据所述功能提供音频输出；以及通过存储所述功能与所述图形元素图标的关联，使能对所述功能的随后的访问，其中，对所述关联的存储实现了经由与所述图形元素图标的交互、在预定量的时间内的所述功能的持久可用性。5.如权利要求1或4的方法，其中所述图形元素图标由笔设备创建在所述表面上。6.如权利要求1或4的方法，进一步包括实施功能的分层结构；以及经由图形元素图标的对应分层结构来提供对所述功能分层结构的访问。7.如权利要求4的方法，进一步包括提供与所述功能相关的至少一个音频提示来指示所述功能的操作方式。8.如权利要求7的方法，进一步包括识别对所述图形元素图标的至少一个激励以选择第一分层层次功能；提示创建第二图形元素图标；识别对所述第二图形元素图标的至少一个激励以选择第二分层层次的功能；提供与第二分层层次功能相关的音频输出；以及将所述第二分层层次功能与所述第二图形元素图标相关联。9.一种设备，包括用于检测来自表面的图像的光学传感器；耦合到所述传感器的处理器；以及耦合到所述处理器的存储器，所述存储器存储指令，当执行所述指令时，使得所述设备实施一种用于解释用户命令的方法，所述方法包括识别表面上的所创建的图形元素图标；访问与所述图形元素图标相关的功能；根据所述功能提供输出；以及将所述功能与所述图形元素图标相关联。10.如权利要求9的设备，其中所述输出包括与所述功能相关的音频输出。11.如权利要求9的设备，进一步包括通过存储所述功能与所述图形元素图标的关联，使能对所述功能的随后的访问。12.如权利要求11的设备，其中对所述功能与所述图形元素图标的关联的存储实现了经由与所述图形元素图标的交互、在预定量的时间内的所述功能的持久可用性。13.如权利要求9的设备，进一步包括书写装置，并且其中所述图形元素图标由所述书写装置创建在所述表面上。14.如权利要求13的设备，其中所述表面包括纸片。15.如权利要求9的设备，其中所述方法进一步包括通过解释对所述图形元素图标的至少一个激励来访问与所述图形元素图标相关的多个功能之一，其中所述至少一个激励选择所述多个功能之一。16.如权利要求15的设备，其中所述至少一个激励包括识别对所述图形元素图标的至少一个敲击。17.如权利要求15的设备，其中所述方法进一步包括当选择了所述多个功能之一时提供多个音频输出之一。18.如权利要求15的设备，其中所述多个功能包括预定选项菜单。19.如权利要求15的设备，其中所述多个功能包括与所述图形元素图标相关的应用的多个配置选项。20.如权利要求19的设备，其中所述多个配置选项的至少一个包括所述应用的默认配置。21.如权利要求19的设备，其中所述方法进一步包括实施功能的分层结构；以及经由图形元素图标的对应分层结构来提供对所述功能分层结构的访问。22.如权利要求21的设备，其中所述方法进一步包括识别对所述图形元素图标的至少一个激励以选择第一分层层次功能；提示创建第二图形元素图标；识别对所述第二图形元素图标的至少一个激励以选择第二分层层次功能；提供与所述第二分层层次功能相关的音频输出；以及将所述第二分层层次功能与所述第二图形元素图标相关联。23.如权利要求9的设备，其中所述方法进一步包括提供与所述功能相关的至少一个音频提示以指示该功能的操作方式。24.一种与基于笔的计算机系统交互的方法，所述方法包括识别对可写表面上的第一图形图标的选择，所述选择是使用所述基于笔的计算机系统的书写装置来执行的；响应于所述选择，可听见地再现与所述第一图形图标相关联的第一选项的列表，其中所述第一选项可操作为由所述基于笔的计算机系统来调用；以及响应于对所述第一选项的一个的选择，调用所述第一选项的所述的一个。25.如权利要求24的方法，其中所述第一选项包括至少一个待调用的应用。26.如权利要求24的方法，其中所述第一选项的所述一个是驻留于所述基于笔的计算机系统的应用程序。27.如权利要求24的方法，其中所述可听见地再现所述第一选项的所述列表包括响应于所述书写装置对所述第一图形图标的选择，以循环的方式每次一个地、可听见地再现每个所述第一选项。28.如权利要求27的方法，进一步包括在可听见地再现所述第一选项的所述一个后，响应于所述书写装置选择所述第一图形图标的部分，辨识对所述第一选项的所述一个的选择。29.如权利要求28的方法，其中所述第一图形图标的所述部分是复选标记的符号。30.如权利要求24的方法，其中所述第一图形图标是用户写在所述表面上的并且进一步包括自动辨识所述第一图形图标，并且其中使用所述基于笔的计算机系统的处理器来执行所述自动辨识所述第一图形图标。31.如权利要求24的方法，其中所述第一图形图标预打印在所述表面上。32.如权利要求24的方法，其中所述第一图形图标是菜单项目并且其中所述第一选项是可操作为由所述基于笔的计算机系统调用的选项分层结构内的子菜单项目。33.如权利要求24的方法，其中所述第一选项包括具有相关联的第二图形图标的选项，并且进一步包括识别对所述可写表面上的所述第二图形图标的选择，所述选择是使用所述基于笔的计算机系统的所述书写装置来执行的；响应于所述选择，可听见地再现与所述第二图形图标相关联的第二选项的列表，其中所述第二选项可操作为由所述基于笔的计算机系统来调用；以及响应于对所述第二选项的一个的选择，调用所述第二选项的所述的一个。34.如权利要求33的方法，其中所述第二选项包括至少一个待调用的应用。35.如权利要求33的方法，其中所述第二选项的所述一个是驻留于所述基于笔的计算机系统的应用程序。36.如权利要求33的方法，其中所述可听见地再现所述第二选项的所述列表包括响应于所述书写装置对所述第二图形图标的选择，以循环的方式每次一个地、可听见地再现每个所述第二选项。37.如权利要求36的方法，进一步包括在可听见地再现所述第二选项的所述一个后，响应于所述书写装置选择所述第二图形图标的部分，辨识对所述第二选项的所述一个的选择。38.如权利要求33的方法，其中所述第二图形图标是用户写在所述表面上的并且进一步包括自动辨识所述第二图形图标，并且其中使用所述基于笔的计算机系统的处理器来执行所述自动辨识所述第二图形图标。39.一种基于笔的计算机系统，包括书写装置；扬声器；耦合到总线的存储器单元；耦...

【专利技术属性】
技术研发人员：詹姆斯马格拉夫，亚历山大奇泽姆，特拉西L埃奇库姆，
申请(专利权)人：跳蛙企业股份有限公司，
类型：发明
国别省市：US[美国]