基于由移动设备记录的图像的内容的数据访问制造技术

本发明专利技术的实施例涉及使用图像数据和情境性数据来基于一个或多个先前获得的图像确定关于场景的信息。诸如图像捕捉的位置之类的情境性数据可用于确定与情境性数据相关的先前获得的图像，和其他位置相关信息，例如告示牌位置。即使在低分辨率设备（例如蜂窝电话）的情况下，也可以在先前获得的图像和新捕捉的图像之间比较图像属性，例如直方图或光学辨识的字符。在预定的阈值内匹配的属性指示出匹配的图像。关于匹配的先前获得的图像的内容的信息可被提供回给捕捉了新图像的用户。用户简档数据可细化内容信息。内容信息还可用作搜索字词，以用于额外的搜索或其他处理。

【技术实现步骤摘要】
【国外来华专利技术】
本专利技术涉及基于成像访问信息，更具体而言涉及利用具有相似的情境关连元素 (context correlation element)(例如邻近的位置)的多个图像来确定与图像的内容相关的信肩、ο
技术介绍
将信息输入到移动电话或其他移动设备中是困难的。输入信息通常涉及在小按 键上键入以将一小组单词输入到搜索窗口中。在键入统一资源定位符(URL)和其他特殊 数据所需的特殊字符时，这就更加困难了。取代键入，一些移动设备使用户可以输入语 音命令。然而，语音命令的数目和类型通常是非常有限的。这些移动设备根据语音命令 来解释特殊字符也是很困难的。另外，用户常常对与其看到的事物相关的信息感兴趣，这些事物是很难描述成 语音命令或音频输入的。许多移动设备现在包括数字相机。移动设备用户通常可以捕捉 图像，并且下载该图像和/或利用消息将该图像传输到另一计算设备。这些相机通常比 键盘更便宜，但也通常具有较低的分辨率，例如三百万像素或更低。这些低分辨率相机 通常不适合于对象辨识。附图说明参考以下附图描述本专利技术的非限制性和非穷举性实施例。在附图中，除非另有 指明，否则相似的标号在各图中始终指代类似的部件。为了更好地理解本专利技术，现在将参考以下应联系附图来阅读的“具体实施方 式”部分，附图中图1图示了本专利技术可在其中实现的示例性系统的一个实施例的示图；图2示出了示例性移动设备的一个实施例的示意图；图3图示了示例性网络设备的一个实施例的示意图；图4图示了用于基于所捕捉的图像来确定和处理图像相关信息的示例性整体逻 辑的流程图；并且图5图示了用于基于所捕捉的图像来确定搜索字词和结果的示例性逻辑的流程 图。具体实施例方式现在将在下文中参考附图更全面地描述本专利技术，附图形成说明书的一部分，并且以图示方式示出了可用来实现本专利技术的具体示例性实施例。然而，本专利技术可以用许 多不同形式来实现并且不应当被解释为限于这里记载的实施例；更确切地说，提供这些 实施例是为了使本公开详尽并完整并且会将本专利技术的范围完全地传达给本领域的技术人 员。本专利技术可以实现为方法或设备，等等。从而，本专利技术可以采取完全硬件的实施例 或者组合软件和硬件方面的实施例的形式。以下详细描述因此不应当从限制意义上来理 解。在整个说明书和权利要求中，除非上下文明确地另有规定，否则以下术语采取 与这里明确关联的含义。这里使用的短语“在一个实施例中”不一定指的是同一实施 例，但也可以指同一实施例。另外，这里使用的短语“在另一实施例中”不一定指的是 一不同实施例，但它也可指一不同实施例。因此，如下所述，本专利技术的各种实施例可以 很容易被组合，而不脱离本专利技术的范围或精神。此外，这里使用的术语“或”是包含性“或”运算符，并且等同于术语“和 /或”，除非上下文明确地另有规定。术语“基于”不是排他的并且允许基于没有记载 的其他因素，除非上下文明确地另有规定。此外，在整个说明书中，“a”、an和 “the”的含义包括多数形式。“在...中”的含义包括“在...中”和“在...上”。简言之，本专利技术的实施例涉及使用图像数据和情境性数据来确定关于场景的信 息。内容信息可被直接访问并返回给用户，可被用作搜索字词，用作其他处理的输入， 或者用于其他目的。所捕捉的图像数据、先前图像分析数据、简档数据和从许多用户收 集到的其他数据被用于更好地确定所捕捉的图像的主题以及用户最可能期望的信息。不 是依赖于高分辨率图像和复杂的图像处理技术，而是将与图像和位置相关的各种形式的 数据的集合用作基于社区的辨识。图像数据可包括邻近同一位置的一个或多个图像。这些图像可由许多不同的用 户利用不同的相机或其他设备拍摄。这(一个或多个)图像可包括非文本信息，例如徽 标、地标等等。作为附加或替换，这(一个或多个)图像可包括文本信息，例如标牌、告 示牌等等上的字符串。情境性数据可包括拍摄每个图像的位置、与拍摄一个或多个这种 图像的移动设备相关联的用户简档，等等。作为附加或替换，情境性数据可包括关于该 位置的已知信息，例如商家、建筑物、街道名称、关于该位置附近的一个或多个用户执 行的动作的信息，等等。可以分析图像以确定标识出图像的特性的直方图。如果图像分 辨率允许，可执行某种对象辨识。还可分析图像以定位和辨识图像内的字符。可以相对 于同一用户和/或其他用户对其他图像的分析来评估这些图像分析，以确定图像的可能 内容。类似地，可以评估情境性数据以确定或修改图像的可能内容和/或期望的关于图 像的可能信息。在一个实施例中，可以将所确定或辨识的关键字、类别或其他信息提交 给数据搜索系统，以取回搜索结果、来自具体辨识的统一资源定位符(URL)的网页、电 话簿信息、广告或其他结果。作为附加或替换，可对这些结果进行过滤、区分优先级、 分类或其他方式的进一步处理。本专利技术的实施例识别用户拍摄的对象的含义，并且使用此含义作为对更多信息 的请求。传统上，图像评估是利用图像辨识算法、嵌入码或条码来完成的。通常，这 些图像线索是不可靠的，图像质量太低，并且单是图像辨识算法无法提供期望水平的精 确度。在拥有了足够的情境性信息的情况下，基于已知的对象位置、先前搜索的结果等等，本专利技术的实施例可以迅速地判定用户拍摄了一张告示牌的照片，该告示牌广告最近 的动作电影或其他具体信息。本专利技术的实施例可以向用户示出一定制显示屏，该显示屏 示出关于图像的主题(例如最近的电影)的更多信息。额外信息可包括最邻近的放映的 位置和时间和/或其他信息。本专利技术的实施例使用尽可能多的辅助信息来辨别用户在图像中正看着什么。此 额外信息在这里通常被称为情境或情境性信息。情境一般包括相机的位置、照片拍摄于 何时、时间、其他用户在此位置处拍摄照片的概率、其他照片的内容(其中一些可能是 利用高分辨率相机拍摄的)、用户先前寻找过的信息、在给定同一情境的情况下不同用户 选择了某一种信息的可能性、邻近此位置的对象的已知位置，等等。可以通过许多不同的方式来使用情境。情境可用于使搜索偏向于有可能存在于 用户拍摄的照片中的对象。中央服务器可从用户接收低质量图像，并利用诸如地点敏感 型哈希之类的算法执行图像匹配，以找出同一位置中同一对象的更好质量的图像。因为 服务器过去曾接收更好的图像，所以服务器已知分析过更好的图像。通过对更好图像的 这种先前分析所获得的信息可能导致先前的用户点击了所产生的链接或者执行了被服务 器跟踪的其他动作。从而，服务器一般拥有与可能希望的关于图像的主题的信息有关的 更多情境性信息。还可利用概率模型来对情境性信息编码，这提供了关于图像的主题的 额外情境。例如，看到Starbucks店面的概率在城市地区可能较高。作为另一示例，位 置和其他情境可用于辨识独特的社区信息，例如语言字符。例如，在美国的少数位置中 最有可能看到中文字符。基于用户的位置，服务器可以将精力集中于辨识采取已知在新 图像的地区中普遍使用的语言的最有可能的字符。分析图像的工作也可被分布在网络上，就像情境信息可被分布那样。可利用低 复杂度算法来确定图像的数字指纹，这种算法可利用最低限度的CPU能力(例如用户的 移动设备)来计算。数字指纹和用户的位置可被发送到服务器，以查明此图像是否已经 被服务器接收过。如果该图像先前曾被服务器接收，则对该图像本文档来自技高网...

【技术保护点】
一种用于访问信息的方法，包括：　　接收表示由移动设备捕捉的图像的图像数据；　　接收指示出所述移动设备捕捉所述图像的位置的位置数据；　　根据所述图像数据确定图像属性信息；　　确定所述图像属性信息是否在预定的匹配阈值内匹配先前获得的属性信息，所述先前获得的属性信息是从先前获得的图像数据获得的，所述先前获得的图像数据表示在从所述移动设备捕捉所述图像的位置起的预定距离内捕捉的先前图像；以及　　如果所述图像属性信息在所述预定的匹配阈值内匹配所述先前获得的属性信息，则基于所述位置数据来访问图像内容信息，其中所述内容信息标识出与所述先前获得的图像数据相关联并且与所述位置相关联的所述图像的内容。

【技术特征摘要】
【国外来华专利技术】US 2008-5-15 12/121,2591. 一种用于访问信息的方法，包括接收表示由移动设备捕捉的图像的图像数据； 接收指示出所述移动设备捕捉所述图像的位置的位置数据； 根据所述图像数据确定图像属性信息；确定所述图像属性信息是否在预定的匹配阈值内匹配先前获得的属性信息，所述先 前获得的属性信息是从先前获得的图像数据获得的，所述先前获得的图像数据表示在从 所述移动设备捕捉所述图像的位置起的预定距离内捕捉的先前图像；以及如果所述图像属性信息在所述预定的匹配阈值内匹配所述先前获得的属性信息，则 基于所述位置数据来访问图像内容信息，其中所述内容信息标识出与所述先前获得的图 像数据相关联并且与所述位置相关联的所述图像的内容。2.如权利要求1所述的方法，其中，所述图像属性信息包括所述图像的直方图，并且 所述先前获得的属性信息包括先前确定的所述先前图像的直方图。3.如权利要求1所述的方法，其中，所述图像属性信息包括通过光学字符辨识从所述 图像确定的字符，并且所述先前获得的属性信息包括先前确定的所述先前图像的字符。4.如权利要求1所述的方法，还包括如果所述图像属性信息在所述预定的匹配阈值内 匹配所述先前获得的属性信息，则基于所述图像内容信息来访问位置相关信息，其中所 述位置相关信息与所述先前获得的图像数据相关联并且与所述位置相关联。5.如权利要求1所述的方法，其中，所述图像内容信息包括商家信息的标识符。6.如权利要求1所述的方法，其中，所述先前获得的图像数据是利用第二移动设备获 得的。7.如权利要求1所述的方法，还包括确定与所述图像内容信息相关联的搜索字词；以及 基于所述搜索字词来执行数据搜索。8.如权利要求1所述的方法，还包括 接收所述移动设备的移动设备标识符；访问与所述移动设备标识符相关联的简档信息；以及 基于所述简档信息来选择所述图像内容信息的一部分。9.如权利要求8所述的方法，其中，所述简档信息包括与所述移动设备的用户相关联 的用户行为信息。10.如权利要求1所述的方法，还包括确定在所述预定距离内捕捉的多个先前图像中每一个的优先级；以及 基于由所述先前获得的图像数据表示的先前图像的所确定的优先级来选择所述先前 获得的属性信息。11.如权利要求1所述的方法，还包括将所述图像内容信息返回给所述移动设备。12.一种机器可读介质，保存着使电子设备执行包括如权利要求1所述的步骤在内的 多个操作的指令。13.—种用于访问信息的服务器，包括 处理器；与所述处理器并与网络通信的通信接口；以及与所述处理器通信并存储数据和指令的存储器，所述指令使得所述处理器执行多个 操作，包括接收表示由与所述网络通信的移动设备捕捉的图像的图像数据； 接收指示出所述移动设备捕捉所述图像的位置的位置数据； 根据所述图像数据确定图像属性信息；确定所述图像属性信息是否在预定的匹配阈值内匹配先前获得的属性信息，所述先 前获得的属性信息是从先前获得的图像数据获得的，所述先前获得的图像数据表示在从 所述移动设备捕捉所述图像的位置起的预定距离内捕捉的先前图像；以及如果所述图像属性信息在所述预定的匹...

【专利技术属性】
技术研发人员：阿伦拉玛努嘉帕若姆，马尔科姆斯莱尼，
申请(专利权)人：雅虎公司，
类型：发明
国别省市：US