用于由图像识别触发的增强现实内容的回放的系统和方法技术方案

提供了用于相对快速且相对容易地访问包括动态增强现实(AR)内容的AR内容的系统和方法。启用的目标实体可以在移动计算设备的相机视图内标识，并且服务器计算设备可以标识所述目标实体，将所述目标实体与动态AR内容相匹配，并且将所述动态AR内容传输给所述客户端计算设备。这可以允许用户消费内容丰富的信息和/或体验与所述图像及其周围的对象的实时交互，所述信息和/或体验否则将难以浓缩到物理介质中和/或浓缩到物理介质中是无法实现的，和/或否则将难以在实时交互式体验中提供和/或在实时交互式体验中提供是无法实现的。或在实时交互式体验中提供是无法实现的。或在实时交互式体验中提供是无法实现的。

【技术实现步骤摘要】
【国外来华专利技术】用于由图像识别触发的增强现实内容的回放的系统和方法


[0001]这涉及图像内容的显示，具体地涉及增强现实视频内容的回放。

技术介绍

[0002]移动计算设备(诸如例如智能手机、平板计算设备等)的用户可能喜欢使用他们的移动计算设备来更了解关于用户并且计算设备正在操作的环境中的对象、实体等。移动计算设备通常包括图像传感器或相机。这些相机可以捕获计算设备操作的环境中的实体的图像。经由移动计算设备与那些实体相关的内容或体验的可用性可以改进用户体验，并且可以增强移动计算设备对用户的功能性和效用。

技术实现思路

[0003]在一个通用方面中，一种计算机实施的方法可以包括：在客户端计算设备的实时取景器内捕获图像；由客户端计算设备向服务器计算设备传输查询，该查询包括图像；由客户端计算设备从服务器计算设备接收对查询的响应，该响应包括增强现实内容；以及触发用户界面屏幕在客户端计算设备上的显示，用户界面屏幕包括在轮廓内显示的增强现实内容，该轮廓由从服务器计算设备接收的响应中所包括的坐标定义。
[0004]在一些实施方式中，图像可以包括在客户端计算设备的实时取景器的视野内捕获的目标实体。在一些实施方式中，接收对查询的响应可以包括接收与图像中所包括的目标实体相关联的增强现实视频内容。在一些实施方式中，从服务器计算设备接收对查询的响应可以包括接收坐标，该坐标定义用于在用户界面屏幕上显示增强现实视频内容的轮廓，该轮廓对应于目标实体的外围。
[0005]在一些实施方式中，触发用户界面屏幕的显示可以包括：在客户端计算设备的实时取景器内显示用户界面屏幕；以及在对应于坐标的附着点处将增强现实视频内容的显示附着到目标实体，使得增强现实视频内容的显示保持附着到客户端计算设备的实时取景器内的目标实体。
[0006]在一些实施方式中，计算机实施的方法还可以包括：检测客户端计算设备的第一移动；响应于检测到的第一移动来移位客户端计算设备的实时取景器内的目标实体的显示；以及移位增强现实视频内容的显示以对应于目标实体在客户端计算设备的实时取景器内的移位显示位置。在一些实施方式中，检测第一移动可以包括：检测客户端计算设备的实时取景器与目标实体之间的位置、定向或距离的改变中的至少一个；并且移位增强现实视频内容的显示可以包括：改变增强现实视频内容的显示位置、显示定向或显示大小中的至少一个以相应地对应于目标实体的改变的显示位置、定向或距离。在一些实施方式中，计算机实施的方法还可以包括：检测客户端计算设备的第二移动，使得目标实体未在客户端计算设备的实时取景器内捕获；并且响应检测到的第二移动来终止增强现实视频内容的显示。在一些实施方式中，触发用户界面屏幕的显示可以包括：循环增强现实内容，直到第二移动被检测到为止，或者直到终止输入被接收到为止。
[0007]在一些实施方式中，触发用户界面屏幕的显示可以包括：触发显示面板和用户输入面板的显示；并且接收对查询的响应可以包括：接收增强现实视频内容以在用户界面屏幕的显示面板上显示；以及接收与目标实体相关的辅助信息，以显示在用户界面屏幕的用户输入面板上。
[0008]在一些实施方式中，在客户端计算设备的实时取景器内捕获图像、传输、接收和触发是在客户端计算设备上运行的应用内完成的。
[0009]在另一通用方面中，一种计算机实施的方法可以包括：由服务器计算设备接收来自客户端计算设备的查询，该查询包括图像；由服务器计算设备的识别引擎检测查询中所包括的图像内的目标实体；在服务器计算设备的索引数据库中，将目标实体与来自外部提供方的增强现实内容相匹配；以及将增强现实内容传输给客户端计算设备以供客户端计算设备输出。
[0010]在一些实施方式中，接收包括图像的查询可以包括：接收查询，该查询包括目标实体在客户端计算设备的实时取景器内捕获的图像。在一些实施方式中，检测查询中所包括的图像内的目标实体可以包括：基于由外部提供方与识别引擎链接的目标图像来标识目标实体。在一些实施方式中，将目标实体与增强现实内容相匹配可以包括：将目标实体与内容相匹配，该内容在索引数据库中由外部提供方与目标图像链接在一起。在一些实施方式中，检测目标实体可以包括：检测图像内目标实体的外围轮廓；以及沿着检测到的外围轮廓定义附着点以便定义目标实体的外围轮廓。在一些实施方式中，传输增强现实内容以供客户端计算设备输出可以包括：将附着点连同增强现实内容一起传输给客户端计算设备，以便客户端计算设备在由附着点定义的轮廓内输出增强现实内容。
[0011]在另一通用方面中，一种计算机可读存储介质可以存储指令，当由一个或多个处理器执行时，该指令可以使一个或多个处理器执行上述计算机实施的方法。
[0012]在另一通用方面中，一种客户端计算设备可以包括实时取景器、一个或多个处理器和存储指令的存储器，在由一个或多个处理器执行时，该指令可以使一个或多个处理器执行上述计算机实施的方法。
[0013]在另一通用方面中，一种服务器计算设备可以包括识别引擎、索引数据库、一个或多个处理器和存储指令的存储器，在由一个或多个处理器执行时，该指令使一个或多个处理器执行上述计算机实施的方法。
[0014]一个或多个实施方式的细节是在下面的所附附图和描述中陈述的。其他特征将通过描述和附图以及权利要求而显而易见。
附图说明
[0015]图1是根据本文描述的实施方式的示例性系统的框图。
[0016]图2A和2B是根据本文描述的实施方式的示例性物理空间的第三人称视图，其中图1所示的示例性系统的示例性客户端计算设备的实施方式是可操作的。
[0017]图3A至3H图示了根据本文描述的实施方式的图2A和2B所示的示例性客户端计算设备102的示例性用户界面屏幕的序列，用于显示与检测到的目标实体相关联的示例性增强现实内容。
[0018]图4A至4J图示了根据本文描述的实施方式的图2A和2B所示的示例性客户端计算
设备102的示例性用户界面屏幕的序列，用于显示与检测到的目标实体相关联的示例性增强现实内容和辅助信息。
[0019]图5是根据本文描述的实施方式的访问和显示与目标实体相关联的增强现实内容的示例性方法的流程图。
[0020]图6是根据本文描述的实施方式的处理视觉内容查询以提供与检测到的目标实体相关联的示例性增强现实内容和辅助信息的示例性方法的流程图。
[0021]图7A至7D图示了根据本文描述的实施方式的各种材料内的目标图像的标识。
[0022]图8A至8F图示了根据本文描述的实施方式的图2A和2B所示的示例性客户端计算设备102的示例性用户界面屏幕的序列，用于显示示例性增强现实内容。
[0023]图9是根据本文描述的实施方式的将目标图像和增强现实内容链接到示例性服务器计算设备的示例性方法的流程图。
[0024]图10是可以被用于实施本文描述的技术的示例性计算设备和移动计算设备的示意图。
[0025]现在将详细参照本公开的非限制性示例，其示例在所附附图中图示。示例在下面通过参本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种计算机实施的方法，包括：在客户端计算设备的实时取景器内捕获图像；由所述客户端计算设备将查询传输给服务器计算设备，所述查询包括所述图像；由所述客户端计算设备从所述服务器计算设备接收对所述查询的响应，所述响应包括增强现实内容；以及触发用户界面屏幕在所述客户端计算设备上的显示，所述用户界面屏幕包括在由坐标定义的轮廓内显示的所述增强现实内容，所述坐标被包括在从所述服务器计算设备接收的所述响应中。2.根据权利要求1所述的计算机实施的方法，其中，所述图像包括在所述客户端计算设备的所述实时取景器的视野内捕获的目标实体，并且其中，接收对所述查询的所述响应包括：接收与所述图像中所包括的所述目标实体相关联的增强现实视频内容。3.根据权利要求2所述的计算机实施的方法，其中，从所述服务器计算设备接收对所述查询的所述响应包括：接收所述坐标，所述坐标定义所述轮廓以用于所述增强现实视频内容在所述用户界面屏幕上的显示，所述轮廓对应于所述目标实体的外围。4.根据权利要求3所述的计算机实施的方法，其中，触发所述用户界面屏幕的显示包括：在所述客户端计算设备的所述实时取景器内显示所述用户界面屏幕；以及在对应于所述坐标的附着点处将所述增强现实视频内容的所述显示附着到所述目标实体，使得所述增强现实视频内容的所述显示保持附着到所述客户端计算设备的所述实时取景器内的所述目标实体。5.根据权利要求4所述的计算机实施的方法，还包括：检测所述客户端计算设备的第一移动；响应于所检测的第一移动，移位所述目标实体在所述客户端计算设备的所述实时取景器内的显示；以及移位所述增强现实视频内容的显示，以对应于所述目标实体在所述客户端计算设备的所述实时取景器内的所移位的显示位置。6.根据权利要求5所述的计算机实施的方法，其中，检测所述第一移动包括检测下述中的至少一个：所述客户端计算设备的所述实时取景器与所述目标实体之间的位置、定向或者距离的改变；以及移位所述增强现实视频内容的所述显示包括：改变所述增强现实视频内容的显示位置、显示定向或显示大小中的至少一个，以相应地对应于所述目标实体的所改变的显示位置、定向或距离。7.根据权利要求5或6所述的计算机实施的方法，还包括：检测所述客户端计算设备的第二移动，使得所述目标实体未在所述客户端计算设备的所述实时取景器内被捕获；以及响应于所检测的第二移动，终止所述增强现实视频内容的所述显示。8.根据权利要求7所述的计算机实施的方法，其中，触发所述用户界面屏幕的显示包括：循环所述增强现实内容，直到所述第二移动被检测到为止，或者直到终止输入被接收到
为止。9.根据权利要求2至8中任一项所述的计算机实施的方法，其中，触发所述用户界面屏幕的显示包括触发显示面板和用户输入面板的显示；并且接收对所述查询的所述响应包...

【专利技术属性】
技术研发人员：麦克斯，
申请(专利权)人：谷歌有限责任公司，
类型：发明
国别省市：