用于增强现实的方法和系统技术方案

本申请提供一种用于增强现实的方法和系统。描述了用于监视和控制自主运载工具(AV)的技术等。作为示例，至少一个处理器确定第一自主运载工具处于佩戴增强现实显示装置的用户的视场中，确定与所述第一自主运载工具的操作有关的第一数据，以及使用所述增强现实显示装置使所述第一数据的至少一部分呈现给用户。例如，使用所述增强现实显示装置使所述图形用户界面呈现在用户的视场中，以及使所述第一数据的至少一部分包括在所述图形用户界面上，以使得所述第一数据的至少一部分看起来在用户的视场中被布置成在空间上邻近所述第一自主运载工具。载工具。载工具。

【技术实现步骤摘要】
用于增强现实的方法和系统


[0001]本说明书涉及一种用于远程监视和控制自主运载工具的操作的计算机系统。

技术介绍

[0002]自主运载工具(AV)可以用于将人和/或货物(例如，包裹、对象或其它物品)从一个地点运输到另一地点。作为示例，AV可以导航到人的地点，等待人登上AV，并且穿越到指定目的地(例如，由人选择的地点)。作为另一示例，AV可以导航到货物的地点，等待货物被装载到AV中，然后导航到指定目的地(例如，货物的交付地点)。
[0003]在一些实现中，可以远程监视和/或控制AV的操作。例如，可以使用远离AV的一个或多个计算机系统来实现命令中心。命令中心可以从AV接收信息(例如，描述AV的操作的数据)，并且向AV传输信息(例如，指示AV进行某些任务的命令)。

技术实现思路

[0004]本申请提供了一种用于增强现实的方法，包括：通过至少一个处理器确定为第一自主运载工具处于佩戴增强现实显示装置的用户的视场中；通过所述至少一个处理器确定与所述第一自主运载工具的操作有关的第一数据；以及通过所述至少一个处理器使用所述增强现实显示装置使所述第一数据的至少一部分呈现给所述用户，其中，使所述第一数据的至少一部分呈现给所述用户包括：使用所述增强现实显示装置使图形用户界面呈现在所述用户的视场中，以及使所述第一数据的该至少一部分包括在所述图形用户界面上，以使得所述第一数据的该至少一部分看起来在所述用户的视场中被布置成在空间上邻近所述第一自主运载工具。
[0005]另外，所述方法还包括：通过所述至少一个处理器确定为多个第二自主运载工具同时处于所述用户的视场中；通过所述至少一个处理器确定与所述第二自主运载工具中的各第二自主运载工具的操作有关的第二数据；以及通过所述至少一个处理器使用所述增强现实显示装置使所述第二数据的至少一部分呈现给所述用户，其中，使所述第二数据的至少一部分呈现给所述用户包括：使用所述增强现实显示装置使所述图形用户界面呈现在所述用户的视场中，以及使所述第二数据的至少一部分包括在所述图形用户界面上，以使得所述第一数据的至少第二部分看起来在所述用户的视场中被布置成在空间上邻近所述第二自主运载工具中的各第二自主运载工具。
[0006]本申请提供了一种用于增强现实的系统，包括：增强现实显示装置；至少一个处理器；以及至少一个非暂时性计算机可读介质，其存储有指令，所述指令在由所述至少一个处理器执行时使得所述至少一个处理器进行操作，所述操作包括：通过所述至少一个处理器确定为第一自主运载工具处于佩戴所述增强现实显示装置的用户的视场中；通过所述至少一个处理器确定与所述第一自主运载工具的操作有关的第一数据；以及通过所述至少一个处理器使用所述增强现实显示装置使所述第一数据的至少一部分呈现给所述用户，其中，使所述第一数据的至少一部分呈现给所述用户包括：使用所述增强现实显示装置使图形用
户界面呈现在所述用户的视场中，以及使所述第一数据的该至少一部分包括在所述图形用户界面上，以使得所述第一数据的该至少一部分看起来在所述用户的视场中被布置成在空间上邻近所述第一自主运载工具。
附图说明
[0007]图1示出具有自主能力的AV的示例。
[0008]图2示出示例“云”计算环境。
[0009]图3示出计算机系统。
[0010]图4示出AV的示例架构。
[0011]图5示出感知模块可以使用的输入和输出的示例。
[0012]图6示出LiDAR系统的示例。
[0013]图7示出操作中的LiDAR系统。
[0014]图8示出LiDAR系统的操作的附加细节。
[0015]图9示出规划模块的输入和输出之间的关系的框图。
[0016]图10示出路径规划中所使用的有向图。
[0017]图11示出控制模块的输入和输出的框图。
[0018]图12示出控制器的输入、输出和组件的框图。
[0019]图13示出包括用于监视和控制若干AV的操作的增强现实系统的示例系统。
[0020]图14A示出示例增强现实系统。
[0021]图14B示出用于增强现实系统的示例头戴式部件。
[0022]图14C示出可以由增强现实系统呈现的示例图形用户界面GUI。
[0023]图15A至15C示出可以由增强现实系统呈现的其它示例GUI。
[0024]图16示出可以由增强现实系统呈现的另一示例GUI。
[0025]图17A和17B示出增强现实系统的示例用例。
[0026]图18A和18B示出增强现实系统的另一示例用例。
[0027]图19A至19C示出增强现实系统的另一示例用例。
[0028]图20示出用于监视和控制一个或多个AV的操作的示例处理的流程图。
具体实施方式
[0029]在以下描述中，为了解释的目的，阐述了许多具体细节，以便提供对本专利技术的透彻理解。然而，本专利技术可以在没有这些具体细节的情况下实施将是明显的。在其它实例中，众所周知的构造和装置是以框图形式示出的，以避免不必要地使本专利技术模糊。
[0030]在附图中，为了便于描述，示出了示意要素(诸如表示装置、模块、指令块和数据要素的那些要素)的具体排列或次序。然而，本领域技术人员应当理解，附图中示意要素的具体次序或排列并不意在意味着要求特定的处理次序或序列、或处理过程的分离。此外，在附图中包含示意要素并不意在意味着在所有实施例中都需要这种要素，也不意在意味着由这种要素表示的特征不能包括在一些实施例中或不能在一些实施例中与其它要素结合。
[0031]此外，在附图中，连接要素、诸如实线或虚线或箭头用于例示两个或更多个其它示意要素之间的连接、关系或关联，没有任何此类连接要素并不意在意味着不能存在连接、关
系或关联。换句话说，一些要素之间的连接、关系或关联未在附图中示出，以便不使本公开内容模糊。此外，为了便于例示，使用单个连接要素来表示要素之间的多个连接、关系或关联。例如，如果连接要素表示信号、数据或指令的通信，本领域技术人员应理解，这种要素表示影响通信可能需要的一个或多个信号路径(例如，总线)。
[0032]现在将详细参考实施例，其示例在附图中例示出。在以下的详细描述中，阐述了许多具体细节，以便提供对所描述的各种实施例的透彻理解。然而，对于本领域的普通技术人员来说将明显的是，可以在没有这些具体细节的情况下实施所描述的各种实施例。在其它情况下，没有详细描述众所周知的方法、程序、组件、电路和网络，以便不会不必要地使实施例的方面模糊。
[0033]下面描述的若干特征各自可以彼此独立地使用，也可以与其它特征的任何组合一起使用。然而，任何个别特征可能不能解决以上所讨论的任何问题，或者只能解决以上所讨论的问题之一。以上所讨论的一些问题可能不能通过本文所描述的任何一个特征得到充分解决。虽然提供了标题，但在本说明书的其它地方也可以找到与具体标题有关但在具有该标题的部分中未找到的信息。本文根据以下概要描述实施例：
[00本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种用于增强现实的方法，包括：通过至少一个处理器确定为第一自主运载工具处于佩戴增强现实显示装置的用户的视场中；通过所述至少一个处理器确定与所述第一自主运载工具的操作有关的第一数据；以及通过所述至少一个处理器使用所述增强现实显示装置使所述第一数据的至少一部分呈现给所述用户，其中，使所述第一数据的至少一部分呈现给所述用户包括：使用所述增强现实显示装置使图形用户界面呈现在所述用户的视场中，以及使所述第一数据的该至少一部分包括在所述图形用户界面上，以使得所述第一数据的该至少一部分看起来在所述用户的视场中被布置成在空间上邻近所述第一自主运载工具。2.根据权利要求1所述的方法，其中，使所述第一数据的至少一部分呈现给所述用户还包括：确定为所述用户的视场已改变，以及响应于确定为所述用户的视场已改变，修改所述图形用户界面，以使得所述第一数据的至少第一部分看起来在所述用户的改变后的视场中被布置成在空间上邻近所述第一自主运载工具。3.根据权利要求2所述的方法，其中，确定为所述用户的视场已改变以及修改所述图形用户界面是连续地进行的。4.根据权利要求1所述的方法，还包括：通过所述至少一个处理器确定为多个第二自主运载工具同时处于所述用户的视场中；通过所述至少一个处理器确定与所述第二自主运载工具中的各第二自主运载工具的操作有关的第二数据；以及通过所述至少一个处理器使用所述增强现实显示装置使所述第二数据的至少一部分呈现给所述用户，其中，使所述第二数据的至少一部分呈现给所述用户包括：使用所述增强现实显示装置使所述图形用户界面呈现在所述用户的视场中，以及使所述第二数据的至少一部分包括在所述图形用户界面上，以使得所述第二数据的至少一部分看起来在所述用户的视场中被布置成在空间上邻近所述第二自主运载工具中的各第二自主运载工具。5.根据权利要求1所述的方法，其中，所述第一数据包括：与所述第一自主运载工具的部署状态有关的信息。6.根据权利要求5所述的方法，其中，与所述第一自主运载工具的部署状态有关的信息包括以下各项至少之一：所述第一自主运载工具处于空闲状态或活动状态的指示；分配给所述第一自主运载工具以供执行的任务的指示；分配给所述第一自主运载工具以供运行的地理区域的指示；分配给所述第一自主运载工具以供穿越的路线的指示；所述第一自主运载工具先前穿越的一个或多个路线的指示；所述第一自主运载工具的一个或多个先前地点的指示；所述第一自主运载工具的条件或状态的指示；以及与所述第一自主运载工具有关的警报或通知的指示。
7.根据权利要求1所述的方法，其中，所述第一数据包括：与所述第一自主运载工具的维护或维修状态有关的信息。8.根据权利要求7所述的方法，其中，与所述...

【专利技术属性】
技术研发人员：T，
申请(专利权)人：动态AD有限责任公司，
类型：发明
国别省市：