本发明专利技术提供了一种方法，该方法包括接收(404)限定与AR/VR空间相关联的用户动作的数据。该方法还包括将用户动作转变(410)成相关联命令，以及识别(412)该命令与AR/VR空间中的视觉对象的关联。该方法还包括将该命令、该命令与该视觉对象的关联、以及AR/VR环境设置聚合(414)到至少一个文件(120)中，以及传输或存储(416)该一个或多个文件。另一种方法包括接收(504)至少一个文件(120)，该至少一个文件包含命令、该命令与AR/VR空间中的视觉对象的关联、以及AR/VR环境设置。其他方法还包括将该命令转变(508)成相关联用户动作，以及重新创建或致使用户设备(204、206、208)：(i)基于AR/VR环境设置重新创建(512)包含该视觉对象的AR/VR空间，以及(ii)基于该命令与该视觉对象的关联重新创建(514)AR/VR空间中的用户动作。
Devices and methods for recording and replaying interactive content with enhanced / virtual reality in industrial automation systems and other systems
【技术实现步骤摘要】
【国外来华专利技术】用于在工业自动化系统和其他系统中以增强/虚拟现实记录和重放交互式内容的装置和方法相关申请的交叉引用和优先权要求本申请根据35U.S.C.§119(e)要求全部于2017年6月8日提交的美国临时专利申请62/517,006、美国临时专利申请62/517,015和美国临时专利申请62/517,037的优先权。这些临时申请据此全文都通过引用方式并入。
本公开整体涉及增强现实和虚拟现实系统。更具体地，本公开涉及用于在工业自动化系统和其他系统中以增强/虚拟现实记录和重放交互式内容的装置和方法。
技术介绍
增强现实和虚拟现实技术正在迅速发展并在各个行业中越来越普遍。增强现实通常是指将计算机生成的内容叠加在现实世界环境上的技术。增强现实的示例包括在现实世界图像上叠加对象或角色的游戏，以及在现实世界图像上叠加信息的导航工具。虚拟现实通常是指创建对环境的人工模拟或重新创建的技术，该环境可以是或可以不是现实世界环境。虚拟现实的示例包括创建可由用户探索的幻想或外星环境的游戏。
技术实现思路
本公开提供了用于在工业自动化系统和其他系统中以增强/虚拟现实记录和重放交互式内容的装置和方法。在第一实施方案中，方法包括接收限定与增强现实/虚拟现实(AR/VR)空间相关联的用户动作的数据。方法还包括将用户动作转变成相关联命令，以及识别命令与AR/VR空间中的视觉对象的关联。方法还包括将命令、命令与视觉对象的关联、以及AR/VR环境设置聚合到至少一个文件中。此外，方法包括传输或存储至少一个文件。>在第二实施方案中，装置包括至少一个处理设备，该至少一个处理设备被配置为接收限定与AR/VR空间相关联的用户动作的数据。至少一个处理设备还被配置为将用户动作转变成相关联命令，以及识别命令与AR/VR空间中的视觉对象的关联。至少一个处理设备被进一步配置为将命令、命令与视觉对象的关联、以及AR/VR环境设置聚合到至少一个文件中。此外，至少一个处理设备被配置为传输或存储该至少一个文件。在第三实施方案中，方法包括接收至少一个文件，该至少一个文件包含命令、命令与AR/VR空间中的视觉对象的关联、以及AR/VR环境设置。方法还包括将命令转变成相关联用户动作。此外，方法包括重新创建或致使用户设备(i)基于AR/VR环境设置重新创建包含视觉对象的AR/VR空间，以及(ii)基于命令与视觉对象的关联重新创建AR/VR空间中的用户动作。在第四实施方案中，装置包括至少一个处理设备，该至少一个处理设备被配置为接收至少一个文件，该至少一个文件包含命令、命令与AR/VR空间中的视觉对象的关联、以及AR/VR环境设置。至少一个处理设备还被配置为将命令转变成相关联用户动作。此外，至少一个处理设备被配置为重新创建或致使用户设备(i)基于AR/VR环境设置重新创建包含视觉对象的AR/VR空间，以及(ii)基于命令与视觉对象的关联重新创建AR/VR空间中的用户动作。在第五实施方案中，非暂态计算机可读介质包含指令，这些指令在被执行时致使至少一个处理设备执行根据第一实施方案或其从属权利要求中任一项所述的方法。在第六实施方案中，非暂态计算机可读介质包含指令，这些指令在被执行时致使至少一个处理设备执行根据第三实施方案或其从属权利要求中任一项所述的方法。从以下附图、描述和权利要求书中，其他技术特征对本领域的技术人员是显而易见的。附图说明为了更完整地理解本公开，现在结合附图参考以下描述，在附图中：图1示出了根据本公开的用于以增强/虚拟现实记录交互式内容的示例性架构；图2示出了根据本公开的用于以增强/虚拟现实重放交互式内容的示例性架构；图3示出了根据本公开的支持以增强/虚拟现实记录或重放交互式内容的示例性设备；并且图4和图5示出了根据本公开的用于以增强/虚拟现实记录和重放交互式内容的示例性方法。具体实施方式下文所讨论的图1至图5以及用于描述本专利技术在该专利文献中的原理的各种实施方案仅以例证的方式进行，并且不应理解为以任何方式限制本专利技术的范围。本领域的技术人员将理解，本专利技术的原理可在任何类型的适当布置的设备或系统中实现。如上所述，增强现实和虚拟现实技术正在迅速发展，并且已经设想了增强现实和虚拟现实技术的各种潜在用途。然而，那些潜在用途中的一些存在许多技术限制或问题。例如，增强现实和虚拟现实技术可以用于帮助训练人员执行各种任务，诸如控制工业过程或维修设备。不幸的是，提供增强/虚拟现实技术的供应商的数量正在迅速增加，并且还没有针对输入机制(如手势、语音命令、语音注释或文本消息)的行业标准。这在尝试创建、记录和重放作为训练内容或其他交互式内容的部分的用户动作时造成了技术问题。理想地，交互式内容应当是设备不可知的，以允许从各种增强/虚拟现实设备记录交互式内容并在其上重放交互式内容。替代方案(诸如用于在增强/虚拟环境中分配的用户动作的视频/图像记录)造成了各种挑战，诸如在存储空间、处理器计算和传输带宽方面。当要记录和重放大量交互式内容时，这些挑战可以是尤其困难的。本公开提供了用于记录、存储和分配增强/虚拟现实环境中的用户动作的技术。除其他事项外，本公开描述了捕获内容(诸如用户输入、数据格式和训练设置)的可移植文件格式。可移植文件格式允许更轻松地存储、计算和分配交互式内容并且解决相对于空间、计算和带宽的技术限制。图1示出了根据本公开的用于以增强/虚拟现实记录交互式内容的示例性架构100。如图1所示，架构100包括训练环境102，其表示允许与增强现实/虚拟现实(AR/VR)空间进行交互的可视化层。在该示例中，训练环境102可以包括一个或多个最终用户设备，诸如至少一个AR/VR头戴式受话器104、至少一个计算设备106、或至少一个交互式AR/VR系统108。每个头戴式受话器104通常表示由用户佩戴并显示AR/VR空间的设备。图1中的头戴式受话器104是MICROSOFTHOLOLENS设备，但可以使用任何其他合适的AR/VR设备。每个计算设备106通常表示处理数据以向用户呈现AR/VR空间(尽管不一定以3D格式)的设备。每个计算设备106表示任何合适的计算设备，诸如台式计算机、膝上型计算机、平板电脑或智能电话。每个交互式AR/VR系统108包括头戴式受话器和一个或多个用户输入设备(诸如交互式或智能手套)。尽管未示出，但一个或多个输入设备也可以与头戴式受话器104或计算设备106一起使用。架构100还包括用于记录训练内容或其他交互式内容的至少一个处理器(诸如在服务器110中)。服务器110通常表示从训练环境102接收内容并记录和处理该内容的计算设备。服务器110包括各种功能或模块以支持交互式内容的记录和处理。这些功能或模块中的每一个可以任何合适的方式来实现，诸如通过由一个或多个处理器执行的软件/固件指令。服务器110可以与训练环境102一起本地定位或远离该训练环境定位。在功能上，服务器110包括用户输入接收器112，其接收、处理和过滤由用户进行的用户输入。用户本文档来自技高网...
【技术保护点】
1.一种方法，包括：/n接收(404)限定与增强现实/虚拟现实(AR/VR)空间相关联的用户动作的数据；/n将所述用户动作转变(410)成相关联命令；/n识别(412)所述命令与所述AR/VR空间中的视觉对象的关联；/n将所述命令、所述命令与所述视觉对象的所述关联、以及AR/VR环境设置聚合(414)到至少一个文件(120)中；以及/n传输或存储(416)所述至少一个文件。/n
【技术特征摘要】
【国外来华专利技术】20170608 US 62/517,006;20180330 US 15/942,1551.一种方法，包括：
接收(404)限定与增强现实/虚拟现实(AR/VR)空间相关联的用户动作的数据；
将所述用户动作转变(410)成相关联命令；
识别(412)所述命令与所述AR/VR空间中的视觉对象的关联；
将所述命令、所述命令与所述视觉对象的所述关联、以及AR/VR环境设置聚合(414)到至少一个文件(120)中；以及
传输或存储(416)所述至少一个文件。
2.根据权利要求1所述的方法，其中所述至少一个文件具有可移植文件格式。
3.根据权利要求1所述的方法，其中限定所述用户动作的所述数据包括以下中的一者或多者：
限定由用户做出的一个或多个手势的数据；
限定由所述用户说出的一个或多个语音命令或语音注释的数据；
限定由所述用户提供的一个或多个文本消息的数据；和
限定由所述用户使用至少一个定点设备来采取的一个或多个定点动作的数据。
4.根据权利要求1所述的方法，其中将所述用户动作转变成所述相关联命令包括使用将不同用户输入动作与不同命令相关联的语法参考(116)。
5.根据权利要求1所述的方法，还包括：
使用(500)所述至少一个文件来重新创建所述AR/VR空间中的所述用户动作。
6.根据权利要求5所述的方法，其中所述用户动作的重新创建是自动执行的或由查看所述重新创建的用户动作的用户驱动。
7.一种装置，包括：
被配置为执行根据权利要求1至6中任一项所述的方法的至少一个处理设备(302)。
8.一种非暂态计算机可读介...
【专利技术属性】
技术研发人员：苏班·巴沙·杜德库拉，阿里夫·率尔·艾哈迈德，拉梅什·巴布·科尼基，玛纳斯·杜塔，马克·菲利普斯，
申请(专利权)人：霍尼韦尔国际公司，
类型：发明
国别省市：美国;US
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。