基于智能交互式增强现实的用户交互平台制造技术

技术编号:20759520 阅读:17 留言:0更新日期:2019-04-03 13:09
本申请文件公开了用于基于智能、交互式和增强现实(AR)的用户交互平台的方法和系统。所述平台可在许多应用中实施,例如提供用户输入数据和所得AR数据之间的实时智能和交互式控制,提供实时且有效的基于AR的通信,或提供远程网络中物理设备的实时控制。

【技术实现步骤摘要】
【国外来华专利技术】基于智能交互式增强现实的用户交互平台相关申请案的交叉参考本申请要求以下专利申请的优先权:提交于2016年8月11日,专利技术名称为“基于智能增强现实(IAR)平台的通信系统(AnIntelligentAugmentedReality(IAR)Platform-basedCommunicationSystem)”,申请号为62/373,822的美国临时专利申请;提交于2016年8月11日,专利技术名称为“智能用户交互平台(AnIntelligentUserInterfacePlatform)”,申请号为62/373,864的美国临时专利申请;提交于2016年12月1日,专利技术名称为“个人化交互式智能搜索方法和系统(MethodsandSystemsforPersonalized,InteractiveandIntelligentSearches)”,申请号为15/367,124的美国专利申请;提交于2017年4月4日,专利技术名称为“用于基于增强现实的通信中的实时图像和信号处理的方法和系统(MethodsandSystemsforReal-TimeImageandSignalProcessinginAugmentedRealitybasedCommunications)”,申请号为15/479,269的美国专利申请;提交于2017年4月4日,专利技术名称为“具有增强现实强化的基于场景的实时广告(Real-TimeandContextBasedAdvertisementwithAugmentedRealityEnhancement)”,申请号为15/479,277的美国专利申请;提交于2017年7月31日,专利技术名称为“实时交互式控制的真实感人类全息增强现实通信方法和系统(MethodsandSystemsforPhotorealisticHumanHolographicAugmentedRealityCommunicationwithInteractiveControlinReal-Time)”,申请号为15/665,295的美国专利申请;提交于2017年8月11日,专利技术名称为“基于智能增强现实(IAR)平台的通信系统(AnIntelligentAugmentedReality(IAR)Platform-BasedCommunicationSystem)”,申请号为15/675,635的美国专利申请;其中的每一个全文以引用的方式并入本申请文件中。
本专利技术涉及用于智能交互式增强现实(AR)的用户交互平台的方法和系统。更具体地说,本专利技术涉及方法和系统,用于提供用户输入数据和所得AR数据之间的实时智能交互式控制、用于提供实时有效的基于AR的通信,以及用于通过网络连接提供对物理设备的实时控制。
技术介绍
当代基于实时增强现实(AR)的系统和方法(尤其是那些用于通信的系统和方法)存在严重缺陷,因为对输入数据的不完整或浅表分析和理解,较差的数据整合速度和质量,以及缺乏用户、基于AR的数据和真实世界之间的交互式控制。需要用于克服这些缺陷的方法。
技术实现思路
一方面,本申请文件公开一种用于提供对计算机设备的交互式智能用户控制的方法。所述方法包括以下步骤:在计算机设备处对用户的实时输入数据进行综合解释;其中所述输入数据的至少一部分包括用户的视觉输入数据,所述视觉输入数据与增强现实(AR)相关的输入数据组合以创建实时AR数据,所述实时AR数据使用户沉浸到AR世界中;其中使用与计算机设备相关联的相机实时采集用户的视觉输入数据;且其中所述综合解释是基于一个或多个标准的,所述一个或多个标准包括用户偏好、系统设定、整合参数、用户的特性、视觉输入数据的对象或场景、从视觉输入数据提取的信息、从所提取信息学习到的知识、先前交互式用户控制,或其任意组合;在计算机设备处基于综合解释的一个或多个结果和可由计算机设备使用人工智能访问的额外信息执行用户输入命令;以及响应于在计算机设备处执行所述用户输入命令,使得一个或多个事件发生。在一些实施例中,可由计算机设备访问的额外信息包括用户生物识别数据、用户个人数据、允许用户访问的其他人的信息、现有搜索记录、存储在计算机设备中的信息、计算机设备的系统信息、在修改搜索查询时通过实时网络通信所提取的信息或其任意组合。在一些实施例中,所述使得一个或多个事件发生包括:在计算机设备或另一设备处向用户实时呈现与输入命令相关联的数据内容;改变实时AR数据的内容,其中基于视觉输入数据和AR相关的输入数据实时创建所述实时AR数据;或使得可通信地连接到计算机设备的物理设备改变状态。在一些实施例中,所述输入数据进一步包括音频输入数据或感觉输入数据。在一些实施例中,感觉输入数据包括用户的生物状态数据、用户的行为数据、环境数据,或用户附近的对象的状态数据。在一些实施例中,感觉输入数据包括从群组中选择的数据,该群组由以下数据组成:用户的生物状态数据、心跳数据、血压数据、体温数据、方向数据、环境温度数据、运动数据、压力数据、海拔高度数据、距离(proximity)数据、加速度数据、陀螺仪数据、地理位置数据、全球定位系统(GPS)数据及其任意组合。在一些实施例中,物理设备形成物联网(IoT)网络的一部分。在一些实施例中,物理设备的状态包括二进制状态、连续值调整状态或离散值调整状态。在一些实施例中,物理设备的状态包括从群组中选择的状态,该群组由以下组成:开/关状态、打开和关闭状态、是和否状态、温度状态、运动状态、高度状态、重量状态、尺寸状态、强度状态、声级状态及其任意组合。在一些实施例中,物理设备包括一件家具、车辆、器具、电子器具、建筑物、传感器、灯具、玩具或另一计算机设备。在一些实施例中,物理设备包括从群组中选择的物理设备,该群组由以下组成:门、窗、灯、冰箱、一件家具、灯具、窗帘、百叶窗、计算机、计算机设备、真空吸尘器、加热器、空调、A/C系统、游泳池、轿车、车库门、水龙头、自行车、小型摩托车、电视机、扬声器、音频播放器、视频播放器、风扇、游戏设备、玩具、时钟、牙刷、碎纸机、可调整的桌子或椅子、相机、传感器或其任意组合。在一些实施例中,本申请文件所公开的方法进一步包括:在计算机设备处基于实时用户输入数据和AR相关的输入数据提供实时AR数据,所述用户输入数据包括视觉输入数据,所述实时AR数据包括一个或多个广告要素,所述一个或多个广告要素根据综合内容匹配机制确定;其中所述综合内容匹配机制是基于一个或多个因素的,所述一个或多个因素包括广告内容、从用户输入数据提取的信息、从所提取信息学习到的知识、用户交互式控制、用户偏好、场景或其任意组合。在一些实施例中,场景包括日期和时间信息、通信场景、内容场景、广告商场景、地理位置场景、呈现场景或其任意组合,且其中广告商场景包括广告商指定的内容匹配标准,内容匹配标准包括有利的或不利的呈现论坛或定价信息。在一些实施例中,计算机设备进一步接收对应于现实事件的额外数据,且所述实时AR数据包括与现实事件相关联的至少一视觉表示。在一些实施例中,本申请文件所公开的方法还包括:在由第一用户操作的计算机设备处提供不可由计算机设备访问的第二用户的实时AR数据,其中所述第二用户的实时AR数据是根据与第二用户相关联的一个或多个标准基于第本文档来自技高网
...

【技术保护点】
1.一种非暂时性计算机可读介质,包括一个或多个指令序列,所述一个或多个指令序列在由一个或多个处理器执行时使得所述处理器执行操作,所述操作包括:在计算机设备处对用户的实时输入数据进行综合解释,其中所述输入数据的至少一部分包括所述用户的视觉输入数据,所述视觉输入数据与增强现实(AR)相关的输入数据组合以创建使所述用户沉浸到AR世界中的实时AR数据,其中使用与所述计算机设备相关联的相机实时采集所述用户的所述视觉输入数据,且其中所述综合解释是基于一个或多个标准的,所述一个或多个标准包括用户偏好、系统设定、整合参数、所述用户的特性、所述视觉输入数据的对象或场景、从所述视觉输入数据提取的信息、从所述所提取的信息学习的知识、先前交互式用户控制,或其任意组合;在所述计算机设备处基于所述综合解释的一个或多个结果和可由所述计算机设备使用人工智能访问的额外信息执行用户输入命令;以及响应于在所述计算机设备处执行所述用户输入命令,使得一个或多个事件发生。

【技术特征摘要】
【国外来华专利技术】2016.12.01 US 15/367,124;2017.04.04 US 15/479,269;1.一种非暂时性计算机可读介质,包括一个或多个指令序列,所述一个或多个指令序列在由一个或多个处理器执行时使得所述处理器执行操作,所述操作包括:在计算机设备处对用户的实时输入数据进行综合解释,其中所述输入数据的至少一部分包括所述用户的视觉输入数据,所述视觉输入数据与增强现实(AR)相关的输入数据组合以创建使所述用户沉浸到AR世界中的实时AR数据,其中使用与所述计算机设备相关联的相机实时采集所述用户的所述视觉输入数据,且其中所述综合解释是基于一个或多个标准的,所述一个或多个标准包括用户偏好、系统设定、整合参数、所述用户的特性、所述视觉输入数据的对象或场景、从所述视觉输入数据提取的信息、从所述所提取的信息学习的知识、先前交互式用户控制,或其任意组合;在所述计算机设备处基于所述综合解释的一个或多个结果和可由所述计算机设备使用人工智能访问的额外信息执行用户输入命令;以及响应于在所述计算机设备处执行所述用户输入命令,使得一个或多个事件发生。2.根据权利要求1所述的非暂时性计算机可读介质,其中可由所述计算机设备访问的所述额外信息包括用户生物识别数据、用户个人数据、允许所述用户访问的其他人的信息、现有搜索记录、存储在所述计算机设备中的信息、所述计算机设备的系统信息、在修改搜索查询时通过实时网络通信所提取的信息,或其任意组合。3.根据权利要求1所述的非暂时性计算机可读介质,其中所述使得一个或多个事件发生包括:在所述计算机设备或另一设备处向所述用户实时呈现与所述输入命令相关联的数据内容;改变所述实时AR数据的所述内容,其中所述实时AR数据是基于所述视觉输入数据和AR相关的输入数据实时创建的;或使得可通信地连接到所述计算机设备的物理设备改变状态。4.根据权利要求1所述的非暂时性计算机可读介质,其中所述输入数据进一步包括音频输入数据或感觉输入数据。5.根据权利要求4所述的非暂时性计算机可读介质,其中所述感觉输入数据包括所述用户的生物状态数据、所述用户的行为数据、环境数据,或所述用户附近的对象的状态数据。6.根据权利要求4所述的非暂时性计算机可读介质,其中所述感觉输入数据包括从群组中选择的数据,所述群组由以下数据组成:所述用户的生物状态数据、心跳数据、血压数据、体温数据、方向数据、环境温度数据、运动数据、压力数据、海拔高度数据、距离数据、加速度数据、陀螺仪数据、地理位置数据、全球定位系统(GPS)数据,及其任意组合。7.根据权利要求3所述的非暂时性计算机可读介质,其中所述物理设备形成物联网(IoT)网络的一部分。8.根据权利要求3所述的非暂时性计算机可读介质,其中所述物理设备的所述状态包括二进制状态、连续值调整状态,或离散值调整状态。9.根据权利要求3所述的非暂时性计算机可读介质,其中所述物理设备的所述状态包括从群组中选择的状态,所述群组由以下状态组成:开/关状态、打开和关闭状态、是和否状态、温度状态、运动状态、高度状态、重量状态、尺寸状态、强度状态、声级状态及其任意组合。10.根据权利要求3所述的非暂时性计算机可读介质,其中所述物理设备包括一件家具、车辆、器具、电子器具、建筑物、传感器、灯具、玩具或另一计算机设备。11.根据权利要求3所述的非暂时性计算机可读介质,其中所述物理设备包括从群组中选择的物理设备,所述群组由以下物理设备组成:门、窗、灯、冰箱、一件家具、灯具、窗帘、百叶窗、计算机、计算机设备、真空吸尘器、加热器、空调、A/C系统、游泳池、轿车、车库门、水龙头、自行车、小型摩托车、电视机、扬声器、音频播放器、视频播放器、风扇、游戏设备、玩具、时钟、牙刷、碎纸机、可调整的桌子或椅子、相机、传感器或其任意组合。12.根据权利要求1所述的非暂时性计算机可读介质,其中所述操作还包括:在所述计算机设备处基于实时用户输入数据和所述AR相关的输入数据提供所述实时AR数据,所述用户输入数据包括所述视觉输入数据,所述实时AR数据包括一个或多个广告要素,所述一个或多个广告要素根据综合内容匹配机制确定;其中所述综合内容匹配机制是基于一个或多个因素的,所述一个或多个因素包括广告内容、从所述用户输入数据提取的信息、从所述所提取的信息学习的知识、用户交互式控制、用户偏好、场景或其任意组合。13.根据权利要求12所述的非暂时性计算机可读介质,其中所述场景包括日期和时间信息、通信场景、内容场景、广告商场景、地理位置场景、呈现场景,或其任意组合,且其中所述广告商场景包括广告商指定的内容匹配标准,所述内容匹配标准包括有利的或不利的呈现论坛或定价信息。14.根据权利要求12所述的非暂时性计算机可读介质,其中所述计算机设备还接收对应于现实事件的额外数据,且所述实时AR数据包括与所述现实事件相关联的至少一视觉表示。15.根据权利要求1所述的非暂时性计算机可读介质,其中所述操作还包括:在由第一用户操作的所述计算机设备处提供不可由所述计算机设备访问的第二用户的实时AR数据,其中所述第二用户的所述实时AR数据是根据与所述第二用户相关联的一个或多个标准基于所述第二用户的输入数据、AR输入数据、信息输入和知识输入的,所述一个或多个标准包括用户偏好、系统设定、整合参数、所述输入数据的对象或场景的特性、交互式用户控制,或其任意组合,其中:所述第二用户的所述输入数据在第二设备处采集,且包括所述第二用户的视频数据和可选的音频数据、传感器数据或其组合中的一个或多个,所述信息输入是基于与所述第二用户相关联的一个或多个标准在一个或多个时间点从所述第二用户的所述输入数据或其变体实时提取的,所述一个或多个标准包括用户偏好、系统设定、整合参数、所述输入数据的对象或场景的特性、交互式用户控制,或其任意组合,所述知识输入是基于从多个时间点提取的信息而学习的,且所述第二用户的所述实时AR数据包括对应于所述信息输入的信息数据和对应于所述知识输入的知识数据;以及用适于在所述计算机设备上呈现所述第二用户的所述实时AR数据的多个数据参数集表示所述第二用户的所述实时AR数据的至少一部分,其中每一数据参数集包括文本、一个或多个代码、一个或多个数字、一个或多个矩阵、一个或多个图像、一个或多个音频信号、一个或多个传感器信号或其任意组合。16.一种用于提供实时增强现实(AR)数据的系统,所述系统包括:一个或多个处理器;以及非暂时性计算机可读介质,所述...

【专利技术属性】
技术研发人员:伊丽莎·Y·杜
申请(专利权)人:英特吉姆股份有限公司
类型:发明
国别省市:美国,US

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1