一种基于增强现实的互动系统及互动方法技术方案

本发明专利技术公开了一种基于增强现实的互动系统，包括：大屏端，所述大屏端具有显示屏幕，所述显示屏幕对于用户的控制作出响应；移动端，所述移动端包括图像采集单元，通信单元，存储单元以及显示单元；以及云端，所述云端分别与所述大屏端和移动端建立数据连接，其中所述移动端被配置成对准大屏端，通过图像采集单元将大屏端显示的图像采集到显示单元，用户在显示单元上选取感兴趣的对象，来抓取对象，在移动端的显示单元上实时显示被抓取对象的扩展内容。

An Interactive System and Method Based on Augmented Reality

The invention discloses an interactive system based on augmented reality, which includes: a large screen terminal with a display screen that responds to user control; a mobile terminal, which includes an image acquisition unit, a communication unit, a storage unit and a display unit; and a cloud terminal, which establishes data with the large screen terminal and the mobile terminal, respectively. The mobile terminal is configured to align with the large screen. The image displayed on the large screen is collected to the display unit by the image acquisition unit. The user selects the object of interest on the display unit to capture the object and displays the extended content of the captured object in real time on the display unit of the mobile terminal.

【技术实现步骤摘要】
一种基于增强现实的互动系统及互动方法
本专利技术涉及人机交互
具体而言，本专利技术涉及一种基于增强现实的互动系统及互动方法。
技术介绍
增强现实(AugmentedReality，AR)是一种将真实世界信息和虚拟世界信息“无缝”集成的新技术，是把原本在现实世界的一定时间空间范围内很难体验到的实体信息通过电脑等科学技术，模拟仿真后再叠加，将虚拟的信息应用到真实世界，被人类感官所感知，从而达到超越现实的感官体验。真实的环境和虚拟的物体实时地叠加到了同一个画面或空间同时存在。增强现实技术，不仅展现了真实世界的信息，而且将虚拟的信息同时显示出来，两种信息相互补充、叠加。在视觉化的增强现实中，用户利用头盔显示器，把真实世界与电脑图形多重合成在一起，便可以看到真实的世界围绕着它。增强现实技术包含了多媒体、三维建模、实时视频显示及控制、多传感器融合、认知现实，识别现实场景、实时跟踪及注册、场景融合等新技术与新手段。增强现实提供了在一般情况下，不同于人类可以感知的信息。目前增强现实技术广泛应用于很多领域。例如，利用增强现实技术的AR眼镜、数字媒体标牌、广告牌等等。然而，受限于现有的光学系统发展状况以及处理器能效的限制，增强现实眼镜技术成熟度还有待提高，而且增强现实眼镜成本偏高，很难大规模普及。目前的增强现实技术大多用计算机屏幕(大型显示屏)，手机、平板等设备来展示。在增强现实技术应用于大型显示屏的情况下，用户的操作依赖于大型显示屏，当用户离开大型显示屏幕时，则无法继续进行场景互动。在增强现实技术应用于手机端的情况下，用户只能独享互动场景，其他人无法参与其中。专利技术内容针对现有技术中存在的上述问题，本专利技术提供一种基于增强现实识别技术的大小屏互动方式，来展现一种创新的AR互动体验。根据本专利技术的一个方面，提供一种基于增强现实的互动系统，包括：大屏端，所述大屏端具有显示屏幕，所述显示屏幕对于用户的控制作出响应；移动端，所述移动端包括图像采集单元，通信单元，存储单元以及显示单元；以及云端，所述云端分别与所述大屏端和移动端建立数据连接，其中所述移动端被配置成对准大屏端，通过图像采集单元将大屏端显示的图像采集到显示单元，用户在显示单元上选取感兴趣的对象，来抓取对象，在移动端的显示单元上实时显示被抓取对象的扩展内容。在本专利技术的一个实施例中，所述移动端还包括图像识别单元，所述图像识别单元对所述图像采集单元获取的图像进行识别，识别出所述感兴趣的对象，所述移动端通过通信单元向大屏端或云端请求与识别的对象相关的内容，然后从大屏端或云端接收所述内容。在本专利技术的一个实施例中，在大屏端与移动端形成通信连接，移动端通过通信单元将采集的图像传送到云端或大屏端，在云端或大屏端完成图像识别后，从云端或大屏端下载与识别对象相关的内容。在本专利技术的一个实施例中，基于增强现实的互动系统还包括所述移动端对被抓取的对象进行操作，所述操作包括预览、放大、缩小、旋转、移动、百科知识查看、拍照分享和游戏互动中的一项或多项。在本专利技术的一个实施例中，所述移动端将被抓取对象的相关信息存储在存储单元中，并在主界面上生成对应图标，当用户离开大屏端后，通过点击移动端上的对应图标对被抓取的对象进行操作。根据本专利技术的另一个实施例，提供一种基于增强现实的互动系统的移动端，包括：图像采集单元，所述图像采集单元采集图像；显示单元，所述显示单元显示所述图像；通信单元；以及存储单元，其中用户在显示单元上操作感兴趣的对象，来抓取对象，在移动端的显示单元上实时显示被抓取对象的扩展内容。在本专利技术的另一个实施例中，移动端还包括图像识别单元，所述图像识别单元对所述图像采集单元获取的图像进行识别，识别出所述感兴趣的对象，所述移动端通过通信单元向大屏端或云端请求与识别的对象相关的内容，然后从大屏端或云端接收所述内容。在本专利技术的另一个实施例中，移动端通过通信单元与大屏端形成通信连接，移动端通过通信单元将采集的图像传送到云端或大屏端，在云端或大屏端完成图像识别后，从云端或大屏端下载与识别对象相关的内容。在本专利技术的另一个实施例中，所述移动端对被抓取的对象进行操作，所述操作包括预览、放大、缩小、旋转、移动、百科知识查看、拍照分享和游戏互动中的一项或多项。在本专利技术的另一个实施例中，所述移动端将被抓取对象的相关信息存储在存储单元中，并在主界面上生成对应图标，当用户离开大屏端后，通过点击移动端上的对应图标对被抓取的对象进行操作。根据本专利技术的又一个实施例，提供一种基于增强现实的互动方法，包括：在大屏上显示一个或多个内容；将移动端对准所述大屏，通过所述移动端的图像采集设备将大屏显示内容的图像采集到所述移动端的显示单元上；用户在显示单元上操作该兴趣的对象，来抓取对象；移动端获取与被抓取对象相关的信息；在移动端的显示单元上显示被抓取对象的扩展信息。在本专利技术的又一个实施例中，抓取对象包括：对移动端获取的图像进行识别，从所述图像中提取感兴趣的对象，所述方法还包括：将与所述感兴趣的对象相关的信息传送给移动端；所述移动端将与所述感兴趣的对象相关的信息存储在存储单元中，并在主界面上生成对应图标。在本专利技术的又一个实施例中，互动方法还包括在所述移动端对被抓取的对象进行操作，所述操作包括预览、放大、缩小、旋转、移动、百科知识查看、拍照分享和游戏互动中的一项或多项。附图说明为了进一步阐明本专利技术的各实施例的以上和其它优点和特征，将参考附图来呈现本专利技术的各实施例的更具体的描述。可以理解，这些附图只描绘本专利技术的典型实施例，因此将不被认为是对其范围的限制。在附图中，为了清楚明了，相同或相应的部件将用相同或类似的标记表示。图1示出根据本专利技术的一个实施例的基于增强现实的互动系统100的示意图。图2示出根据本专利技术的一个实施例的移动端200的示意框图。图3示出根据本专利技术的另一个实施例的移动端300的示意框图。图4示出根据本专利技术的一个实施例的基于增强现实的互动方法的流程图。图5示出根据本专利技术的一个实施例的大屏显示画面的示意图。图6示出根据本专利技术的一个实施例的大屏和移动端显示画面的示意图。图7示出根据本专利技术的一个实施例的移动端进行捕捉的示意图。图8示出根据本专利技术的一个实施例的与感兴趣的对象进行AR拍照的示意图。图9示出根据本专利技术的一个实施例的与感兴趣的对象进行游戏互动的示意图。图10示出根据本专利技术的一个实施例的显示感兴趣的对象的相关信息的示意图。图11示出根据本专利技术的一个实施例的对感兴趣的对象进行线下学习的示意图。具体实施方式在以下的描述中，参考各实施例对本专利技术进行描述。然而，本领域的技术人员将认识到可在没有一个或多个特定细节的情况下或者与其它替换和/或附加方法、材料或组件一起实施各实施例。在其它情形中，未示出或未详细描述公知的结构、材料或操作以免使本专利技术的各实施例的诸方面晦涩。类似地，为了解释的目的，阐述了特定数量、材料和配置，以便提供对本专利技术的实施例的全面理解。然而，本专利技术可在没有特定细节的情况下实施。此外，应理解附图中示出的各实施例是说明性表示且不一定按比例绘制。在本说明书中，对“一个实施例”或“该实施例”的引用意味着结合该实施例描述的特定特征、结构或特性被包括在本专利技术的至少一个实施例中。在本说明书各处中出现的短语“在一个实施例中”并不一定全部指代本文档来自技高网...

【技术保护点】
1.一种基于增强现实的互动系统，包括：大屏端，所述大屏端具有显示屏幕，所述显示屏幕对于用户的控制作出响应；移动端，所述移动端包括图像采集单元，通信单元，存储单元以及显示单元；以及云端，所述云端分别与所述大屏端和移动端建立数据连接，其中所述移动端被配置成对准大屏端，通过图像采集单元将大屏端显示的图像采集到显示单元，用户在显示单元上选取感兴趣的对象，来抓取对象，在移动端的显示单元上实时显示被抓取对象的扩展内容。

【技术特征摘要】
1.一种基于增强现实的互动系统，包括：大屏端，所述大屏端具有显示屏幕，所述显示屏幕对于用户的控制作出响应；移动端，所述移动端包括图像采集单元，通信单元，存储单元以及显示单元；以及云端，所述云端分别与所述大屏端和移动端建立数据连接，其中所述移动端被配置成对准大屏端，通过图像采集单元将大屏端显示的图像采集到显示单元，用户在显示单元上选取感兴趣的对象，来抓取对象，在移动端的显示单元上实时显示被抓取对象的扩展内容。2.如权利要求1所述的基于增强现实的互动系统，其特征在于，所述移动端还包括图像识别单元，所述图像识别单元对所述图像采集单元获取的图像进行识别，识别出所述感兴趣的对象，所述移动端通过通信单元向大屏端或云端请求与识别的对象相关的内容，然后从大屏端或云端接收所述内容。3.如权利要求1所述的基于增强现实的互动系统，其特征在于，在大屏端与移动端形成通信连接，移动端通过通信单元将采集的图像传送到云端或大屏端，在云端或大屏端完成图像识别后，从云端或大屏端下载与识别对象相关的内容。4.如权利要求1所述的基于增强现实的互动系统，其特征在于，还包括所述移动端对被抓取的对象进行操作，所述操作包括预览、放大、缩小、旋转、移动、百科知识查看、拍照分享和游戏互动中的一项或多项。5.如权利要求1所述的基于增强现实的互动系统，其特征在于，所述移动端将被抓取对象的相关信息存储在存储单元中，并在主界面上生成对应图标，当用户离开大屏端后，通过点击移动端上的对应图标对被抓取的对象进行操作。6.一种基于增强现实的互动系统的移动端，包括：图像采集单元，所述图像采集单元采集图像；显示单元，所述显示单元显示所述图像；通信单元；以及存储单元，其中用户在显示单元上操作感兴趣的对象，来抓取对象，在移动端的显示单元上实时显示被抓取对象的扩展内容。7.如权利要求6所述的移...

【专利技术属性】
技术研发人员：肖东晋，张立群，
申请(专利权)人：阿依瓦北京技术有限公司，
类型：发明
国别省市：北京,11