当前位置: 首页 > 专利查询>索尼公司专利>正文

增强现实系统技术方案

技术编号:11587135 阅读:51 留言:0更新日期:2015-06-10 20:20
一种增强现实系统,其包括无人驾驶移动物和被布置在无人驾驶移动物上或无人驾驶移动物内的增强现实标记。增强现实系统进一步包括视觉渲染单元,该视觉渲染单元被配置为增强与增强现实标记相对应的虚拟信息并且将所述虚拟信息映射在无人驾驶移动物上。

【技术实现步骤摘要】
【国外来华专利技术】
本公开涉及一种增强现实(augmented reality)系统。具体地,本公开涉及基于无人驾驶移动物(unmanned moving object)的增强现实标记(marker)。
技术介绍
为了集成真实和虚拟世界,已经开发出了2D增强现实(AR)标记。AR系统通过摄影机识别AR标记的唯一的ID和3D位置,然后将虚拟信息叠加在AR标记上。因此,通过AR标记,用户可以看见叠加在真实世界上的虚拟信息。AR是物理、真实世界环境的生动、直接或间接的视图,通过诸如声音、视频、图片或GPS数据的计算机生成的感官输入来增强其要素。换言之,AR通过改善人们的感官和技能来增强具有虚拟信息的真实世界环境。AR将虚拟信息和角色与真实世界混合。本公开主要专注于将虚拟视频或图像信息与真实世界信息相混合,但不限于此。从现有技术已知的AR标记通常是纸制的,其所印制的2D编码是非常简单并且易于使用的。例如,从美国2007/0098234A1中已知的是各式各样不同的标记和用于检测标记的对应方法。一种传统的AR标记是所谓的ARTag,参见http://www.artag.net,在2009年2月最后一次更新版本。ARTag是支持增强现实的受托(fiduciary)标记系统。它能够使制造虚拟物体更加容易,游戏和动画开始进入真实世界。ARTag允许视频追踪能力,该追踪能力参照正方形物理标记实时地计算真实照相机位置和定向。一旦<br>真实照相机的位置是已知的,则能够同时放置虚拟摄像机,并且3D计算机图形模型能够精确地叠加在标记上。使用这类2D ARTag或其他2D受托标记(AR标记)不需要像陀螺仪或磁性追踪器的专用感测设备。因此,不仅对研究投影而且对类似苹果和安卓应用程序的消费服务和投影是有用的。2D AR标记的应用程序具有两个限制:一个限制是在AR标记与用户之间的关系保持与AR标记实质上相同,AR标记被印制或定位在静止的二维的纸片上。这意味着用户需要发现包括布置在其上的AR标记的纸、接近它并且利用照相机设备获取其图像以引发交互。同样,通过标记显示的虚拟信息取决于其位置,所以信息不能移动至用户不能获取标记的区域。考虑到游戏、漫画和动画片中的角色(例如,人、生物、机器人和车辆)。它们能够在场景中自由移动并且有时在空中飞行。相反,由于简单的原因阻止了AR标记的角色的移动。如果用户主要拍摄且跟随角色而不是标记,则当标记离开照相机范围时角色消失。因此,离开运动视点的动画角色与AR之间存在间隙。另一局限是虚拟信息的真实性。虚拟信息通常被投影在布置了AR标记的纸片上。因此,虚拟信息实际上出现在AR标记的上方。用户不能直接触摸该虚拟信息,所以它们接收不到来自角色的反馈;他或她的手指正好穿过该虚拟信息。虽然一些标记具有物理属性,但是它们限于表达大量的VR信息。因此,在AR标记和与其相对应的虚拟信息之间存在间隙。美国2009/0195538 A1公开了增强现实方法和系统,该系统包括标记检测单元,该标记检测单元接收来自包括标记的真实环境的图像并且检测被包括在图像中的标记。标记位置提取单元提取所检测到的标记的位置。噪声移除单元从标记位置提取单元提取到的标记的位置信息中移除噪声。包括虚拟物体增强单元的视觉渲染单元增强与标记相对应的虚拟物体,并且将它们输出至标记的位置。运动估计单元估计估计在一个时间步长上的标记的运动,从而基于从噪声移除单元转移的标记的位置信息来执行触觉渲染。碰撞检测单元检测与通过运动估计单元所估计出的标记的位置相对应的虚拟物体是否与触觉设备的端点碰撞。包括反作用力计算单元的触觉渲染单元根据碰撞检测单元的确定来计算通过触觉设备所提供的反作用力。美国2009/0195538 A1涉及用于在增强现实中触觉交互的方法和系统。此方法和系统试图从通过图像拍摄设备所拍摄的真实图像中移除噪声,并且使触觉交互中所生成的力的非连续性最小化,从而稳定并且平滑地执行增强现实中的触觉交互。
技术实现思路
本专利技术的目标是提供一种改善的增强现实系统。根据一方面,提供了一种增强现实系统,包括:-无人驾驶移动物;-增强现实标记,被布置在所述无人驾驶移动物上或所述无人驾驶移动物内;以及-视觉渲染单元,被配置为增强与增强现实标记相对应的虚拟信息并且将所述虚拟信息映射在无人驾驶移动物上。根据另一方面,提供了一种具有增强现实标记的无人驾驶移动物,该增强现实标记被布置在所述无人驾驶移动物上或所述无人驾驶移动物内,所述无人驾驶移动物被用于如上所述的增强现实系统中。在从属权利要求中定义了优选实施方式。应理解的是,所要求保护的无人驾驶移动物具有与所要求保护的增强现实系统以及从属权利要求所限定的相似和/或相同的优选实施方式。本公开的方面之一是使用无人驾驶移动物,该无人驾驶移动物具有布置在其上的AR标记。本文中提出的AR标记能够与无人驾驶移动物一起移动,并且因此能够朝向用户/观测员移动。因此,可以动态地改变用户与AR标记之间的关系。相比于静态的纸类AR标记,将虚拟信息映射在无人驾驶移动物上。因为无人驾驶移动物具有“真实的”物理、三维形状,所以当用户试图触摸虚拟信息时,用户可以具有“真实的”触觉反馈。因此,虚拟信息看起来还具有物理量(physical volume)。与AR标记相对应的虚拟信息被映射在无人驾驶移动物的表面上,即,叠加在无人驾驶移动物的外表面上,类似于3D计算机图形中的纹理映射使虚拟信息可触知(tangible)。因此,可以在用户与虚拟信息之间进行动态和物理交互。无人驾驶移动物可以是可借助于一些致动器而移动的任何3D物体。例如,可以实现为无线电控制设备,诸如无线电控制的汽车、船、飞机等。根据实施方式,无人驾驶移动物被实现为遥控飞行物(unmanned flying object,无人驾驶飞行物)。由于其在空中飞行或漂浮的能力,包括布置在其上的AR标记的遥控飞行物还可以被称为“航空标记(Aero-Marker\)”。通过将AR标记附接至遥控飞行物,标记可以在空中自由移动并且飞行。因此,该标记能够接近用户以启动交互。定制设计的飞行物能够很容易地构造为基于它们的形状和行为代表各式各样的物体,诸如漫画和动画角色。根据示例性实施方式,遥控飞行物被实现为具有充气气囊(gas-filledenvelope)的飞艇(blimp)。飞艇能够漂浮在空中并且自由移动。多数人...

【技术保护点】
一种增强现实系统,包括:‑无人驾驶移动物;‑增强现实标记,被布置在所述无人驾驶移动物上或所述无人驾驶移动物内;‑视觉渲染单元,被配置为增强与所述增强现实标记相对应的虚拟信息并且将所述虚拟信息映射在所述无人驾驶移动物上。

【技术特征摘要】
【国外来华专利技术】2012.10.02 EP 12186931.71.一种增强现实系统,包括:
-无人驾驶移动物;
-增强现实标记,被布置在所述无人驾驶移动物上或所述无人
驾驶移动物内;
-视觉渲染单元,被配置为增强与所述增强现实标记相对应的
虚拟信息并且将所述虚拟信息映射在所述无人驾驶移动物上。
2.根据权利要求1所述的增强现实系统,其中,所述无人驾驶移动物
具有外表面,并且其中,所述视觉渲染单元被配置为将所述虚拟信
息映射在所述无人驾驶移动物的所述外表面的至少一部分上。
3.根据权利要求2所述的增强现实系统,其中,所述视觉渲染单元被
配置为使用纹理映射以将所述虚拟信息虚拟地叠加在所述无人驾驶
移动物的所述外表面上。
4.根据权利要求1所述的增强现实系统,进一步包括用于改变所述无
人驾驶移动物的位置的至少一个致动器。
5.根据权利要求1所述的增强现实系统,其中,所述无人驾驶移动物
是遥控飞行物。
6.根据权利要求5所述的增强现实系统,其中,所述遥控飞行物是包
括充气气囊的飞艇。
7.根据权利要求6所述的增强现实系统,其中,所述充气气囊具有外
表面,并且其中,所述视觉渲染单元被配置为将所述虚拟信息映射
在所述充气气囊的整个外表面上。
8.根据权利要求6所述的增强现实系统,进一步包括被布置在所述飞
艇上或所述飞艇内的至少一个光源,所述至少一个光源将所述增强
现实标记投影在所述飞艇的所述气囊上。
9.根据权利要求8所述的增强现实系统,进一步包括照明控制单元,
所述照明控制单元控制所述至少一个光源,以响应于用户输入将多
个不同的增强现实标记投影在所述飞艇的所述气囊上。
10.根据权利要求6所述的增强现实系统,进一步包括投影仪,所述投...

【专利技术属性】
技术研发人员:飞田博章
申请(专利权)人:索尼公司
类型:发明
国别省市:日本;JP

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1