信息处理装置和用户指南呈现方法制造方法及图纸

技术编号:18792283 阅读:33 留言:0更新日期:2018-08-29 10:30
显示包含成像设备和用户的真实空间的俯视图且参照成像设备的位置捕获的图像(a),或者参照用户的面对方向捕获的图像(b),被呈现为用户指南。在两个图像中,表示成像设备的矩形130和表示用户的圆圈132被以这种方式显示来反映其间的真实位置关系和其方向。此外,由相机视角等定义的表示在水平方向上的游戏区域的区域134和表示用户应该移动的方向的箭头136也被显示。

Information processing device and user guide presentation method

An image (a) captured by referring to the position of the imaging device, including a top view of the real space of the imaging device and the user, or an image (b) captured by referring to the user's face direction, is displayed as a user guide. In both images, the rectangle 130 representing the imaging device and the circle 132 representing the user are displayed in this manner to reflect the true positional relationship and direction between them. In addition, an area 134 representing a horizontal game area defined by the camera's viewing angle, etc., and an arrow 136 indicating the direction the user should move are also displayed.

【技术实现步骤摘要】
【国外来华专利技术】信息处理装置和用户指南呈现方法
本专利技术涉及基于捕获的图像执行信息处理的信息处理装置,以及由该信息处理装置实现的用户指南呈现方法。
技术介绍
现今,用户可观看穿戴在头部并连接到游戏机的头戴式显示器(此后被称为HMD)的显示屏幕来玩视频游戏(例如,见PTL1)。如果获取用户头部的位置和姿势,使得虚拟世界的图像以这样的方式呈现给用户,例如,根据获取的用户面部的方向来改变视场,有可能产生用户感觉似乎他或她实际上在虚拟世界的情况。一般地,例如通过分析捕获到的用户的可见光或红外光图像,或者基于HMD内部的运动传感器取得的测量,获取用户的位置和姿势。引用列表[专利文献][PTL1]日本专利号5580855
技术实现思路
[技术问题]用于基于捕获的图像执行某种信息处理的技术是基于诸如用户的目标物体在相机的视角内的假设。取决于信息处理的性质,用户优选的所处区域可能被限制。然而,由于穿戴HMD的用户不能观看到外面的世界,用户可能迷失方向或可能在进行的游戏中沉浸得太多以至用户可能移动到真实空间中的一个意料之外的地方而没有注意到它。这种偶然性可能会导致信息处理的精度的恶化或其扰乱,也会导致与其它物体的碰撞。在不移除HMD的情况下,用户很难发现不规则行为的原因。如果这种情况频繁地发生,他们将从使用HMD所提供的虚拟空间的世界视野中分心。本专利技术是鉴于上述情况做出的。因此,本专利技术的一个目的是提供以最小的负担来享受HMD呈现的世界的技术。[解决方案]根据本专利技术的一个方面,提供了一种信息处理装置,包括:位置信息获取部分,被配置为获取关于头戴式显示器的位置信息;信息处理部分,被配置为使用关于头戴式显示器的位置信息执行信息处理;输出数据生成部分,被配置为生成并且输出要被显示的图像的数据作为信息处理的结果;以及用户指南生成部分,被配置为利用关于头戴式显示器的位置信息生成并且输出指示关于用户在真实空间中的位置信息的用户指南的图像的数据。根据本专利技术的另一个方面,提供了一种用于信息处理装置的用户指南呈现方法。所述方法包括:获取关于头戴式显示器的位置信息的步骤;使用关于头戴式显示器的位置信息执行信息处理的步骤;生成并且输出要被显示的图像的数据作为信息处理的结果的步骤;以及使用关于头戴式显示器的位置信息生成并且输出指示关于用户在真实空间中的位置信息的用户指南的图像的数据的步骤。附带地,如果以上概述的组成要素或本专利技术的上述表达式的其它组合在不同形式间被转换,诸如方法、装置、系统、计算机程序以及其上记录了计算机程序的记录介质,它们仍然构成本专利技术的有效实施例。[专利技术的有益效果]根据本专利技术,穿戴HMD的用户可以以最小的负担来享受由此呈现的世界。附图说明图1是描绘可能应用本专利技术的一个实施例的信息处理系统的典型配置的示意图。图2是描绘实施例的HMD的典型外部形状的示意图。图3是描绘实施例的信息处理装置的内部电路配置的示意图。图4是描绘实施例的HMD的内部电路配置的示意图。图5是描绘实施例的信息处理装置的功能块配置的示意图。图6是说明由实施例从捕获的图像获取的信息的说明图。图7是描绘本实施例显示为用户指南的每个都是俯视图的典型图像的示意图。图8是描绘本实施例显示用户指南的图像的典型显示屏幕的示意图。图9是描绘本实施例显示为用户指南的侧视图的典型图像的示意图。图10是描绘本实施例显示为用户指南的俯视图的另一典型图像的示意图。图11是描绘本实施例显示为用户指南的俯视图的又一典型图像的示意图。图12是描绘本实施例显示为用户指南的点云的典型图像的示意图。图13是描绘本实施例显示为用户指南的俯视图的又一典型图像的示意图。图14是描绘本实施例的信息处理装置按照用户的移动生成输出数据的过程的流程图。具体实施方式图1描绘可能应用本专利技术一个实施例的信息处理系统的典型配置。信息处理系统8包括:成像目标物体的成像设备12、基于捕获的图像执行信息处理的信息处理装置10、平面屏幕显示器16和用来显示作为信息处理的结果获得的图像的HMD18、以及由用户操作的输入设备14。信息处理装置10可通过线缆或已知的无线通信技术诸如蓝牙(注册商标)与成像设备12、输入设备14、平面屏幕显示器16、以及HMD18相连接。取决于由信息处理装置10执行的信息处理,平面屏幕显示器16可被省略。装置和设备的外部形状不限于示出的形状。两个或更多的这种设备可能集成在一个单独的设备或装置中。例如,信息处理装置10、输入设备14、以及平面屏幕显示器16可以实现在一个移动终端里。成像设备12包含以预定的帧速率和机制成像目标物体(诸如用户)的相机,该机制在将输出数据发送到信息处理装置10之前,通过执行已知的处理(诸如在来自相机的输出信号上去马赛克)生成捕获图像的输出数据。提供了一种相机,包含用于普通数码相机或数码摄像机的可见光传感器,诸如电荷耦合器件(CCD)传感器或互补金属氧化物半导体(CMOS)传感器。成像设备12可包含单个相机或如图示的具有以已知距离布置在右边和左边的两个相机的所谓立体相机。作为另一种选择,成像设备12可通过将单目相机和向目标物体发射诸如红外线的参考光并且测量其反射光的设备组合形成。当提供了立体相机或反射光测量机制时,可能找出目标物体在三维真实空间里的位置。这允许信息处理装置10来执行信息处理或显示设备用更多样化的方式给出图像显示。公知的是,立体相机通过利用从右和左视点捕获的立体图像、借助三角测量的原理来确定从相机到目标物体的距离。通过基于飞行时间(TOF)的反射参考光的测量或使用模式投影法来确定从相机到目标物体的距离的技术也是公知的。下文主要是对成像设备12捕获立体图像的方式的描述。然而,这并不限制本专利技术如何实践。在成像设备12中仅需要包含至少一个相机。信息处理装置10利用从成像设备12发送的数据执行必要的信息处理,以便生成诸如图像和音频数据的输出数据。信息处理装置10执行的处理内容不作特别限制,并且可能取决于例如用户期望的功能、应用或电子内容来根据需要确定。信息处理装置10典型地执行已知处理,诸如在捕获的图像上的人脸检测和追踪,以便推进视频游戏(其中出现反映用户移动的角色作为目标物体)或将用户的移动转换成用于信息处理的命令输入。在这时,可使用附加在输入设备14上的标记来获取输入设备14的移动。另外,附加于HMD18的外表面的多个标记可被追踪,以便识别穿戴HMD18的用户的头部的位置和姿势。然后按照识别出的用户头部的位置和姿势,使HMD18显示如从被移动的视点观看到的虚拟世界。由信息处理装置10生成的输出数据至少被发送到HMD18。HMD18是在放置在用户眼前的诸如有机电致发光(EL)面板的显示面板上将图像呈现给穿戴它的用户的显示设备。例如,生成从右和左视点捕获的视差图像并且在平分显示屏幕的右和左显示区域上显示,使得图像可以被立体视野地观看。然而,这并不限制本专利技术如何实践。例如,单个图像可被显示在整个显示屏幕上。此外,HMD18可包含将声音输出到对应于用户耳朵位置的扬声器或耳机。平面屏幕显示器16可以是装备了输出二维图像的显示单元以及输出声音的扬声器的电视机。例如,平面屏幕显示器16可以是液晶显示电视机、有机EL电视机、等离子显示电视机或个人电脑(PC)显示单元。可替代地,平面屏幕显示器16本文档来自技高网...

【技术保护点】
1.一种信息处理装置,包括:位置信息获取部分,被配置为获取关于头戴式显示器的位置信息;信息处理部分,被配置为使用所述关于头戴式显示器的所述位置信息执行信息处理;输出数据生成部分,被配置为生成并且输出将作为所述信息处理的结果要被显示的图像的数据;以及用户指南生成部分,被配置为使用所述关于头戴式显示器的所述位置信息,生成并且输出指示关于用户在真实空间中的位置信息的用户指南的图像的数据。

【技术特征摘要】
【国外来华专利技术】2016.01.20 JP 2016-0090021.一种信息处理装置,包括:位置信息获取部分,被配置为获取关于头戴式显示器的位置信息;信息处理部分,被配置为使用所述关于头戴式显示器的所述位置信息执行信息处理;输出数据生成部分,被配置为生成并且输出将作为所述信息处理的结果要被显示的图像的数据;以及用户指南生成部分,被配置为使用所述关于头戴式显示器的所述位置信息,生成并且输出指示关于用户在真实空间中的位置信息的用户指南的图像的数据。2.根据权利要求1所述的信息处理装置,其中,所述用户指南生成部分在所述用户指南的图像上指示用于成像所述头戴式显示器以获取其位置信息的成像设备的位置。3.根据权利要求1或2所述的信息处理装置,其中,所述用户指南生成部分在所述用户指南的图像上指示设置为所述用户要停留其中的范围的游戏区域。4.根据权利要求1至3中任一项所述的信息处理装置,其中,所述位置信息获取部分基于由成像设备捕获的图像,获取关于所述用户以外的物体的位置信息;并且所述用户指南生成部分在所述用户指南的图像上指示除了所述用户之外的物体的位置。5.根据权利要求1至4中任一项所述的信息处理装置,其中,所述用户指南生成部分生成所述用户的俯视图,并且根据由所述位置信息获取部分获取的所述用户的方向来旋转所述俯视图。6.根据权利要求1至5中任一项所述的信息处理装置,其中,所述用户指南生成部分在所述用户指南的图像上指示表示要被所述用户采取的行动的图形图。7.根据权利要求1至6中任一项所述的信息处理装置,其中,所述用户指南生成部分响应所述用户的操作或者无论用户操作如何,根据由所述位置信息识别的条件来决定是否要显示所述用户指南。8.根据权利要求2所述的信息处理装置,其中,所述用户指南生成部分在所述用户指南的图像上指示将所述成像设备的相机视角划分成...

【专利技术属性】
技术研发人员:池上涉一土江竜雄稻田彻悟内田真树冈本宽史
申请(专利权)人:索尼互动娱乐股份有限公司
类型:发明
国别省市:日本,JP

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1