信息处理设备和信息处理方法技术

技术编号:17798816 阅读:77 留言:0更新日期:2018-04-25 22:19
例如,基于由输入信息获取单元50接收的用户操作和图像拾取图像获取单元52获取的立体相机图像拾取图像,信息处理设备10在信息处理单元62中实现例如用于游戏的信息处理,并且将结果从输出数据生成单元66输出到显示设备。此时,跟踪处理单元54从立体图像检测对应标记的图像,并且基于其视差,获取目标的位置信息。校准确定单元64基于标记的检测图像在垂直方向上的位置失准,确定对照相机校准的需求,并且请求输出数据生成单元66通知用户。

【技术实现步骤摘要】
【国外来华专利技术】信息处理设备和信息处理方法
本专利技术涉及用于从捕获的图像中检测目标对象的信息处理技术。
技术介绍
一些视频游戏涉及用相机捕获用户身体和标记的图像,并将捕获图像的相关区域替换为用于在显示设备上显示的另一图像(例如,参考专利文献1)。用户接口系统也是已知的,通过该系统,用相机捕获的嘴和手的运动被解释为操作应用程序的指令。为了显示对现实世界中的成像运动作出反应的虚拟世界或者对图像执行某种类型的信息处理,用于捕获现实世界的这种技术已被用于从移动终端到休闲设施的各种领域,而不管规模。[引用列表][专利文献][专利文献1]欧洲专利申请公开号0999518
技术实现思路
[技术问题]上述技术总是面临着如何从获取的图像中准确获取关于现实世界信息的重大挑战。例如,如果各种成像参数由于成像环境的变化或者由于成像设备的长期变化而改变,则存在信息获取的准确性可能降低的可能性。然而,这样的内部参数的变化通常是不可见的,并且对于任何用户来说都难以识别。结果,用户可能在抱怨设备性能下降的同时继续使用该设备。如果提示用户定期(例如,每次开始处理)执行校准,则可以想到获得最佳条件。但是,这势必会增加用户的负担。本专利技术是鉴于上述情况而完成的。因此,本专利技术的一个目的是提供一种用于容易地保持信息处理的准确性的技术,该信息处理涉及使用所获取的图像以最少的时间和精力在用户的部分上跟踪目标对象。[解决问题的方法]本专利技术的一个实施例涉及一种信息处理设备。这是一种信息处理设备,配置为从由立体相机获取的图像获取关于目标对象的位置信息以用于信息处理。所述信息处理设备包括:目标对象检测部分,配置为从由所述立体相机从右视点和左视点获取的立体图像中检测所述目标对象的图像;校准确定部分,配置为使得所述校准确定部分基于所述目标对象图像的检测结果,监视所述立体图像之间的垂直位置失准量,并且如果所述位置失准量满足预定条件,则确定需要相机校准;以及输出数据生成部分,配置为使得如果确定需要所述相机校准,则输出数据生成部分输出关于所确定的需要的信息。本专利技术的另一个实施例涉及一种信息处理方法。这是由信息处理设备执行的信息处理方法,所述信息处理设备配置为从由立体相机获取的图像中获取关于目标对象的位置信息以用于信息处理,所述信息处理方法包括:从由所述立体相机从右视点和左视点获取的立体图像检测目标对象的图像的步骤;基于所述目标对象图像的检测结果,监视所述立体图像之间的垂直位置失准量,并且如果所述位置失准量满足预定条件,则确定需要相机校准的步骤;以及如果确定需要所述相机校准,则输出关于确定的需要的信息的步骤。如果诸如方法、设备、系统、计算机程序和在记录这种计算机程序的记录介质的不同形式之间转换上述概括的组成要素或本专利技术的上述表达的其他组合,它们仍然构成本专利技术的有效实施例。[专利技术的有益效果]根据本专利技术,容易保持使用所获取的图像的信息处理的准确性。附图说明图1是描绘可以应用本实施例的信息处理系统的示例性配置的示意图。图2是描绘本实施例的信息处理设备的内部电路结构的示意图。图3是描绘本实施例的头戴式显示器(HMD)的外部形状的示意图。图4是用于说明使用由本实施例的成像设备获取的图像来跟踪目标对象的技术的示意图。图5是描绘当右相机和左相机的光轴或垂直位置彼此为对准时可应用的立体图像的示意图。图6是描绘本实施例的信息处理设备的功能块的结构的框图。图7是描绘本实施例的信息处理设备在进行信息处理的同时确定校准所需的时机的过程的流程图。图8是用于说明利用本实施例确认是否获取有效位置数据的技术的图。图9是描绘当使用从图像检测到的标记图像的数量来确定数据累积的开始和结束时,本实施例验证位置数据的有效性的过程的流程图。图10是说明有效的失准量与确定校准需要的过程之间的关系的图示。具体实施方式图1是描绘可以应用本实施例的信息处理系统的示例性配置的示意图。信息处理系统8包括:捕获目标对象的图像的成像设备12、基于捕获的图像执行信息处理的信息处理设备10、显示作为信息处理的结果而获得的图像的平板显示器16和头戴式显示器(以下称为HMD)18、以及由用户操作的输入设备14。信息处理设备10、成像设备12、输入设备14、平板显示器16和HMD18可以通过电缆或以涉及诸如蓝牙(注册商标)的已知无线通信技术的无线方式互连。取决于由信息处理设备10执行的信息处理,可以选择性地提供输入设备14、平板显示器16和HMD18。这些设备的外形不限于图中所示的。这些设备中的两个或更多个可以集成在单个设备中。例如,信息处理设备10、输入设备14和平板显示器16可以集成地实现在移动终端中。成像设备12具有以预定帧速率获取诸如用户的目标对象的图像的相机,以及对来自相机的输出信号执行诸如去马赛克的已知处理,以在发送生成的输出数据到信息处理设备10之前生成获取的图像的输出数据。相机是具有诸如电荷耦合器件(CCD)传感器或互补金属氧化物半导体(CMOS)传感器的右和左可见光传感器的立体相机,两个器件隔开已知的水平距离。信息处理设备10通过使用从成像设备12发送的数据执行必要的信息处理,生成诸如图像和声音的输出数据。由信息处理设备10执行的处理的内容不受限制,并且可以在保持具有用户所需的功能或正在使用的应用程序的内容的情况下适当地确定。例如,信息处理可以涉及对所获取的图像执行跟踪处理以使游戏进行,其中出现反映用户的运动的角色作为目标对象,或者将用户的运动转换成输入命令。此时,输入设备14的移动可以使用附加到其上的标记来获取。作为另一种替代方案,可以跟踪附加到HMD18的外表面的多个标记以识别穿戴HMD18的用户的头部的位置和姿势。然后可以使HMD18显示从根据所识别的用户头部的位置和姿势而移动的视点观看的虚拟世界。由信息处理设备10生成的输出数据至少被发送到HMD18或平板显示器16。HMD18是由用户穿戴在头上的显示设备,其在位于用户眼睛前面的诸如有机电致发光(EL)面板的显示面板上显示图像。例如,HMD18生成从左侧和右侧观看的视差图像,并且在构成显示屏幕的左屏幕区域和右屏幕区域上显示每个图像,由此允许用户观看三维(3D)图像。或者,可以在整个显示屏幕上显示单个图像。HMD18可以进一步并入将声音输出到用户的耳朵所在位置的扬声器或耳机。平板显示器16可以是具有用于输出二维图像的显示器和用于输出声音的扬声器的电视机(TV)。例如,平板显示器16可以是液晶显示电视机、有机EL电视机、等离子显示器电视机或个人计算机(PC)显示器。在另一个例子中,平板显示器16可以是具有扬声器的平板电脑终端或移动终端的显示器。当由用户操作时,输入设备14接收诸如用于开始和结束处理、选择功能和输入命令的请求,并且将所接收的请求作为电信号输出到信息处理设备10。输入设备14可以是安装在平板显示器16的显示表面上的诸如游戏控制器、键盘、鼠标、操纵杆和触摸板之类的通用输入设备中的任何一个,或者这些设备的组合。输入设备14还可以包括以预定颜色的发光的元件的发光标记,或者这种发光元件的集合。在这种情况下,信息处理设备10可以使用捕获的图像来跟踪标记的移动,并且将输入设备14的移动解释为用户的操作。作为另一种替代,输入设备14可以仅由发光标记和用于保持该标记的机构构成。本文档来自技高网...
信息处理设备和信息处理方法

【技术保护点】
一种信息处理设备,配置为从由立体相机获取的图像获取关于目标对象的位置信息以用于信息处理,所述信息处理设备包括:目标对象检测部分,配置为从由所述立体相机从右视点和左视点获取的立体图像中检测所述目标对象的图像;校准确定部分,配置为使得所述校准确定部分基于所述目标对象图像的检测结果,监视所述立体图像之间的垂直位置失准量,并且如果所述位置失准量满足预定条件,则确定需要相机校准;以及输出数据生成部分,配置为使得如果确定需要所述相机校准,则输出数据生成部分输出关于所确定的需要的信息。

【技术特征摘要】
【国外来华专利技术】2015.05.20 JP 2015-1031831.一种信息处理设备,配置为从由立体相机获取的图像获取关于目标对象的位置信息以用于信息处理,所述信息处理设备包括:目标对象检测部分,配置为从由所述立体相机从右视点和左视点获取的立体图像中检测所述目标对象的图像;校准确定部分,配置为使得所述校准确定部分基于所述目标对象图像的检测结果,监视所述立体图像之间的垂直位置失准量,并且如果所述位置失准量满足预定条件,则确定需要相机校准;以及输出数据生成部分,配置为使得如果确定需要所述相机校准,则输出数据生成部分输出关于所确定的需要的信息。2.根据权利要求1所述的信息处理设备,其中,所述校准确定部分与由所述目标对象检测部分执行的对于所述信息处理的所述目标对象图像的检测过程并行地监视所述位置失准量。3.根据权利要求1或2所述的信息处理设备,其中,所述校准确定部分累积地记录来自由所述立体相机所获取的运动图像中的多个帧的所述立体图像之间的垂直位置失准量,并且基于累积的垂直位置失准量,确定用于确定是否需要所述相机校准的有效位置失准量。4.根据权利要求3所述的信息处理设备,其中,基于所述目标对象检测部分对所述目标对象图像的检测结果,所述校准确定部分确定至少开始或结束所述垂直位置失准量的累积的定时。5.根据权利要求4所述的信息处理设备,其中,所述目标对象检测部分检测以预定方式排列并附加到对象的表面上的多个标记的图像,作为所述目标对象,以及基于由所述目标对象检测部分检测到的标记图像的数量,所述校准确定部分确定用于开始和结束所述垂直位置失准量的累积的定时。6.根据权利要求3到5中的任一项所述的信息处理设备,其中,所述校准确定部分从所述多个帧中获取在所述立体图像中...

【专利技术属性】
技术研发人员:冈本宽史池上涉一
申请(专利权)人:索尼互动娱乐股份有限公司
类型:发明
国别省市:日本,JP

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1