信息处理设备和信息处理方法技术

提供了能够共享空间同时保持视线的自由度的信息处理设备和信息处理方法。所公开的信息处理设备设置有控制单元，该控制单元执行控制以在用户观看的显示区域中显示基于以下信息而生成的显示图像：图像信息，该图像信息是借助于安装在空间中移动的移动对象上的成像设备执行成像而生成的；成像设备姿态信息，该成像设备姿态信息是与该成像设备的姿态有关的信息；以及用户观看信息，该用户观看信息指定观看者期望观看的区域并且该用户观看信息是从由用户操作的用户操作设备获得的。

【技术实现步骤摘要】
【国外来华专利技术】
本公开内容涉及信息处理设备、信息处理方法以及程序。
技术介绍
近年来，为了将人的体验按原样传递给其他人，例如使用可佩戴式设备诸如头戴式摄像机中的第一人视点图像来生成各种内容。已经提出了用于通过经由前述的第一人视点图像的传递来实现与其他人交流以与其他人分享体验或者向其他人请求知识或指令的接口。例如，在专利文献1中公开了一种用于将由安装在头部上的成像设备所成像的视频传送至其他设备使得可以用其他设备观看该视频的技术。引文列表专利文献专利文献1：JP 2013-110764A
技术实现思路
技术问题然而，在专利文献1所公开的技术中，因为观看所传递的第一人视点图像的其他人的视线被限制于佩戴可佩戴式设备的佩戴者的视线，所以其他人可能无法从与佩戴者不同的视点理解空间。因此，期望提供一种能够共享空间同时保持视线的自由度的信息处理设备、信息处理方法以及程序。问题的解决方案根据本公开内容，提供了一种信息处理设备，该信息处理设备包括控制单元，该控制单元被配置成执行控制使得基于以下信息而生成的显示图
像显示在用户观看的显示区域中：图像信息，该图像信息是通过安装在空间中移动的移动对象上的成像设备的成像而生成的；成像设备姿态信息，该成像设备姿态信息是与成像设备的姿态有关的信息；以及用户观看信息，该用户观看信息是从由用户操作的用户操作设备获得的并且指定用户期望观看的区域。根据本公开内容，提供了一种信息处理方法，该信息处理方法包括执行控制使得基于以下信息而生成的显示图像显示在用户观看的显示区域中：图像信息，该图像信息是通过安装在空间中移动的移动对象上的成像设备的成像而生成的；成像设备姿态信息，该成像设备姿态信息是与成像设备的姿态有关的信息；以及用户观看信息，该用户观看信息是从由用户操作的用户操作设备获得的并且指定用户期望观看的区域。根据本公开内容，提供了一种使计算机实现如下功能的程序，该功能为执行控制使得基于以下信息而生成的显示图像显示在用户观看的显示区域中：图像信息，该图像信息是通过安装在空间中移动的移动对象上的成像设备的成像而生成的；成像设备姿态信息，该成像设备姿态信息是与成像设备的姿态有关的信息；以及用户观看信息，该用户观看信息是从由用户操作的用户操作设备获得的并且指定用户期望观看的区域。本专利技术的有益效果根据以上所述的本公开内容，可以共享空间，同时保持视线的自由度。注意，并不局限于上述效果，与所述效果一起或者取代所述效果，还可以呈现出期望被引入本说明书中的任何效果或者从本说明书可以预期的其他效果。附图说明图1是示出根据本公开内容的第一实施方式的系统的示意性配置的说明图。图2是示出根据实施方式的设备的示意性配置的说明图。图3是示意性地示出根据实施方式的可佩戴式设备的示例的说明图。图4A是示出根据实施方式的信息处理设备的配置的示例的框图。图4B是示出根据实施方式的信息处理设备的配置的示例的框图。图5是用于描述根据实施方式的信息处理设备的功能的说明图。图6是用于描述根据实施方式的信息处理设备的功能的说明图。图7是用于描述根据实施方式的信息处理设备的功能的说明图。图8是用于描述根据实施方式的信息处理设备的功能的说明图。图9是用于描述根据实施方式的信息处理设备的功能的说明图。图10是用于描述根据实施方式的信息处理设备的功能的说明图。图11是示出根据实施方式的信息处理方法的流程示例的流程图。图12是用于描述根据实施方式的显示控制处理的说明图。图13是用于描述根据实施方式的显示控制处理的说明图。图14是用于描述根据实施方式的显示控制处理的说明图。图15是用于描述根据实施方式的显示控制处理的说明图。图16是用于描述根据实施方式的显示控制处理的说明图。图17是示出根据实施方式的显示控制处理的流程示例的流程图。图18是示出根据本公开内容的第二实施方式的信息处理设备的配置的示例的框图。图19是用于描述根据实施方式的信息处理设备的功能的说明图。图20是用于描述根据实施方式的信息处理设备的功能的说明图。图21是用于描述根据实施方式的信息处理设备的功能的说明图。图22是示出根据实施方式的信息处理方法的流程示例的流程图。图23是用于描述根据实施方式的变型例的信息处理设备的功能的说明图。图24是示出根据实施方式的变型例的信息处理方法的流程示例的流程图。图25是用于描述光线空间的说明图。图26是示出根据本公开内容的第三实施方式的系统的示意性配置的说明图。图27A是示出根据实施方式的成像设备的示意性配置的说明图。图27B是示出根据实施方式的成像设备的示意性配置的说明图。图28A是示出根据实施方式的成像设备的示意性配置的说明图。图28B是示出根据实施方式的成像设备的示意性配置的说明图。图29是示出根据实施方式的成像设备的示意性配置的说明图。图30是示出根据实施方式的信息处理设备的配置的示例的框图。图31是用于描述根据实施方式的信息处理设备的功能的说明图。图32A是用于描述根据实施方式的信息处理设备的功能的说明图。图32B是用于描述根据实施方式的信息处理设备的功能的说明图。图33是用于描述根据实施方式的信息处理设备的功能的说明图。图34是示出根据实施方式的信息处理方法的流程示例的流程图。图35是示出根据实施方式的信息处理方法的流程示例的流程图。具体实施方式在下文中，将参照附图来详细描述本公开内容的优选实施方式。在本说明书和附图中，具有基本相同的功能和结构的元件以相同的附图标记进行表示，并且省略重复说明。将按照以下顺序进行描述。1.第一实施方式1.1系统配置的示例1.2信息处理设备的配置1.3信息处理方法的流程1.4显示控制处理的示例1.5结论2.第二实施方式2.1信息处理设备的配置2.2信息处理方法的流程2.3信息处理方法的修改例2.4结论3.第三实施方式3.1系统配置的示例3.2成像设备的配置3.3信息处理设备的配置3.4信息处理方法的流程3.5结论(第一实施方式)<系统配置的示例>图1是示出根据本公开内容的第一实施方式的系统的示意性配置的说明图。如图1所示，根据该实施方式的系统10包括服务器100和客户端200至700。服务器100是由单个服务器设备或经由各种有线或无线网络连接以进行协作的多个服务器设备所实现的功能的集合。服务器100向客户端设备200至700提供各种服务。客户端设备200至700是经由各种有线或无线网络与服务器100连接的终端设备。服务器100和客户端设备200至700独立地或合作地实现系统10中的以下(1)至(7)中的至少一个的功能。(1)一种设备，该设备包括成像机构诸如摄像机，并且将真实空间的捕获图像提供给服务器100或其他客户端设备200至700。(2)一种设备，该设备包括成像机构诸如摄像机，对真实空间的捕获图像执行各种图像处理，并且将与真实空间相关的并通过图像处理获得的各种图像提供给服务器100或其他客户端设备200至700。(3)一种设备，该设备包括成像机构诸如摄像机，对真实空间的捕获图像执行各种图像处理，根据用户对各种图像执行的各种操作来生成用户期望的图像，并且将所生成的各种图像提供给服务器100或其他客户端设备200至700。(4)一种设备，该设备包括至少显示机构诸如显示器，优选地还包括操作机构诸本文档来自技高网...

【技术保护点】
一种信息处理设备：控制单元，所述控制单元被配置成执行控制使得基于以下信息而生成的显示图像显示在用户观看的显示区域中：图像信息，所述图像信息是通过安装在空间中移动的移动对象上的成像设备的成像而生成的；成像设备姿态信息，所述成像设备姿态信息是与所述成像设备的姿态有关的信息；以及用户观看信息，所述用户观看信息是从由所述用户操作的用户操作设备获得的并且指定所述用户期望观看的区域。

【技术特征摘要】
【国外来华专利技术】2014.02.17 JP 2014-028015;2014.06.18 JP 2014-125791.一种信息处理设备：控制单元，所述控制单元被配置成执行控制使得基于以下信息而生成的显示图像显示在用户观看的显示区域中：图像信息，所述图像信息是通过安装在空间中移动的移动对象上的成像设备的成像而生成的；成像设备姿态信息，所述成像设备姿态信息是与所述成像设备的姿态有关的信息；以及用户观看信息，所述用户观看信息是从由所述用户操作的用户操作设备获得的并且指定所述用户期望观看的区域。2.根据权利要求1所述的信息处理设备，还包括：图像生成单元，所述图像生成单元被配置成使用所述图像信息中包括的捕获图像，生成在所述移动对象所在位置的周围所捕获的周围捕获图像；以及图像选择单元，所述图像选择单元被配置成基于所述用户观看信息和所述图像生成单元生成的所述周围捕获图像，在所述周围捕获图像中选择与所述用户观看信息对应的捕获图像作为用户观看图像。3.根据权利要求2所述的信息处理设备，还包括：图像校正单元，所述图像校正单元被配置成当所述成像设备的视线方向发生改变时，基于所述成像设备姿态信息来对所述周围捕获图像执行校正，使得伴随所述成像设备的视线方向的改变的所述周围捕获图像的改变被抑制。4.根据权利要求3所述的信息处理设备，其中，所述图像校正单元根据校正施加信息来控制执行所述校正的程度，所述校正施加信息表示从所述用户操作设备获得的所述校正的施加程度。5.根据权利要求4所述的信息处理设备，其中，所述图像校正单元根据所述校正施加信息来控制针对每个旋转坐标轴执行所述校正的程度，所述每个旋转坐标轴是关于所述成像设备相互独立定义的。6.根据权利要求3所述的信息处理设备，其中，所述图像校正单元根据伴随所述成像设备的视线方向的改变的
\t旋转角的量值执行校正，使得在所述移动对象的视线方向的改变之后的所述周围捕获图像反向旋转。7.根据权利要求3所述的信息处理设备，其中，所述图像校正单元执行所述校正，使得在所述成像设备的视线方向的改变之前和改变之后局部特征量匹配。8.根据权利要求2所述的信息处理设备，其中，所述图像生成单元生成在所述移动对象所在位置处的全向图像或通过将所述全向图像变换成矩形图像而获得的变换图像作为所述周围捕获图像。9.根据权利要求2所述的信息处理设备，还包括：视线信息生成单元，所述视线信息生成单元被配置成基于所述成像设备姿态信息来生成视线信息，所述视线信息表示所述成像设备的视线方向，其中，所述控制单元使用由所述视线信息生成单元生成的所述视线信息来显示对象以及所述用户观看图像，所述对象表示所述视线信息所表示的所述成像设备的视线方向。10.根据权利要求8所述的信息处理设备，其中，所述控制单元：生成姿态信息，在所述姿态信息中，所述成像设备的姿态的改变是使用关于旋转的旋转信息来可视化的并且是基于所述成像设备姿态信息来计算的，所述旋转伴随所述成像设备的视线方向的改变，并且执行控制使得所述显示图像显示在所述用户观看的所述显示区域中，其中所生成的姿态信息重叠在所述显示图像上。11.根据权利要求10所述的信息处理设备，还包括：图像校正单元，所述图像校正单元被配置成当在所述成像设备的位...

【专利技术属性】
技术研发人员：历本纯一，笠原俊一，
申请(专利权)人：索尼公司，
类型：发明
国别省市：日本;JP