信息处理设备、信息处理方法与程序技术

[问题]为了提出以下一种信息处理设备、一种信息处理方法和一种程序，它们能够生成一种视频，通过该视频，用户可以容易地理解由于视点变换而导致的位置关系的变化。[解决方案]该信息处理设备设置有显示控制单元，该显示控制单元使第一视频显示在用户观察的显示区域中，该第一视频由安装在第一空间内移动的第一移动体上的第一图像拾取单元捕捉。该显示控制单元生成与在作为第一图像拾取单元的视点的第一视点和用于捕捉第一空间的第二视点之间连续移动的视点位置对应的第一迁移视频。

Information processing equipment, information processing methods and programs

[problem] in order to propose the following information processing equipment, an information processing method and a program that can generate a video through which the user can easily understand the change of the position relationship resulting from the view transformation. [solution] the information processing device is provided with a display control unit that displays the first video in the display area of the user observed, and the first video is captured by a first image pickup unit on the first mobile body moved in the first space. The display control unit generates a first migration video corresponding to the first view point as the view point of the first image pickup unit and the view position which is continuously moving between the second points of view for capturing the first space.

【技术实现步骤摘要】
【国外来华专利技术】信息处理设备、信息处理方法与程序
本公开涉及一种信息处理设备、一种信息处理方法以及一种程序。
技术介绍
传统上，远程呈现作为一种用户与远程代理机器人进行通信的技术而公知。通过这种远程呈现，将机器人测量的信息传送给用户。另外，用户的动作控制该机器人，结果，用户可感觉到他/她与机器人好像是一体的。根据这种远程呈现，用户可以感知到好像在物理位置上没有任何限制一样。而且，近来已经提出了一种能够实现人与人之间的远程呈现的技术。例如，已经提出了以下一种技术，其中，佩戴头戴式相机的用户在特定环境中进行工作，并且将由该头戴式相机捕捉的视频(video，影像)传送给另一远程用户。根据这种技术，例如，位于特定环境中的现场工作人员可以得到专家的远程协助。例如，下面的专利文献1描述了以下一种技术，该技术使由安装在空间中移动的移动体上的成像装置捕捉的视频显示在用户在视觉上识别的显示区域中。引文列表专利文献专利文献1：WO2015/122108
技术实现思路
技术问题然而，在专利文献1所述的技术中，当在位于空间中的视点之间执行变换(transition)时，非连续地切换显示的视频。因此，用户可能变得无法掌握视点变换之后的位置关系。因此，本公开提出了一种新改进的信息处理设备、信息处理方法和程序，其可以生成允许用户容易地理解由视点变换导致的位置关系的变化的视频。问题的解决方案根据本公开，提供了一种信息处理设备，包括：显示控制单元，其被配置为使第一视频显示在用户在视觉上识别的显示区域中，由在第一空间中移动的第一移动体上安装的第一成像单元捕捉所述第一视频。所述显示控制单元生成与在作为第一成像单元的视点的第一视点和用于对第一空间进行成像的第二视点之间连续移动的视点位置对应的第一迁移视频。另外，根据本公开，提供了一种信息处理方法，包括：使第一视频显示在用户在视觉上识别的显示区域中，由在第一空间中移动的第一移动体上安装的第一成像单元捕捉所述第一视频；并且由处理器生成与在作为第一成像单元的视点的第一视点和用于对第一空间进行成像的第二视点之间连续移动的视点位置对应的第一迁移视频。另外，根据本公开，提供了一种程序，用于促使计算机用作显示控制单元，所述显示控制单元被配置为使第一视频显示在用户在视觉上识别的显示区域中，由安装在第一空间中移动的第一移动体上的第一成像单元捕捉所述第一视频。所述显示控制单元生成与在作为第一成像单元的视点的第一视点和用于对第一空间进行成像的第二视点之间连续移动的视点位置对应的第一迁移视频。专利技术的有益效果根据如上所述的本公开，可以生成允许用户容易地理解由视点变换导致的位置关系的变化的视频。注意，本文描述的效果不一定是限定性的，而是可以实现在本公开中描述的任何效果。附图说明图1是示出根据本公开的实施方式的信息处理系统的配置示例的说明图。图2是根据本实施方式的安装在移动体2上的耳机(headset)20的外部视图。图3是示出由本实施方式配置的点云的图像的示例。图4是示意性地示出根据本实施方式的基于离开(jack-out)和进入(jack-in)的视点移动的说明图。图5是示出基于图4所示的视点“1”到视点“3”生成的视频的示例的说明图。图6是示出根据本实施方式的服务器10的配置示例的功能方框图。图7是示出根据本实施方式的当显示空间监测视频时的“锁定”标记的显示示例的说明图。图8是示出根据本实施方式的在离开期间的视点移动示例的说明图。图9是示出根据本实施方式的基于兴趣点(POI)的空间监测视点移动示例的说明图。图10是示出根据本实施方式的在进入期间的视点移动示例的说明图。图11是示出根据本实施方式的包括在离开期间生成的第一迁移视频中的帧的示例的说明图。图12是示出根据本实施方式的包括在进入期间生成的第二迁移视频中的帧的示例的说明图。图13是示出根据本实施方式的操作的流程的示例的流程图。图14是表示根据本实施方式的“离开处理”的流程的流程图。图15是示出根据本实施方式的“进入处理”的流程的流程图。图16是示意性地示出根据本实施方式的应用示例的不同工作空间中的视点之间的移动的说明图。图17是示出根据本实施方式的应用示例的用于选择变换目的地的视点的列表的示例的说明图。图18是示出根据本实施方式的应用示例的用于选择变换目的地的视点的地图的示例的说明图。图19是示出根据本实施方式的应用示例的迁移视频的显示示例的说明图。图20是示出根据本实施方式的服务器10的硬件配置示例的说明图。图21是根据本实施方式的变形例的安装在移动体2上的全方位相机24的外部视图。图22是示出全方位相机24的成像区域的说明图。图23是根据本实施方式的变形例的自走式深度相机90的示意图。图24是根据本实施方式的变形例的安装在移动体2上的安装式深度相机92的示意图。具体实施方式在下文中，将参考附图详细描述本公开的一个或多个优选实施方式。注意，在本说明书和附图中，具有基本相同的功能和结构的结构元件用相同的附图标记表示，并且省略这些结构元件的重复说明。另外，在本说明书和附图中，通过在相同的附图标记之后添加不同的字母，来在某些情况下区分具有基本相同的功能和结构的多个结构元件。例如，根据需要，区分具有基本相同的功能和结构的多个组件，例如，移动体2a和移动体2b。然而，在不特别需要区分具有基本相同的功能和结构的相应多个结构元件的情况下，仅给出相同部分的附图标记。例如，在不特别需要区分移动体2a和移动体2b的情况下，简称为移动体2。另外，将根据下面所示的各项的顺序来描述“具体实施方式”。1、信息处理系统的配置2、实施方式的详细描述3、硬件配置4、变形例<<1、信息处理系统的配置>>首先，将参考图1描述根据本实施方式的信息处理系统的配置。如图1所示，在本实施方式中，基本上设置有一个或多个移动体2所在的工作空间和用户4所在的环境，假定这两者相互远离。在此处，移动体2例如是在预定工作空间内进行作业的人、机器人、安装在工作空间内的相机(传感器)等。注意，下面的描述将以移动体2是人的示例为中心进行。另外，预定工作空间例如是诸如房间等空间。另外，用户4是在视觉上识别由稍后描述的服务器10提供的关于工作空间的视频的人。注意，工作空间是本公开中的第一空间的示例。另外，服务器10是本公开中的信息处理设备的示例。<1-1、移动体2的环境>首先，将描述关于移动体2所在的工作空间的信息处理系统的配置。如图1所示，例如，多个深度相机30和多个运动捕捉传感器32设置在工作空间中。注意，在移动体2是人的情况下，移动体2佩戴例如耳机20，如图1和图2所示。注意，图2的(A)是示出从正面看时佩戴耳机20的移动体2的外观的示图，图2的(B)是示出从左侧看时佩戴耳机20的移动体2的外观的示图。如图2所示，耳机20例如具有相机200和头部追踪标记(headtrackingmarker)210。在此处，相机200是本公开中的第一成像单元的示例。相机200例如捕捉移动体2的视线方向的视频。例如，相机200可以是鱼眼相机。头部追踪标记210例如是反射红外线的标记。如图2所示，多个头部追踪标记210可安装在单个耳机20中。该头部追踪标记210可本文档来自技高网...

【技术保护点】
一种信息处理设备，包括：显示控制单元，被配置为使第一视频显示在用户在视觉上识别的显示区域中，所述第一视频由第一空间中移动的第一移动体上安装的第一成像单元来捕捉，其中，所述显示控制单元生成与在作为所述第一成像单元的视点的第一视点和用于对所述第一空间进行成像的第二视点之间连续移动的视点位置对应的第一迁移视频。

【技术特征摘要】
【国外来华专利技术】2015.09.25 US 62/232,6211.一种信息处理设备，包括：显示控制单元，被配置为使第一视频显示在用户在视觉上识别的显示区域中，所述第一视频由第一空间中移动的第一移动体上安装的第一成像单元来捕捉，其中，所述显示控制单元生成与在作为所述第一成像单元的视点的第一视点和用于对所述第一空间进行成像的第二视点之间连续移动的视点位置对应的第一迁移视频。2.根据权利要求1所述的信息处理设备，进一步包括：空间信息获取单元，被配置为获取关于所述第一空间的三维信息；以及视点移动单元，被配置为基于由所述空间信息获取单元获取的关于所述第一空间的所述三维信息，在所述第一视点与所述第二视点之间连续移动所述视点位置，其中，所述显示控制单元基于所述视点移动单元对所述视点位置的移动来生成所述第一迁移视频。3.根据权利要求2所述的信息处理设备，进一步包括：操作信息获取单元，被配置为获取与对所述用户用于从所述第一视点到所述第二视点的移动的第一操作进行的检测有关的信息，其中，当所述第一操作被检测到时，所述显示控制单元生成所述第一迁移视频，并且使生成的所述第一迁移视频显示在所述显示区域中。4.根据权利要求3所述的信息处理设备，其中，所述视点移动单元确定将所述第一视点作为起点并且将所述第二视点作为终点的所述视点位置的移动路径，并且沿着确定出的所述移动路径连续移动所述视点位置。5.根据权利要求4所述的信息处理设备，其中，所述视点移动单元进一步确定所述移动路径上的视点方向，使得所述视点方向根据所述视点位置的移动而连续改变。6.根据权利要求5所述的信息处理设备，其中，所述视点移动单元使所述移动路径的起点处的视点方向与所述第一视点的方向一致，并且使所述移动路径的终点处的视点方向与所述第二视点的方向一致。7.根据权利要求5所述的信息处理设备，其中，所述视点移动单元进一步确定所述移动路径上的视点的视角，使得所述视点的视角根据所述视点位置的移动而连续改变。8.根据权利要求4所述的信息处理设备，其中，所述视点移动单元基于当前视点位置与所述移动路径上的终点的位置之间的位置关系来改变所述视点位置的移动速度。9.根据权利要求8所述的信息处理设备，其中，所述视点移动单元随着所述当前视点位置与所述移动路径上的终点的位置之间的距离变短而减小所述视点位置的所述移动速度。10.根据权利要求8所述的信息处理设备，其中，所述视点移动单元确定所述视点位置的所述移动速度，使得经过时间与所述视点位置的所述移动速度之间的关系变成非线性的。11.根据权利要求4所述的信息处理设备，其中，所述第二视点在所述第一空间中设置在所述第一移动体的后方且设置在所述第一移动体的上方，并且所述第二视点指向所述第一移动体。12.根据权利要求4所述的信息处理设备，其中，在从所述第一视点...

【专利技术属性】
技术研发人员：历本纯一，
申请(专利权)人：索尼公司，
类型：发明
国别省市：日本,JP