信息处理装置和信息处理方法以及再现装置和再现方法制造方法及图纸

本公开提供一种信息处理装置和信息处理方法以及再现装置和再现方法。该信息处理装置，包括：文件获取部，其被配置成获取包括用于将全向图像映射到3D模型的映射信息的文件，其中，所述映射信息包括所述全向图像在所述3D模型的参考位置处的旋转角度信息以及参考图像在所述全向图像中的位置，其用于针对所述参考位置旋转和映射所述参考图像，以及其中，所述3D模型的参考位置是在观看者的观看位置是所述3D模型的中心的情况下对应于所述观看者的预定视线方向的所述3D模型上的位置。预定视线方向的所述3D模型上的位置。预定视线方向的所述3D模型上的位置。

【技术实现步骤摘要】
信息处理装置和信息处理方法以及再现装置和再现方法
[0001]本申请是国家申请号为201780028140.1，国际申请日为2017年5月12日，进入国家日期为2018年11月6日，专利技术名称为“文件生成装置和文件生成方法以及再现装置和再现方法”的申请的分案申请。


[0002]本公开内容涉及文件生成装置、文件生成方法、再现装置和再现方法，并且特别地，涉及能够识别用于生成全向图像的图像的文件生成装置、文件生成方法、再现装置和再现方法。

技术介绍

[0003]已知一种记录装置，其通过根据由多相机捕获的图像将具有水平方向上的360度视野和垂直方向上的180度视野的图像映射到2D图像(平面图像)上来生成全向图像，对全向图像进行编码，以及记录编码的全向图像(参见例如PTL 1)。
[0004]这样的记录装置采用使用等角投影(equirectangular projection)、立方映射等的方法作为全向图像生成方法。在全向图像生成方法是使用等角投影的方法的情况下，全向图像是当捕获图像被映射到球面上时获得的等角投影的球体的图像。此外，在全向图像生成方法是立方映射的情况下，全向图像是当捕获图像被映射到立方体的面上时获得的立方体的展开计划(development plan)的图像。
[0005]同时，已知MPEG
‑
DASH(基于HTTP的运动图像专家组相位动态自适应流)作为运动视频内容流送方案。在MPEG
‑
DASH中，管理运动视频内容的编码流的管理文件从递送服务器传送至终端装置，并且终端装置基于管理文件选择要再现的编码流并且像递送服务器发出请求。
[0006][引用列表][0007][专利文献][0008][PTL 1]JP 2006
‑
14174A

技术实现思路

[0009][技术问题][0010]然而，在根据MPEG
‑
DASH从递送服务器向终端装置递送全向图像的编码流的情况下，没有考虑设置用于识别用以生成全向图像的捕获图像的识别信息。因此，终端装置尚不能识别用于生成全向图像的捕获图像，并且无法基于捕获图像选择要再现的全向图像。
[0011]鉴于这些情况实现了本公开内容，并且本公开内容的目的是使得可以识别用于生成全向图像的图像。
[0012][对问题的解决方案][0013]根据本公开内容的第一方面的文件生成装置是一种包括设置部的文件生成装置，该设置部设置用于识别用以生成全向图像的图像的识别信息，全向图像是通过将图像映射
到3D模型上来生成的。
[0014]根据本公开内容的第一方面的文件生成方法对应于根据本公开内容的第一方面的文件生成装置。
[0015]根据本公开内容的第一方面，设置用于识别用以生成通过将图像映射到3D模型上而生成的全向图像的图像的识别信息。
[0016]根据本公开内容的第二方面的再现装置是包括选择部的再现装置，该选择部基于识别信息选择要再现和通过将图像映射到3D模型上而生成的全向图像，识别信息用于识别用以生成全向图像的图像。
[0017]根据本公开内容的第二方面的再现方法对应于根据本公开内容的第二方面的再现装置。
[0018]根据本公开内容的第二方面，基于识别信息来选择要再现和通过将图像映射到3D模型上而生成的全向图像，识别信息用于识别用以生成全向图像的图像。
[0019]注意，可以通过使计算机执行程序来实现根据第一方面的文件生成装置和根据第二方面的再现装置。
[0020]另外，为了实现根据第一方面的文件生成装置和根据第二方面的再现装置，可以通过经由传输介质传输或者以记录介质记录来提供使得要由计算机执行的程序。
[0021]例如，MPD文件生成单元可以设置用于识别在全向图像的生成中使用的拍摄图像的识别信息，全向图像通过将拍摄图像映射到三维模型来生成。本公开内容可以应用于例如生成使用MPEG
‑
DASH通过HTTP递送的全向图像的区间文件的文件生成装置等。
[0022][本专利技术的有益效果][0023]根据本公开内容的第一方面，可以生成文件。另外，根据本公开内容的第一方面，可以生成文件，使得可以识别用于生成全向图像的图像。
[0024]根据本公开内容的第二方面，可以选择文件。另外，根据本公开内容的第二方面，可以识别用于生成全向图像的图像。
[0025]注意，效果并不总是限于这里描述的那些，而是可以是本公开内容中描述的任何效果。
附图说明
[0026]图1是示出本公开内容所应用于的递送系统的第一实施方式的配置的示例的框图。
[0027]图2是示出图1的生成装置的配置的示例的框图。
[0028]图3是示出作为3D模型的立方体的透视图。
[0029]图4是示出通过立方映射生成的全向图像的示例的图。
[0030]图5是示出作为3D模型的球体的透视图。
[0031]图6是示出通过使用等角投影的方法生成的全向图像的示例的图。
[0032]图7是示出通过图2的MPD文件生成部生成的MPD文件的示例的图。
[0033]图8是ID、X、Y和λ的说明性图。
[0034]图9是映射信息的说明性图。
[0035]图10是描述由图2的生成装置执行的文件生成处理的流程图。
[0036]图11是示出图1的再现装置的配置的示例的框图。
[0037]图12是描述由图11的再现装置执行的再现处理的流程图。
[0038]图13是示出根据本公开内容所应用于的递送系统的第二实施方式的生成装置的配置的示例的框图。
[0039]图14是示出由图13的MPD文件生成部生成的MPD文件的第一示例的图。
[0040]图15描述由图13的生成装置执行的文件生成处理的流程图。
[0041]图16是示出根据本公开内容所应用于的递送系统的第二实施方式的再现装置的配置的示例的框图。
[0042]图17是描述由图16的再现装置执行的再现处理的流程图。
[0043]图18是示出由图13的MPD文件生成部生成的MPD文件的第二示例的图。
[0044]图19是示出由图13的MPD文件生成部生成的MPD文件的第三示例的图。
[0045]图20是示出由图13的MPD文件生成部生成的MPD文件的第四示例的图。
[0046]图21是示出类型信息的示例的图。
[0047]图22是示出由图13的MPD文件生成部生成的MPD文件的第五示例的图。
[0048]图23是示出根据本公开内容所应用于的递送系统的第三实施方式的生成装置的配置的示例的框图。
[0049]图24是示出二维平面信息的配置的示例的图。
[0050]图25是二维平面信息的说明图。
[0051]图26是示出18个二维平面的示例的图。
[0052]图27是示出与图26的18个二维平面有关的二维平面信息的示本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种信息处理装置，包括：文件获取部，其被配置成获取包括用于将全向图像映射到3D模型的映射信息的文件，其中，所述映射信息包括所述全向图像在所述3D模型的参考位置处的旋转角度信息以及参考图像在所述全向图像中的位置，其用于针对所述参考位置旋转和映射所述参考图像，以及其中，所述3D模型的参考位置是在观看者的观看位置是所述3D模型的中心的情况下对应于所述观看者的预定视线方向的所述3D模型上的位置。2.根据权利要求1所述的信息处理装置，其中，所述文件还包括绘图面信息，所述绘图面信息包括面类型信息，其指示绘图面是二维平面或者球体表面，被提供作为关于所述3D模型的要被绘图的表面的信息。3.根据权利要求2所述的信息处理装置，其中，所述绘图面信息包括与所述绘图面对应的角度信息。4.根据权利要求3所述的信息处理装置，其中，所述角度信息包括方位角、仰角、旋转角度、横向视角和纵向视角。5.根据权利要求4所述的信息处理装置，其中，所述绘图面被分组，并且所述绘图面信息还包括指示所述绘图面所属的组的信息和关于属于该组的全部绘图面构成的整个二维平面的角度的信息。6.根据权利要求5所述的信息处理装置，其中，所述文件还包括所述3D模型的半径的信息。7.一种再现装置，包括：文件获取部，被配置成获取文件，其包括用于将全向图像映射到3D模型的映射信息，区间文件获取部，其被配置成获取包括与所述全向图像对应的流的区间文件，以及映射处理部，其被配置成基于所述映射信息，将通过对所述区间文件中包括的所述流进行解码而获得的解码图像映射到所述3D模型，以获得用于生成显示图像的3D模型图像，其中，所述映射信息包括所述全向图像在所述3D模型的参考位置处的旋转角度信息以及参考图像在所述全向图像中的位置，其用于针对所述参考位置旋转和映射所述参考图像，以及其中，所述3D模型的参考位置是在观看者的观看位置是所述3D模型的中心的情况下对应于所述观看者的预定视线方向的所述3D模型上的位置。8.根据权利要求7...

【专利技术属性】
技术研发人员：胜股充，平林光浩，浜田俊也，泉伸明，高桥辽平，
申请(专利权)人：索尼公司，
类型：发明
国别省市：