信息处理装置和方法制造方法及图纸

本公开内容涉及信息处理装置和方法，由此可以将每个图块的数据存储在缓冲器中。将3D对象的图块数据存储在公共的缓冲区中，并且基于用于标识存储在其缓冲区中的图块数据的图块存储信息从缓冲区中获取期望的图块数据，并对所获取的图块数据进行处理。另外，生成场景描述文件，该场景描述文件存储第一访问器和第二访问器，第一访问器用于将3D对象内容的图块数据存储在公共的第一缓冲区中，第二访问器用于将用于标识存储在第一缓冲区中的图块数据的图块存储信息存储在第二缓冲区中。本公开内容可以应用于例如信息处理装置、信息处理方法等。等。等。

【技术实现步骤摘要】
【国外来华专利技术】信息处理装置和方法


[0001]本公开内容涉及信息处理装置和方法，更具体地，涉及能够将每个图块的数据存储在缓冲器中的信息处理装置和方法。

技术介绍

[0002]在相关技术中，存在GL传输格式(glTF)(注册商标)2.0，其是一种用于在三维空间中设置和渲染3D(三维)对象的场景描述(Scene Description)的格式(例如，见非专利文献1)。
[0003]此外，在运动图像专家组(MPEG)
‑
I场景描述中，已经提出了扩展glTF 2.0和处理时间方向上的动态内容的方法(例如，见非专利文献2)。
[0004]同时，作为对点云(point cloud)进行编码的方法，已经提出了基于视频的点云压缩(V
‑
PCC)，其中通过分割点云形成区域，对每个区域执行平面投影，以及由视频编解码器执行编码(例如，见非专利文献3)。点云是由在三维空间中具有位置信息和属性信息(颜色、反射等)的点的集合表示对象的三维结构的3D数据。
[0005]此外，已经研究了在ISOBMFF中存储包括由V
‑
PCC编码的点云的编码数据的V3C比特流的方法(例如，见非专利文献4)。
[0006]近年来，已经研究了使用存储在ISOBMFF中的V3C比特流作为设置在场景中的3D对象的实际数据的方法。在这种情况下，在客户端中，已经研究了通过MAF(MediaAccessFunction)重建3D数据的方法和通过PE(PresentationEngine)重建3D数据的方法。此外，还希望支持对V3C比特流的部分访问(partial access)的功能。
[0007]引用列表
[0008]非专利文献
[0009]非专利文献1：SaurabhBhatia,PatrickCozzi,Alexey Knyazev,Tony Parisi,“Khronos glTF2.0”,https://github.com/KhronosGroup/glTF/tree/master/specification/2.0，2017年6月9日。
[0010]非专利文献2：“Text of ISO/IEC CD 23090
‑
14Scene Description forMPEG Media”，ISO/IEC JTC 1/SC 29/WG 3N00026，2020年11月30日。
[0011]非专利文献3：“ISO/IEC FDIS23090
‑
5Visual Volumetric Video
‑
basedCodingand Video
‑
based Point Cloud Compression”，ISO/IEC JTC 1/SC 29/WG 11N19579，2020年9月21日。
[0012]非专利文献4：“Draft text of ISO/IEC FDIS23090
‑
10Carriage of VisualVolumetric Video
‑
based CodingData”，国际标准化组织ORGANISATIONINTERNATIONALE DE NORMALISATION ISO/IEC JTC 1/SC 29/WG 03MPEG SYSTEMS，ISO/IEC JTC 1/SC 29/WG 03N0163，19995，2021年3月25日。

技术实现思路

[0013]本专利技术要解决的问题
[0014]在3D数据通过PE重建的情况下，3D对象中部分获取的图块(tile)的数据被要求存储在场景描述文件中指示的缓冲器中。然而，在上述非专利文献中描述的方法中，图块数据不能在缓冲器中被单独管理。因此，难以实现部分访问。
[0015]本公开内容是鉴于这样的情况而作出的，并使每个图块的数据能够被存储在缓冲器中。
[0016]问题的解决方案
[0017]根据本技术的一个方面的信息处理装置是包括文件处理单元的信息处理装置，该文件处理单元将3D对象内容的图块数据存储在公共的缓冲区中，根据用于标识存储在缓冲区中的图块数据的图块存储信息从缓冲区中获取期望的图块数据，并对所获取的图块数据进行处理。
[0018]根据本技术的一个方面的信息处理方法是一种信息处理方法，该信息处理方法包括：将3D对象内容的图块数据存储在公共的缓冲区中，基于用于标识存储在缓冲区中的图块数据的图块存储信息从缓冲区中获取期望的图块数据，以及对所获取的图块数据进行处理。
[0019]根据本技术的另一个方面的信息处理装置是包括文件生成单元的信息处理装置，该文件生成单元生成场景描述文件，该场景描述文件存储：第一访问器和第二访问器，第一访问器用于将3D对象内容的图块数据存储在公共第一缓冲区中，第二访问器用于将用于标识存储在第一缓冲区中的图块数据的图块存储信息存储在第二缓冲区中。
[0020]根据本技术的另一个方面的信息处理方法是一种信息处理方法，该信息处理方法包括生成场景描述文件，该场景描述文件存储第一访问器和第二访问器，第一访问器用于将3D对象内容的图块数据存储在公共第一缓冲区中，第二访问器用于将用于标识存储在第一缓冲区中的图块数据的图块存储信息存储在第二缓冲区中。
[0021]在根据本技术的一个方面的信息处理装置和方法中，将3D对象内容的图块数据存储在公共的缓冲区中，并且基于用于标识存储在缓冲区中的图块数据的图块存储信息从缓冲区中获取期望的图块数据，并对所获取的图块数据进行处理。
[0022]在根据本技术的另一个方面的信息处理装置和方法中，生成场景描述文件，该场景描述文件存储第一访问器和第二访问器，第一访问器用于将3D对象内容的图块数据存储在公共第一缓冲区中，第二访问器用于将用于标识存储在第一缓冲区中的图块数据的图块存储信息存储在第二缓冲区中。
附图说明
[0023]图1是示出glTF 2.0的主要配置示例的图。
[0024]图2是示出glTF对象和参考关系的示例的图。
[0025]图3是示出场景描述的描述示例的图。
[0026]图4是用于说明访问二进制数据的方法的图。
[0027]图5是示出场景描述的描述示例的图。
[0028]图6是示出缓冲对象、缓冲视图对象和访问器对象之间关系的图。
[0029]图7是示出缓冲对象、缓冲视图对象和访问器对象的描述示例的图。
[0030]图8是示出场景描述的对象的配置示例的图。
[0031]图9是示出场景描述的描述示例的图。
[0032]图10是用于说明对象扩展方法的图。
[0033]图11是示出客户端处理的配置的图。
[0034]图12是示出用于处理定时元数据的扩展的配置示例的图。
[0035]图13是示出场景描述的描述示例的图。
[0036]图14是示出场景描述的描述示例的图。...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种信息处理装置，包括：文件处理单元，其将3D对象内容的图块数据存储在公共的缓冲区中，基于用于标识存储在所述缓冲区中的所述图块数据的图块存储信息从所述缓冲区中获取期望的图块数据，并对所获取的图块数据进行处理。2.根据权利要求1所述的信息处理装置，其中，所述图块存储信息包括指示图块的数目的信息、关于图块的标识信息和指示图块的大小的信息。3.根据权利要求2所述的信息处理装置，其中，所述文件处理单元将所述图块存储信息存储在定时访问器信息头字段中。4.根据权利要求2所述的信息处理装置，其中，所述图块存储信息还包括指示分量的数目的信息和指示分量类型的信息。5.根据权利要求2所述的信息处理装置，其中，所述图块存储信息包括关于每个分量的信息。6.根据权利要求2所述的信息处理装置，其中，所述图块存储信息还包括指示图块是否存在的标志信息。7.根据权利要求2所述的信息处理装置，其中，所述文件处理单元将关于图块的标识信息和指示图块的大小的信息存储在彼此不同的缓冲区中。8.根据权利要求7所述的信息处理装置，其中，指示图块的大小的信息包括关于每个分量的信息。9.根据权利要求2所述的信息处理装置，其中，所述文件处理单元将所述图块存储信息存储在与图集数据的缓冲区相同的缓冲区中。10.一种信息处理方法，包括：将3D对象内容的图块数据存储在公共的缓冲区中，基于用于标识存储在所述缓冲区中的所述图块数据的图块存储信息从所述缓冲区中获取期望的图块数据，并对所获取的图块数据进行处理。11.一种信息处理装置，包括：文件生成单元，其生成场景描述文件，所述场景描述文件存储第一访问器和第二访问器，所述第一访问器用于将3D对象内容...

【专利技术属性】
技术研发人员：木山由佳，高桥辽平，平林光浩，
申请(专利权)人：索尼集团公司，
类型：发明
国别省市：