信息处理装置和方法制造方法及图纸

本公开内容涉及可以抑制再现处理负荷的增加的信息处理装置和方法。生成与表示具有三维形状的对象的点云针对可独立解码的三维空间区域的关系的变化有关的第一信息。根据第一信息生成与三维空间区域有关的第二信息。生成存储第一信息、第二信息和其中编码点云的编码数据的比特流的文件。参考存储在文件中的第一信息，并且如果以上提及的关系为静态，则基于第二信息，提取并解码构成从其构造点云的三维空间区域的图块数据。本公开内容可以例如应用于信息处理装置或信息处理方法。于信息处理装置或信息处理方法。于信息处理装置或信息处理方法。

【技术实现步骤摘要】
【国外来华专利技术】信息处理装置和方法


[0001]本公开内容涉及信息处理装置和方法，更具体地，涉及能够抑制再现处理的负荷的增加的信息处理装置和方法。

技术介绍

[0002]常规地，在MPEG
‑
I第9部分(ISO/IEC(国际标准化组织/国际电工委员会)23090
‑
9)中，对G
‑
PCC(基于几何的点云压缩)进行标准化(例如，参见非专利文献1)，其中，G
‑
PCC是用于对作为具有三维空间的位置信息和属性信息(例如，颜色、反射率等)的点的集合的点云进行编码的编码技术，其中，表示三维形状的几何信息和表示属性信息的属性被划分。
[0003]另外，还有ISOBMFF(国际标准化组织基本媒体文件格式)，其是运动图像压缩的国际标准技术MPEG
‑
4(运动图像专家组
‑
4)的文件容器规范(例如，参见非专利文献2)。
[0004]另外，为了从作为使用G
‑
PCC编码的编码数据的比特流的G
‑
PCC比特流的本地存储装置高效地进行再现处理和网络分发，在MPEG
‑
I第18部分(ISO/IEC 23090
‑
18)中，用于将G
‑
PCC比特流存储在ISOBMFF文件中的方法是标准化的(例如，参见非专利文献3)。
[0005]存储该非专利文献3中定义的G
‑
PCC比特流的G
‑
PCC文件具有用于基于三维空间信息进行部分访问和解码的结构。部分访问是对作为由点云表达的对象的一部分(换言之，点云数据的一部分)的部分点云的访问(从文件提取数据)。特别地，在分发的使用情况下，通过使用这样的部分访问，可以针对存储部分点云的每个轨道分发数据(换言之，可以实现自适应分发)，并且这对于抑制处理负荷和频带负荷的增加是有用的。
[0006]在这样的G
‑
PCC文件中，三维空间区域(3D空间区域)可以被定义为这样的部分点云。该3D空间区域由单个或多个图块组成。图块是可独立解码的点云的数据单元。在G
‑
PCC文件中，管理组成3D空间区域的图块。另外，在G
‑
PCC文件中，管理特定图块的哪个轨道数据被存储。换言之，3D空间区域和存储数据的轨道通过图块彼此关联。因此，在部分访问时，基于该管理，指定组成期望的3D空间区域的图块，指定存储图块的数据的轨道，并且从轨道提取期望的3D空间区域的数据。
[0007]由点云表达的对象的位置、大小、形状、方向、数目等可以在时间方向上改变(可以形成为动态的)。为此，3D空间区域以及组成3D空间区域的图块可以在时间方向上改变(可以被动态地形成)。另外，存储在轨道中的图块可以在时间方向上改变(可以被动态地形成)。因此，在G
‑
PCC文件中，3D空间区域、组成3D空间区域的图块、存储在轨道中的图块等的信息作为动态信息被管理。
[0008]引文列表
[0009]非专利文献
[0010][非专利文献1][0011]“Information technology
‑
MPEG
‑
I(Coded Representation of Immersive Media)
‑
Part 9:Geometry
‑
based Point Cloud Compression”，ISO/IEC 23090
‑
9:2019(E)，2020年11月28日
[0012][非专利文献2][0013]“Information technology
‑
Coding of audio
‑
visual objects
‑
Part 12:ISO base media file format”，ISO/IEC 14496
‑
12，2015年2月20日
[0014][非专利文献3][0015]Sejin Oh，Ryohei Takahashi，Youngkwon Lim，“Text of ISO/IEC DIS 23090
‑
18Carriage of Geometry
‑
based Point Cloud Compression Data”，ISO/IEC JTC 1/SC 29/WG 03N0075，2020年11月2日

技术实现思路

[0016]技术问题
[0017]然而，在非专利文献3中描述的方法中，3D空间区域、组成3D空间区域的图块、存储在轨道中的图块等可以针对每一帧而改变。为此，在部分访问时，需要针对每一帧检查其中存储了期望的3D空间区域的数据(组成3D空间区域的图块的数据)的轨道。为此，存在使用这样的点云的内容的再现处理的负荷可能增加的问题。
[0018]本公开内容是鉴于这样的情况而做出的，并且使得能够抑制再现处理的负荷的增加。
[0019]问题的解决方案
[0020]根据本技术的一个方面的信息处理装置是一种信息处理装置，该信息处理装置包括：第一信息生成单元，其被配置成生成与表示具有三维形状的对象的点云的针对能够独立解码的三维空间区域的关系的变化有关的第一信息；第二信息生成单元，其被配置成根据第一信息生成关于三维空间区域的第二信息；以及文件生成单元，其被配置成生成存储通过对点云进行编码而获取的编码数据的比特流、第一信息和第二信息的文件。
[0021]根据本技术的一个方面的信息处理方法是一种信息处理方法，该信息处理方法包括：生成与表示具有三维形状的对象的点云的针对能够独立解码的三维空间区域的关系的变化有关的第一信息；根据第一信息生成关于三维空间区域的第二信息；以及生成存储通过对点云进行编码而获取的编码数据的比特流、第一信息和第二信息的文件。
[0022]根据本技术的另一方面的信息处理装置是一种信息处理装置，该信息处理装置包括：提取单元，其被配置成参考与点云的针对能够独立解码的三维空间区域的关系的变化有关的第一信息，该第一信息存储在存储有通过对表示具有三维形状的对象的点云进行编码而获取的编码数据的比特流的文件中，并且在关系为静态的情况下，基于根据第一信息生成的关于三维空间区域的第二信息，提取组成构造点云的三维空间区域的图块的数据；以及解码单元，其被配置成对所提取的数据进行解码。
[0023]根据本技术的另一方面的信息处理方法是一种信息处理方法，该信息处理方法包括：参考与点云的针对能够独立解码的三维空间区域的关系的变化有关的第一信息，该第一信息存储在存储有通过对表达具有三维形状的对象的点云进行编码而获取的编码数据的比特流的文件中，并且在关系为静态的情况下，基于根据第一信息生成的关于三维空间区域的第二信息，提取组成构造点云的三维空间区域的图块的数据；以及对所提取的数据进行解码。
本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种信息处理装置，包括：第一信息生成单元，其被配置成生成与表示具有三维形状的对象的点云的针对能够独立解码的三维空间区域的关系的变化有关的第一信息；第二信息生成单元，其被配置成根据所述第一信息生成关于所述三维空间区域的第二信息；以及文件生成单元，其被配置成生成存储通过对所述点云进行编码而获取的编码数据的比特流、所述第一信息和所述第二信息的文件。2.根据权利要求1所述的信息处理装置，其中，所述第一信息生成单元生成指示包括所述三维空间区域之间的三维空间中的位置关系的所述关系是否为静态的信息作为所述第一信息，并且其中，在所述第一信息为真的情况下，所述第二信息生成单元生成表示所述三维空间区域能够存在的范围的信息作为所述第二信息。3.根据权利要求2所述的信息处理装置，其中，所述第一信息生成单元生成指示所述位置关系是否为静态的信息作为所述第一信息。4.根据权利要求2所述的信息处理装置，其中，所述第二信息生成单元生成关于所述三维空间区域的信息作为第二信息，所述信息包括静态的、所述三维空间区域与用于获取所述点云的图块的信息之间的对应关系。5.根据权利要求1所述的信息处理装置，其中，所述第一信息生成单元生成指示包括所述三维空间区域与用于获取所述点云的图块的信息之间的对应关系的所述关系是否为静态的信息作为所述第一信息，并且其中，在所述第一信息为真的情况下，所述第二信息生成单元生成动态的、关于所述三维空间区域的信息并且不包括表示所述对应关系的信息，作为所述第二信息。6.根据权利要求5所述的信息处理装置，其中，所述第一信息生成单元生成指示所述对应关系是否为静态的信息作为所述第一信息。7.根据权利要求5所述的信息处理装置，其中，所述第二信息生成单元生成动态的、关于所述三维空间区域的信息，还包括静态的、表示所述三维空间区域的数目的信息。8.根据权利要求5所述的信息处理装置，其中，用于获取所述图块的信息是所述图块的标识信息。9.根据权利要求5所述的信息处理装置，其中，用于获取所述图块的信息是将所述图块的数据存储在文件中的轨道的标识信息。10.一种信息处理方法，包括：生成与表示具有三维形状的对象的点云的针对能够独立解码的三维空间区域的关系的变化有关的第一信息；根据所述第一信息生成关于所述三维空间区域的第二信息；以及生成存储通过对所述点云进行编码而获取的编码数据的比特流、所述第一信息和所述第二信息的文件。11.一种信息处理装置，包括：提取单元，其被配置成参考与点云的针对能够独立解码的三维空间区域的关系的变化有关的第一信息，所述第一信息存储在存储有通过对表示具有三维形状的对象的所述点云
进行编码而获取的编码数据的比特流的文件中，并且在所述关系...

【专利技术属性】
技术研发人员：高桥辽平，平林光浩，
申请(专利权)人：索尼集团公司，
类型：发明
国别省市：