信息处理装置和方法制造方法及图纸

本公开提供了信息处理装置和方法。本技术涉及能够自适应地提供在由多个层构成的图像的每个层中的图像的局部图像的信息处理装置和方法。本技术的信息处理装置生成文件，该文件在不同的轨道上存储关于通过分层编码图像数据而获得的编码数据的整个基层的信息、关于基层的图像的局部区域的信息、关于编码数据的整个增强层的信息以及关于增强层的图像的局部区域的信息。本技术适用于例如信息处理装置、图像处理装置、图像编码装置或图像解码装置等。

Information processing device and method

【技术实现步骤摘要】
信息处理装置和方法本申请是国际申请号为PCT/JP2015/067234、申请日为2015年6月16日、进入中国国家阶段日期为2016年12月23日、专利技术名称为“信息处理装置和方法”的PCT申请的中国国家阶段申请的分案申请，该中国国家阶段申请的申请号为201580034347.0。
本技术涉及信息处理装置和方法，并且更具体地，涉及能够自适应地提供在由多个层构成的图像的每个层中的图像的局部图像的信息处理装置和方法。
技术介绍
作为利用超文本传输协议(HTTP)的内容分布技术，运动图像专家组-动态自适应HTTP流(MPEG-DASH)近年来已被标准化(例如，参见非专利文献1)。此MPEG-DASH采用自适应比特率流媒体(ABS)技术，该技术在内容服务器中将多个编码数据存储为表示不同比特率的相同内容的数据，并允许客户端根据网络带宽选择多个编码数据中的一个并再现所选的数据。顺便地，已经考虑自适应地选择对应于整个图像的一部分的局部图像并分布所选的局部图像，而不是分布整个图像。例如，可以认为由图像数据接收终端分布从整个图像选择的局部图像，并根据终端的性能(诸如CPU的处理能力、显示器的大小)、传输信道、服务器加载状态和其它条件控制待分布的局部图像的大小。此外，已经考虑通过使用例如层之间的预测等采用层编码以有效地编码由多个层构成的图像。引用文献列表非专利文献[非专利文献1]MPEG-DASH(动态自适应HTTP流)(URL:http://mpeg.chiariglione.org/standards/mpeg-dash/media-presentation-description-and-segment-formats/text-isoiec-23009-12012-dam-1)
技术实现思路
本专利技术要解决的问题然而，传统的MPEG-DASH标准只有切换比特率的概念，并因此难以实现局部图像数据的自适应提供，即，通过选择由多个层构成的图像的任意层中的任意局部图像并在利用相应层的片结构时提供在所选局部图像上的数据的自适应提供。所提出的本技术已考虑了前述的情况。本技术的目标是实现在由多个层构成的图像的每个层中的图像的局部图像的自适应提供。问题的解决方案本技术的一个方面涉及信息处理装置，其包括生成文件的文件生成单元，该文件存储关于通过图像数据的层编码所产生的编码数据的整个基层的信息、关于基层的图像的每个局部区域的信息、关于编码数据的整个增强层的信息以及关于增强层的图像的每个局部区域的信息，使得每个信息被存储在彼此不同的轨道的对应的一个轨道中。文件生成单元可在存储关于整个基层的信息的轨道中存储指示基层的编码系统的编码信息。文件生成单元可在存储关于基层的局部区域的信息的轨道的每个轨道中存储指示对应轨道仅存储关于基层的对应局部区域的信息的编码信息。文件生成单元可在存储关于整个增强层的信息的轨道中存储指示增强层的编码系统的编码信息。文件生成单元可在存储关于增强层的局部区域的信息的轨道的每个轨道中存储指示对应轨道仅存储关于增强层的对应局部区域的信息的编码信息。文件生成单元可在存储关于整个基层的信息的轨道中存储指示参考存储关于基层的局部区域的信息的轨道的信息和指示该参考的类型的信息。文件生成单元可在存储关于基层的局部区域的信息的每个轨道中存储指示参考存储关于整个基层的信息的轨道的信息和指示该参考的类型的信息。文件生成单元可在存储关于整个增强层的信息的轨道中存储指示参考存储关于整个基层的信息的轨道的信息和指示该参考的类型的信息，以及指示参考存储关于增强层的局部区域的信息的轨道的信息和指示该参考的类型的信息。文件生成单元可在存储关于增强层的局部区域的信息的每个轨道中存储指示参考存储关于整个增强层的信息的轨道的信息和指示该参考的类型的信息。文件生成单元可在存储关于增强层的局部区域的信息的每个轨道中进一步存储指示参考存储关于基层的局部区域(对应于增强层的对应的局部区域)的信息的轨道的信息和指示该参考的类型的信息。文件生成单元可在存储关于整个层的信息的每个轨道中存储关于对应层的局部区域的编码数据的参考信息的样本。文件生成单元可在存储关于层的局部区域的信息的每个轨道中存储关于对应局部区域的编码数据的样本。文件生成单元可在存储关于层的局部区域的信息的每个轨道中存储指示对应局部区域的位置的位置信息。文件生成单元可生成每个轨道的文件。文件生成单元可生成每个层的文件。文件生成单元可生成存储所有轨道的文件。本技术的一个方面涉及生成文件的信息处理方法，该文件存储关于通过图像数据的层编码所产生的编码数据的整个基层的信息、关于基层的图像的每个局部区域的信息、关于编码数据的整个增强层的信息以及关于增强层的图像的每个局部区域的信息，使得每个信息被存储在彼此不同的轨道中的对应的一个轨道中。本技术的不同方面涉及信息处理装置，其包括生成元数据的元数据生成单元，该元数据含有关于通过图像数据的层编码所产生的编码数据的整个基层的信息、关于基层的图像的每个局部区域的信息、关于编码数据的整个增强层的信息以及关于增强层的图像的每个局部区域的信息。存储关于整个基层的信息的信息可含有指示基层的编码系统的编码信息。关于基层的每个局部区域的信息可含有指示仅含有关于基层的对应局部区域的信息的编码信息。关于整个增强层的信息可含有指示增强层的编码系统的编码信息。关于增强层的每个局部区域的信息可含有指示仅含有关于增强层的对应局部区域的信息的编码信息。关于整个基层的信息可含有指示参考关于基层的局部区域的信息的信息和指示该参考的类型的信息。关于基层的每个局部区域的信息可含有指示参考关于整个基层的信息的信息和指示该参考的类型的信息。关于整个增强层的信息可含有指示参考关于整个基层的信息的信息和指示该参考的类型的信息，以及指示参考关于增强层的局部区域的信息的信息和指示该参考的类型的信息。关于增强层的每个局部区域的信息可含有指示参考关于整个增强层的信息的信息和指示该参考的类型的信息。关于增强区域的每个局部区域的信息可进一步含有指示参考关于对应于增强层的对应局部区域的基层的局部区域的信息的信息和指示该参考的类型的信息。关于基层的局部区域的每条信息和关于增强层的局部区域的信息可含有位置信息，该位置信息指示对应局部区域的位置。元数据生成单元可在关于整个基层的信息中设置存储基层的局部区域的编码数据的参考信息的样本的文件。元数据生成单元可在关于基层的每个局部区域的信息中设置存储基层的对应局部区域的编码数据的样本的文件。元数据生成单元可在关于整个增强层的信息中设置存储增强层的局部区域的编码数据的参考信息的样本的文件。元数据生成单元可在关于增强层的每个局部区域的信息中设置存储增强层的对应局部区域的编码数据的样本的文件。元数据生成单元可以比关于整个基层的信息和关于基层的局部区域的信息更高的顺序设置存储基层的编码数据的文件。元数据生成单元可以比本文档来自技高网...

【技术保护点】
1.一种信息处理装置，包括再现单元(202)，所述再现单元被配置为：/n从文件中获取存储关于整个基层图像的编码信息的轨道和存储关于整个基层图像的每个局部区域的信息的各轨道，从存储关于整个基层图像的编码信息的轨道和存储关于整个基层图像的每个局部区域的信息的各轨道中提取第一组编码数据，并且解码第一组提取的数据以生成解码的基层图像；以及/n从所述文件中获取存储关于整个增强层图像的编码信息的轨道和存储关于所述整个增强层图像的每个局部区域的信息的各轨道，从存储关于整个增强层图像的编码信息的所述轨道和存储关于所述整个增强层图像的每个局部区域的信息的所述各轨道中提取第二组编码数据，使用所述解码的基层图像执行层之间的预测以解码第二组提取的数据以生成解码的增强层图像；其中，/n所述文件在存储关于整个基层图像的编码信息的所述轨道中存储指示基层的编码系统的编码信息，/n所述文件在存储关于整个基层图像的每个局部区域的信息的每一条轨道中存储指示对应轨道仅存储关于所述基层的对应局部区域的信息的编码信息，/n所述文件在存储关于整个增强层图像的编码信息的轨道中存储指示增强层的编码系统的编码信息，并且/n所述文件在存储关于整个增强层图像的每个局部区域的信息的每一条轨道中存储指示对应轨道仅存储关于所述增强层的对应局部区域的信息的编码信息。/n...

【技术特征摘要】
20140630 JP 2014-1351471.一种信息处理装置，包括再现单元(202)，所述再现单元被配置为：
从文件中获取存储关于整个基层图像的编码信息的轨道和存储关于整个基层图像的每个局部区域的信息的各轨道，从存储关于整个基层图像的编码信息的轨道和存储关于整个基层图像的每个局部区域的信息的各轨道中提取第一组编码数据，并且解码第一组提取的数据以生成解码的基层图像；以及
从所述文件中获取存储关于整个增强层图像的编码信息的轨道和存储关于所述整个增强层图像的每个局部区域的信息的各轨道，从存储关于整个增强层图像的编码信息的所述轨道和存储关于所述整个增强层图像的每个局部区域的信息的所述各轨道中提取第二组编码数据，使用所述解码的基层图像执行层之间的预测以解码第二组提取的数据以生成解码的增强层图像；其中，
所述文件在存储关于整个基层图像的编码信息的所述轨道中存储指示基层的编码系统的编码信息，
所述文件在存储关于整个基层图像的每个局部区域的信息的每一条轨道中存储指示对应轨道仅存储关于所述基层的对应局部区域的信息的编码信息，
所述文件在存储关于整个增强层图像的编码信息的轨道中存储指示增强层的编码系统的编码信息，并且
所述文件在存储关于整个增强层图像的每个局部区域的信息的每一条轨道中存储指示对应轨道仅存储关于所述增强层的对应局部区域的信息的编码信息。


2.根据权利要求1所述的信息处理装置，其中，在存储所述增强层的局部区域的相应轨道上的编码信息不同于存储所述基层的局部区域的相应轨道上的编码信息。


3.根据权利要求1所述的信息处理装置，其中，所述文件在存储关于整个基层的信息的轨道中存储指示对存储关于所述基层的局部区域的信息的轨道的参考的信息和指示参考的类型的信息，
所述文件在存储关于基层的局部区域的信息的每一条轨道中存储指示对存储关于整个基层的信息的轨道的参考的信息以及指示参考的类型的信息，
所述文件在存储关于整个增强层的信息的轨道中存储指示对存储关于整个基层的信息的轨道的参考的信息和指示参考的类型的信息，以及指示对存储关于所述增强层的局部区域的信息的轨道的参考的信息和指示参考的类型的信息，并且
所述文件在存储关于所述增强层的局部区域的信息的每一条轨道中，存储指示对存储关于整个增强层的信息的轨道的参考的信息和指示参考的类型的信息。


4.根据权利要求3所述的信息处理装置，其中，所述参考的类型被设置为允许从所述增强层的轨道参考到所述基层的轨道。


5.根据权利要求3或4所述的信息处理装置，其中，所述参考的类型是从与整个基层或整个增强层对应的轨道到与所述基层的局部区域或所述增强层的局部区域对应的轨道的第一参考类型、从与所述基层的局部区域或所述增强层的局部区域对应的轨道到与整个基层或整个增强层对应的轨道的第二参考类型、以及从与整个增强层或所述增强层的局部区域对应的轨道到与整个基层或所...

【专利技术属性】
技术研发人员：平林光浩，中神央二，
申请(专利权)人：索尼公司，
类型：发明
国别省市：日本;JP