生成视频数据流的装置以及生成视频数据流的方法制造方法及图纸

提出了一种更有效的视频数据流提取技术，例如，该技术能够更有效地处理接收者未知类型的视频内容，该视频内容具有例如在视区到图片平面的投影等方面有所不同的不同类型的视频，或者，该技术减少了提取过程的复杂度。此外，描述了一种技术，利用该技术可以将视频场景的不同场景分辨率的版本的并置更有效地提供给接收者。收者。收者。

【技术实现步骤摘要】
生成视频数据流的装置以及生成视频数据流的方法
[0001]本申请是申请日为2018年3月19日的题为“生成视频数据流的装置以及生成视频数据流的方法”的专利技术专利申请No.201880033197.5的分案申请。


[0002]本申请涉及视频数据流提取，即，从已经适当准备的视频数据流中提取缩小视频数据流的方式，以使得缩小视频数据流中编码有空间较小的视频，空间较小的视频与编码在原始视频数据流中的视频的空间部分相对应。本申请还涉及一个场景的不同视频版本的传输，这些版本在场景分辨率或保真度上是不同的。

技术介绍

[0003]HEVC标准[1]定义了一种混合视频编解码器，该混合视频编解码器允许定义图片的矩形图块子阵列，视频编解码器针对这些矩形图块子阵列遵循一些编码限制，从而允许容易地从整个视频数据流中提取较小的或缩小的视频数据流，即，无需重新量化，也无需重新进行任何运动补偿。如[2]中概述的那样，设想将其添加到HEVC标准语法中，以允许指导视频数据流接收者的提取过程。
[0004]但是，仍然存在使该提取过程更有效的需求。
[0005]可能应用视频数据提取的应用领域涉及一个视频场景的、场景分辨率互不相同的多个版本的传输或提供。对于实现这种对分辨率互不相同的版本的传输或提供，一种有效方式将是有利的。

技术实现思路

[0006]因此，本专利技术的第一目的是提供一种用于视频数据流提取的更有效的技术，例如，该技术能够更有效地处理接收者未知类型的视频内容，该视频内容具有例如在视区到图片平面的投影等方面有所不同的不同类型的视频，或者，该技术减少了提取过程的复杂度。该目的通过根据第一方面的本申请的独立权利要求的主题来实现。
[0007]特别地，根据本申请的第一方面，通过向视频数据流内的提取信息提供信息，使得视频数据流提取更加有效，所提供的该信息用信号通知以下内容的多个选项之一，或者显式地用信号通知以下内容：如何修改可提取的空间区段内每个切片的切片部分的切片地址，以便在缩小视频数据流内指示相应切片在缩小图片区域中所处的位置。换句话说，第二信息向视频数据流提取站点提供对提取过程进行指导的信息，该指导针对基于原始视频的空间区段来合成缩小(提取)视频数据流的空间较小视频的图片，因此，减轻了提取过程的处理负担，或使其适应于视频数据流中传送的场景类型的较大可变性。关于后一个问题，例如，第二信息可以处理各种情况，在这些情况下，空间较小视频的图片有利地不应仅仅是以下操作的结果：仅将空间区段的可能分离部分推放到一起，并维持空间区段的这些部分在原始视频中的相对布置(或编码顺序方面的相对顺序)不变。例如，在由沿原始图片的周边与不同部分相邻的区带组成的空间区段中(该原始图片在全景场景到图片平面投影的接缝
界面中显示场景)，该空间区段的区带在所提取的流的较小图片中的布置应该与图片类型为非全景类型的情况不同，但是接收者甚至可能不知道该类型。另外地或单独地，修改所提取的切片部分的切片地址是一项繁琐的任务，可以通过以例如替代的切片地址的形式显式发送有关如何进行修改的信息，来减轻此任务。
[0008]本专利技术的另一个目的是提供一种技术，利用该技术可以将视频场景的不同场景分辨率的版本的并置更有效地提供给接收者。
[0009]该目的通过本申请的第二方面的独立权利要求的主题来实现。
[0010]特别地，根据本申请的第二方面，通过以下方式更有效地提供视频场景的不同场景分辨率的版本的并置：汇总编码在一个视频数据流中的一个视频中的这些版本，并向该视频数据流提供信号，该信号指示视频的图片在图片的不同空间部分处以不同分辨率显示同一场景内容。因此，视频数据流的接收者能够基于该信号来识别由视频数据流传送的视频内容是否属于不同场景分辨率的场景内容的多个版本的空间并排集合。根据接收站点的能力不同，可以抑制对视频数据流进行解码的任何尝试，或者对视频数据流的处理可以适应于对该信号的分析。
附图说明
[0011]上述方面的实施例的有利实现是从属权利要求的主题。下面结合附图描述本申请的优选实施例，其中：
[0012]图1示出了具有调整后的片地址的MCTS提取的示意图；
[0013]图2示出了说明根据本申请第一方面实施例的视频数据流提取处理方式以及参与的过程和设备的混合示意图和框图；
[0014]图3示出了根据示例的语法示例，该语法示例继承了提取信息的第二信息的示例，其中第二信息显式地指示如何修改切片地址第二信息显式地指示如何修改切片地址；
[0015]图4示出了说明形成期望的图片子区段的不相邻的MCTS的示例的示意图；
[0016]图5示出了根据实施例的包括第二信息的特定语法示例的示例，其中第二信息指示了用于在提取过程中修改切片地址的若干可能选项中的某个选项；
[0017]图6示出了说明多分辨率360
°
帧包装示例的示意图；
[0018]图7示出了说明包含混合分辨率表示的示例性MCTS的提取的示意图；以及
[0019]图8示出了说明根据本申请第二方面的实施例向用户以及参与设备提供多分辨率场景的有效方式以及视频流和过程的混合示意图和框图。
具体实施方式
[0020]下面从对本申请的第一方面的描述开始进行描述，然后继续进行对本申请的第二方面的描述。更准确而言，关于本申请的第一方面，本申请的描述从对基本技术问题的简要概述开始，以引出下文描述的第一方面的实施例的优点和基本技术。关于第二方面，以相同的方式选择描述顺序。
[0021]在全景或360视频应用中，通常只需要向用户展示图片平面的一部分。诸如运动约束图块集(Motion Constrained Tile Sets，MCTS)之类的某些编解码器工具允许提取与压缩域中所需图片子部分相对应的编码数据，并形成可以由传统解码器设备解码的符合标准
的比特流，该传统解码器设备不支持从完整图片比特流中解码MCTS，并且与完整图片解码所需的解码器相比可以表征为较低的层级。
[0022]作为示例和参考，HEVC编解码器中涉及的信令可以在以下参考文献中找到：
[0023]·
参考文献[1]，其在第D.2.29和E.2.29节中指定了时间MCTS SEI消息，该消息允许编码器用信号通知给定的矩形列表(该列表中的每个矩形均由其左上角和右下角的图块索引定义)属于MCTS。
[0024]·
参考文献[2]，其提供了诸如参数集和嵌套SEI消息之类的其他信息，这些信息可以简化将MCTS提取为符合标准的HEVC比特流的工作，并将被添加到[1]的下一个版本中。
[0025]从[1]和[2]中可以看出，提取过程包括调整在相关切片的切片报头中用信号通知的切片地址，该调整在提取器设备中执行。
[0026]图1示出了MCTS提取的示例。图1示出了已经编码在视频数据流(即HEVC视频数据流)中的图片。图片100被细分为CTB，即编码树块，图片100以该编码树块为单位被编码。在图1的示例中本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种用于生成视频数据流的方法，所述方法包括：向所述视频数据流提供切片部分序列，每个切片部分中编码有视频的图片的多个切片中的相应切片，其中每个切片部分包括切片地址，所述切片地址指示编码在相应切片部分中的切片在所述视频的图片区域中所处的位置；向所述视频数据流提供提取信息，所述提取信息指示如何通过以下操作从所述视频数据流中提取编码有与所述视频的空间区段相对应的空间较小的视频的缩小视频数据流：将所述视频数据流限制为其中编码有所述空间区段内的任何切片的切片部分，并且修改所述切片地址以与所述空间较小的视频的缩小图片区域相关，其中所述提取信...

【专利技术属性】
技术研发人员：罗伯特，
申请(专利权)人：GE视频压缩有限责任公司，
类型：发明
国别省市：