复用分层编码内容的方法和装置制造方法及图纸

当通过固定容量网络链路来传输分层编码内容时，基础层和增强层的比特率峰值可能发生在相似的时刻。为更高效使用带宽，本发明专利技术原理提出了不同的方法，例如向基础层比特流或增强层比特流添加延时，以及使比特的“超限”部分移位一时间窗。在接收机侧，本发明专利技术原理提供不同的频道改变机制，以允许用户快速改变频道，即使在比特流中添加了延时。具体地，解码器不必等待增强层可用就可以开始呈现基础层内容。在一个实施例中，使基础层内容的解码减慢，以便与增强层内容在时间上对齐。

【技术实现步骤摘要】
【国外来华专利技术】本申请要求申请日为2014年1月14日的以下欧洲专利申请No.14305052.4的优先权，通过引用方式将其整体并入本文。
本专利技术涉及复用方法和复用装置，具体涉及复用对应于分层编码内容的多个比特流的方法和装置，以及处理比特流的方法和装置。
技术介绍
当传输音频视频(AV)流时，一个常见的挑战是，在确保每个AV服务的质量维持在接受阈值以上的同时，在固定容量网络链路(固定带宽)内发送尽可能多的流(频道)。当使用恒定比特率(CBR)流时，常常使用简单的时分复用在AV服务之间共享可用带宽。尽管在为每个服务分配带宽方面较为简单，但令人遗憾地是在AV编码方面低效。实际上，当使用CBR编码时，并不考虑序列的复杂度，而是用相同的比特率对它们进行编码。可变比特率(VBR)编码允许在较高复杂度的序列(例如，细节更多、移动更多的序列)上使用较高的比特率，同时确保对较低复杂度的序列使用较低的比特率。通常，计算音频/视频内容的复杂度，以决定在给定实例中将多大的比特率专用于音频/视频内容的编码。给定容量网络链路内可以传输多个VBR流。例如，图1A示出了通过同定容量的网络链路一起传输的示例性序列HD1、HD2、HD3和HD3，如虚线所示。当在固定容量网络链路内传输多个VBR时，我们要确保多个VBR流累加起来的流不超过网络链路容量，并且尽最大可能使用总可用带宽。该问题的常见解决方案是统计复用。统计复用基于这样的假设，统计学上看，在相同网络链路中，来自一个流的较高复杂度场景和来自另一个流的较低复杂度场景可能同时发生。因此，用于编码复杂场景的额外带宽可以取自同一时刻对低复杂度场景的编码所省下的带宽。统计复用通常实时评估所有AV流的复杂度，然后考虑所有流的复杂度，在每个流之间分配总可用带宽。当多个流竞争带宽时，可以使用附加机制，例如简单优先级，以决定带宽共享。
技术实现思路
本专利技术目的是弥补现有技术的缺点。具体地，在一些实施例中，本专利技术能够降低复用后的比特率峰值。本专利技术原理提供一种处理第一比特流和第二比特流的方法，包括：访问第一比特流和第二比特流，其中第一比特流对应于分层编码内容的基础层和分层编码内容的增强层中的一个，第二比特流对应于分层编码内容的基础层和分层编码内容的增强层中的另一个；将第二比特流延时第一持续时间；以及如下文所述，复用第一比特流和被延时的第二比特流。根据实施例，所述方法还包括：确定复用流中超过网络链路的容量的比特；以及将确定的比特时移第二持续时间。根据实施例，所述方法还包括，响应于分层编码内容的编码参数，确定第一持续时间，所述编码参数包括图像组GOP长度和GOP结构中的至少一个。根据变型，第一持续时间随GOP而变化。根据实施例，所述方法还包括发送复用流和表示第一持续时间的信息。本专利技术原理还提供用于执行这些步骤的装置。根据实施例，所述装置布置在服务器和视频复用器中的一个中。根据实施例，所述装置包括发送天线、到发送天线的接口、视频编码器、视频存储器、视频服务器、与视频相机的接口以及视频相机。本专利技术原理还提供一种处理第一比特流和第二比特流的方法，包括：将第一比特流解码为节目内容的第一表示；在自第一比特流解码的延时之后，将第二比特流解码为节目内容的第二表示，其中第一比特流对应于分层编码内容的基础层和分层编码内容的增强层中的一个，第二比特流对应于分层编码内容的基础层和分层编码内容的增强层中的另一个；以及输出对应于第一表示和第二表示的信号用于呈现，如下文所述。根据实施例，所述方法还包括，以比第一比特流、第二比特流和传输流中的至少一个中指定的速度低的速度，呈现第一表示。根据实施例，所述方法还包括，在第一表示和第二表示的呈现在时间上对齐后，以指定的速度呈现第一表示。根据实施例，所述方法还包括，从传输流中解复用第一比特流、第二比特流和表示延时的信息。本专利技术原理还提供用于执行这些步骤的装置。根据实施例，所述装置包括以下一项或多项：天线或到天线的接口、通信接口、视频解码器、视频存储器和显示器。本专利技术原理还提供一种计算机可读存储介质，存储有根据上述方法处理第一比特流和第二比特流的指令。附图说明图1A是示出了通过固定容量网络链路传输的四个示例性序列的图示，以及图1B是示出了通过固定容量网络链路传输的分层编码的基础层比特流和增强层比特流的图示。图2是示出了根据本专利技术原理实施例的相对基础层比特流(HD1)移位延时D的增强层比特流(UHD1)的图示。图3是示出了根据本专利技术原理实施例的用于执行复用的示例性方法的流程图。图4是示出了根据本专利技术原理实施例的用于执行频道改变的示例性方法的流程图。图5是示出了根据本专利技术原理实施例的用于执行频道改变的另一示例性方法的流程图。图6A和6B是示出了根据图4描述的方法，分别在“重播”模式和“等待”模式中随时间可以向用户展示的事物的图示，图6C是示出了根据图5描述的方法随时间可以向用户展示的事物的图示，以及图6D示出了可以根据图5描述的方法将基础层呈现和增强层呈现对齐。图7A是示出了来自两个频道的比特流的图示，每个频道具有基础层和增强层，以及图7B是示出了根据本专利技术原理实施例的被移位了一时间窗的“超限”部分的比特的图示。图8是示出了根据本专利技术原理实施例的示例性发送系统的框图。图9是示出了根据本专利技术原理实施例的示例性接收系统的框图。图10是示出了根据本专利技术原理实施例的另一示例性接收系统的框图。具体实施方式当传输相同内容的两种表示时，不对它们中的每一个进行单独编码，而是使用分层编码，并通过相同的网络链路同时传输它们是有利的。借助分层编码，基础层(BL)提供基本质量，而后续的增强层(EL)逐步地精细化质量。例如，相同内容的高清HD和超清UltraHD(UHD)版本可以作为一个分层编码内容来传送，其中，基础层包含媒体的HD版本，增强层包含由HD内容重建UltraHD内容所需的额外信息。分层编码中，由于基础层和增强层表示具有不同质量的相同内容，所以它们的复杂度(因此，编码后它们的比特率需要适合的质量)通常遵从相似的趋势，并且它们的比特率通常在相似的时刻呈现出峰值和谷值。该比特率峰值可能给统计复用带来问题，统计复用假设来自不同的流的峰值和谷值应在统计学上很少共存。具体地，来自不同比特流的同时发生的比特率峰值可能产生总带宽使用方面的总峰值，并且基础层和增强层所需的比特率可能超过专用于该服务的网络链路容量。例如，如图1B所示，使用分层编码对相同内容的HD和UltraHD版本进行编码，并通过同定容量网络链路将所得到的BL和EL比特流(HD1和UHD1)一起传输，如虚线所示。HD1和UHD1几乎在相同时间具有比特率峰值，并且在比特率峰值附近，总比特率超过最大可用带宽。为避免带宽溢出，可以使用较低的比特率、因而较低的服务质量来重新生成HD1和UHD1比特流。在本专利技术原理中，我们提出不同的方法，以使统计复用适用于分层编码内容。在一个实施例中，我们在增强层比特流或基础层比特流中引入延时，使得不同层的比特率峰值不再同时发生，并且可以降低总峰值的幅值。在以下示例中，我们假设分层编码中只有一个增强层，并且分层编码适用于视频内容。本专利技术原理可以适用于存在更多个增强层的情形并且适用本文档来自技高网...

【技术保护点】
一种处理第一比特流和第二比特流的方法，包括：访问(320)第一比特流和第二比特流，其中第一比特流对应于分层编码内容的基础层和分层编码内容的增强层中的一个，第二比特流对应于分层编码内容的基础层和分层编码内容的增强层中的另一个；将第二比特流延时(330)第一持续时间；以及复用(340)第一比特流和被延时的第二比特流。

【技术特征摘要】
【国外来华专利技术】2014.01.14 EP 14305052.41.一种处理第一比特流和第二比特流的方法，包括：访问(320)第一比特流和第二比特流，其中第一比特流对应于分层编码内容的基础层和分层编码内容的增强层中的一个，第二比特流对应于分层编码内容的基础层和分层编码内容的增强层中的另一个；将第二比特流延时(330)第一持续时间；以及复用(340)第一比特流和被延时的第二比特流。2.根据权利要求1所述的方法，还包括：确定复用流中超过网络链路的容量的比特；以及将确定的比特时移第二持续时间。3.根据权利要求1或2中任一项所述的方法，还包括：响应于分层编码内容的编码参数来确定第一持续时间，所述编码参数包括图像组GOP长度和GOP结构中的至少一个。4.根据权利要求3所述的方法，其中第一持续时间随GOP而变化。5.根据权利要求1至4中任一项所述的方法，还包括：发送复用流和表示第一持续时间的信息。6.一种处理第一比特流和第二比特流的方法，包括：将第一比特流解码(430，570)为节目内容的第一表示；在自第一比特流解码的延时之后，将第二比特流解码(470，570)为节目内容的第二表示，其中第一比特流对应于分层编码内容的基础层和分层编码内容的增强层中的一个，第二比特流对应于分层编码内容...

【专利技术属性】
技术研发人员：朱利安·里卡德，玛丽吕克·坎贝尔，吉恩·拉什品萨奇，赛林·古瑞德，
申请(专利权)人：汤姆逊许可公司，
类型：发明
国别省市：法国;FR