解码系统、方法和设备以及计算机可读介质技术方案

本申请公开了多层交错帧相容增强分辨率视频传输。视频基层可包含关于多个数据类别的帧相容交错表示的信息，而视频增强层可包含这些数据类别的交错或渐进式表示和/或帧相容表示。使用分层方法对视频数据进行编码和解码。

【技术实现步骤摘要】
多层交错帧相容增强分辨率视频传输本申请是申请号为201280062317.7、申请日为2012年12月17日、专利技术名称为“多层交错帧相容增强分辨率视频传输”的专利技术专利申请的分案申请。相关申请的交叉引用本申请要求在2011年12月17日提交的美国临时申请No.61/576989的优先权，其全部内容通过引用被并入这里。本申请可与在2010年7月21日提交的专利技术名称为“SystemsandMethodsforMulti-LayeredFrame-CompatibleVideoDelivery”的美国临时申请No.61/366512有关，其全部内容通过引用被并入这里。
本专利技术总体涉及图像和视频处理。具体而言，本专利技术的实施例涉及多层交错(interlace)帧相容(framecompatible)增强分辨率视频传输。
技术介绍
立体(3D)视频传输工业受到大量的关注。虽然使用立体3D在电影院已经变得很普遍，但它对消费者3D应用通常还未实现。正在开始致力于发展消费者3D视频空间。已经考虑了实现3D内容的高效传输。高效的内容传输包括包含压缩的若干考虑，压缩在许多视频应用中通常被视为重要的考虑。附图说明加入本说明书中并构成其一部分的附图示出本公开的一个或更多个实施例，并与示例性实施例的描述一起用于解释本公开的原理和实现。图1～6示出示例性帧相容格式和相关联的采样。图7和图8分别示出示例性立体3D消费者传输系统的编码器和解码器的示图。图9示出交错内容传输的示例性示意图。图10A和图10B示出可通过使用来自两个视图的输入产生帧相容交错表示的输入模块的两个可能的实现。图11～15示出根据本公开的各种实施例的示例性框图。图16～19示出多层编码器和解码器的多个实施例。图20示出用于导出增强层的输入的示例性系统/方法。图21和22示出多层编码器和多层解码器的另一实施例。图23示出用于制备交错表示的示例性输入模块。图24和图25示出多层编码器和多层解码器的另一实施例。图26示出用于制备帧相容渐进式(progressive)表示的示例性输入模块。图27～32示出多层编码器和多层解码器的示例性实施例。具体实施方式根据本专利技术的示例性实施例，提供一种用于通过使用编码系统将视频数据编码为多个位流的方法，视频数据包含来自多个数据类别的数据，该方法包括：提供至少一个第一层，其中，至少一个第一层包含来自视频数据的多个数据类别的帧相容交错表示；提供至少一个第二层，其中，各第二层包含一个或更多个渐进式表示，各渐进式表示与数据类别中的一个或更多个相关联；编码至少一个第一层以产生一个或更多个编码的第一层位流；和编码至少一个第二层以产生一个或更多个编码的第二层位流。根据本专利技术的示例性实施例，提供一种用于通过使用编码系统将视频数据编码为多个位流的方法，视频数据包含来自多个数据类别的数据，该方法包括：提供至少一个第一层，其中，至少一个第一层包含来自视频数据的多个数据类别的帧相容交错表示；提供至少一个第二层和至少一个第三层，其中，各第二层包含一个或更多个第二层交错表示，各第二层交错表示与数据类别中的一个或更多个相关联，并且，各第三层包含一个或更多个渐进式表示，各渐进式表示与数据类别中的一个或更多个相关联；编码至少一个第一层以产生一个或更多个编码的第一层位流；编码至少一个第二层以产生一个或更多个编码的第二层位流；和编码至少一个第三层以产生一个或更多个编码的第三层位流。根据本专利技术的示例性实施例，提供一种用于通过使用编码系统将视频数据编码为多个位流的方法，视频数据包含来自多个数据类别的数据，该方法包括：提供至少一个第一层，其中，至少一个第一层包含来自视频数据的多个数据类别的帧相容交错表示；提供至少一个第二层和至少一个第三层，其中，至少一个第二层中的各第二层包含一个或更多个数据类别的帧相容渐进式表示，并且，至少一个第三层中的各第三层包含一个或更多个数据类别的增强分辨率渐进式表示；编码至少一个第一层以产生一个或更多个编码的第一层位流；编码至少一个第二层以产生一个或更多个编码的第二层位流；和编码至少一个第三层以产生一个或更多个编码的第三层位流。根据本专利技术的示例性实施例，提供一种用于将视频数据编码为多个位流的方法，视频数据包含来自多个数据类别的数据，该方法包括：提供至少一个第一层，其中，至少一个第一层包含来自视频数据的多个数据类别的第一组帧相容交错表示；提供至少一个第二层、至少一个第三层和至少一个第四层，其中，至少一个第二层中的各第二层包含来自视频数据的多个数据类别的第一组帧相容渐进式表示，至少一个第三层中的各第三层包含来自视频数据的多个数据类别的第二组帧相容交错表示，并且，至少一个第四层中的各第四层包含来自视频数据的多个数据类别的第二组帧相容渐进式表示；编码至少一个第一层以产生一个或更多个编码的第一层位流；编码至少一个第二层以产生一个或更多个编码的第二层位流；编码至少一个第三层以产生一个或更多个编码的第三层位流；和编码至少一个第三层以产生一个或更多个编码的第四层位流。根据本专利技术的示例性实施例，提供一种用于将视频数据编码为多个位流的方法，视频数据包含来自多个数据类别的数据，该方法包括：提供至少一个第一层，其中，至少一个第一层包含来自视频数据的多个数据类别的第一组帧相容交错表示；提供至少一个第二层和至少一个第三层，其中，各第二层包含来自视频数据的多个数据类别的第二组帧相容交错表示，并且，各第三层包含来自视频数据的多个数据类别的一组交错表示；编码至少一个第一层以产生一个或更多个编码的第一层位流；编码至少一个第二层以产生一个或更多个编码的第二层位流；和编码至少一个第三层以产生一个或更多个编码的第三层位流。根据本专利技术的示例性实施例，提供一种用于通过使用解码系统解码代表视频数据的多个位流的方法，多个位流适于被解码系统从编码系统接收，各位流包含与一个或更多个数据类别相关联的数据，方法包括：向解码系统提供多个位流，其中，多个位流包含代表至少一个第一层的一个或更多个第一层位流和代表至少一个第二层的一个或更多个第二层位流，其中，至少一个第一层包含一个或更多个数据类别的帧相容交错表示，并且，至少一个第二层包含一个或更多个渐进式表示，各渐进式表示与数据类别中的一个或更多个相关联；解码一个或更多个第一层位流以获得重构的帧相容交错表示；和解码一个或更多个第二层位流以获得一个或更多个重构的渐进式表示。根据本专利技术的示例性实施例，提供一种用于通过使用解码系统解码代表视频数据的多个位流的方法，多个位流适于被解码系统从编码系统接收，各位流包含与一个或更多个数据类别相关联的数据，方法包括：向解码系统提供多个位流，其中，多个位流包含代表至少一个第一层的一个或更多个第一层位流、代表至少一个第二层的一个或更多个第二层位流和代表至少一个第三层的一个或更多个第三层位流，其中，至少一个第一层包含来自视频数据的多个数据类别的帧相容交错表示；各第二层包含一个或更多个第二层交错表示，各第二层交错表示与数据类别中的一个或更多个相关联，并且，各第三层包含一个或更多个渐进式表示，各渐进式表示与数据类别中的一个或更多个相关联；解码一个或更多个第一层位流以获得重构的帧相容交错表示；解码一个或更多个第二层位流以获得一个或更本文档来自技高网...

【技术保护点】
一种用于解码代表视频数据并适于从编码系统被接收的多个位流的解码系统，多个位流包含代表至少一个第一层的一个或更多个第一层位流和代表至少一个第二层的一个或更多个第二层位流，各位流包含与视频数据的一个或更多个数据类别相关联的数据，解码系统包含：第一层解码器，被配置为解码与所述至少一个第一层相关联的所述一个或更多个第一层位流，其中，所述至少一个第一层包含所述一个或更多个数据类别的帧相容交错表示，第一层解码器由此被配置为获得重构的帧相容交错表示；和第二层解码器，被配置为解码与所述至少一个第二层相关联的所述一个或更多个第二层位流，其中，所述至少一个第二层包含一个或更多个渐进式表示，各渐进式表示与数据类别中的一个或更多个相关联，第二层解码器由此被配置为获得一个或更多个重构的渐进式表示。

【技术特征摘要】
2011.12.17 US 61/576,9891.一种用于解码代表视频数据并适于从编码系统被接收的多个位流的解码系统，多个位流包含代表至少一个第一层的一个或更多个第一层位流和代表至少一个第二层的一个或更多个第二层位流，各位流包含与视频数据的一个或更多个数据类别相关联的数据，解码系统包含：第一层解码器，被配置为解码与所述至少一个第一层相关联的所述一个或更多个第一层位流，其中，所述至少一个第一层包含所述一个或更多个数据类别的帧相容交错表示，第一层解码器由此被配置为获得重构的帧相容交错表示；和第二层解码器，被配置为解码与所述至少一个第二层相关联的所述一个或更多个第二层位流，其中，所述至少一个第二层包含一个或更多个渐进式表示，各渐进式表示与数据类别中的一个或更多个相关联，第二层解码器由此被配置为获得一个或更多个重构的渐进式表示。2.根据权利要求1所述的解码系统，其中，第二层解码器包含：对于特定第二层，第二层熵解码器，被配置为对与特定第二层相关联的一个或更多个第二层位流执行熵解码，以获得与特定第二层相关联的第二层量化变换残差；第二层差异补偿模块，被配置为基于差异参数对来自与特定第二层相关联的基准图片缓冲器的第二层基准图片执行差异补偿，以产生预测的渐进式图片，其中，差异参数适于被解码系统从编码系统接收到；第二层逆量化模块，与第二层熵编码器和第二层逆变换模块连接，其中，第二层逆量化模块和第二层变换模块被配置为分别对第二层量化变换残差执行逆量化和逆变换，以获得第二层逆处理残差；和第二层加算模块，与第二层逆变换模块和第二层差异补偿模块连接，并被配置为组合第二层逆处理残差与预测的渐进式图片以获得与特定第二层相关联的一个或更多个重构的渐进式表示，其中，一个或更多个重构的渐进式表示适于存储于与特定第二层相关联的基准图片缓冲器中。3.根据权利要求1所述的解码系统，其中，来自与特定第二层相关联的基准图片缓冲器的第二层基准图片基于存储于与至少一个第一层相关联的基准图片缓冲器中的第一层基准图片，其中，第一层解码器包含：第一层熵解码器，被配置为对所述一个或更多个第一层位流执行熵解码，以获得与至少一个第一层相关联的第一层量化变换残差；第一层逆量化模块，与第一层熵解码器和第一层逆变换模块连接，其中，第一层逆量化模块和第一层逆变换模块被配置为分别对第一层量化变换残差执行逆量化和逆变换以获得第一层逆处理残差；第一层差异补偿模块，被配置为基于差异参数对第一层基准图片执行差异补偿以产生预测的帧相容交错图片的，其中，差异参数适于被解码系统从编码系统接收到；和第一层加算模块，与第一层逆变换模块和第一层差异补偿模块连接，并被配置为组合第一层逆处理残差与预测的帧相容交错图片以获得与至少一个第一层相关联的重构的帧相容交错表示，其中，重构的帧相容交错表示适于存储于与至少一个第一层相...

【专利技术属性】
技术研发人员：A·莱昂塔瑞斯，A·多拉佩斯，P·帕哈拉瓦塔，K·J·斯特科，W·J·胡萨克，
申请(专利权)人：杜比实验室特许公司，
类型：发明
国别省市：美国,US