多层视频编码中用于空间层的采样栅格信息制造技术

可以确定针对多层视频编码系统的采样栅格信息。该采样栅格信息可以被用来将编码系统的视频层进行对准。采样栅格校正可以基于采样栅格信息执行。采样栅格还可以被检测。在一些实施方式中，采样栅格精度还可以被检测和/或被用信号发送。

Sampled raster information for spatial layer in multi-layer video coding

【技术实现步骤摘要】
多层视频编码中用于空间层的采样栅格信息本申请为2013年8月6日递交的题为“多层视频编码中用于空间层的采样栅格信息”的中国专利申请201380041977.1的分案申请。相关申请的交叉引用本申请要求2012年8月6日提交的名称为“SignalingOfSamplingGridInformationAmongSpatialLayersInMulti-LayerVideo”的美国临时专利申请No.61/680,244和2013年4月5日提交的名称为“SignalingOfSamplingGridInformationAmongSpatialLayersInMulti-LayerVideoCoding”的美国临时专利申请No.61/809,102的权益，这两个申请的公开内容通过引用而被全部合并到本申请中以用于所有目的。
技术介绍
随着在智能电话和其他WTRU上实现视频应用，可以在具有各种不同能力(例如，计算能力、存储器/存储设备大小、显示器分辨率、显示器帧率等)的设备上适应视频消费。网络和/或传输信道也可以具有各种不同的特性(例如，分组丢失率、可用信道带宽、突发错误率等)。而且，视频数据可以通过有线网络和/或无线网络传送。这些设备和/或网络实体的各种配置会使得视频数据的传输和/或编码变得复杂。
技术实现思路
这里描述了用于多层视频编码系统中的信令采样栅格信息的系统、方法和装置。例如，采样栅格信息可以被接收，其可以至少指示第一视频层与第二视频层之间采样栅格对准程度(或对准量)。与第一视频层相关联的采样栅格可以根据接收到的采样栅格信息进行偏移，以和与第二视频层相关联的采样栅格进行对准。在一个或多个实施方式中，可基于采样栅格信息来执行采样栅格校正。在一个或多个实施方式中，采样栅格可以被检测。实施方式涵盖了用于执行多层视频编码的采样栅格校正的一种或多种技术。技术可以包括接收可指示第一视频层与第二视频层之间的采样栅格对准的采样栅格信息。技术还可包括将与第一视频层相关联的采样栅格和与第二视频层相关联的采样栅格相对准。该对准可基于接收到的采样栅格信息。实施方式涵盖了用于传递多层视频编码的采样栅格信息的一种或多种技术。技术可以包括接收第一数据(例如，数据集或数据)。技术还可以包括确定第一数据是否包括采样栅格信息。技术还可以包括基于确定第一数据包括采样栅格信息来确定采样栅格信息的精度。实施方式涵盖了用于检测多层视频编码中用于一层或多层的相对采样栅格的一种或多种技术。技术可以包括对基层(baselayer)进行上采样(upsample)，以对增强层空间分辨率进行匹配。技术还可包括将自适应滤波器训练应用于上采样后的基层和增强层。技术还可以包括基于从自适应滤波器训练得到的一个或多个自适应滤波器系统来确定相对采样栅格的位置。附图说明图1示出了与实施方式相一致的示例性的基于块的混合可缩放视频编码系统的框图，该系统具有N个层。图2示出了与实施方式相一致的使用H.264/MVC的立体(2视图)视频编码的时间(temporal)和层间预测的示例的图示。图3示出了与实施方式相一致的示例性的空间可缩放多层(例如2层)编码系统的框图。图4示出了与实施方式相一致的示例性的空间可缩放多层(例如2层)解码器的框图。图5A(例如零相移)和图5B(例如，非零相移)示出了与实施方式相一致的、BL视频与EL视频之间针对下采样比率(例如，每个维度2倍)的采样栅格的示例。图6A(例如零相移)和图6B(例如，非零相移)示出了与实施方式相一致的、BL视频与EL视频之间针对下采样空间比率(例如，每个维度1.5倍)的采样栅格的其他示例。图7示出了与实施方式相一致的、在下采样和上采样(例如，2倍空间比率，非零相移下采样和零相移上采样)之后EL视频与上采样后的BL视频之间未对准(或未匹配)的采样栅格的示例。图8示出了与实施方式相一致的、针对采样栅格信息(例如，视频参数集(VPS)和/或序列参数集(SPS))的信令的示例性流程图。图9示出了与实施方式相一致的、用于用信号发送采样栅格信息的示例。图10示出了与实施方式相一致的、空间层(例如，两个空间层)之间的采样栅格(例如相对采样)的示例性检测的框图。图11示出了与实施方式相一致的、说明使用2抽头自适应滤波器(例如，X维度)的示例性相对采样栅格检测的框图。图12示出了与实施方式相一致的包括采样栅格信息信令、采样栅格校正和采样栅格检测的示例性多层(例如，2层)空间可缩放编码系统的框图。图13A是可以在其中实施所公开的一个或多个实施方式的示例性通信系统的系统图示。图13B是可以在图13A所示的通信系统中使用的示例性无线发射/接收单元(WTRU)的系统图示。图13C是可以在图13A所示的通信系统中使用的示例性无线电接入网络和示例性核心网络的系统图示。图13D是可以在图13A所示的通信系统中使用的另一示例性无线电接入网络和示例性核心网络的系统图示。图13E是可以在图13A所示的通信系统中使用的另一示例性无线电接入网络和示例性核心网络的系统图示。具体实施方式现在将参照多个附图来描述说明性实施方式的详细描述。虽然该描述提供了可能实现方式的详细示例，但是应当指出的是，这些细节旨在是示例性的且不以任何方式来限制本申请的范围。以下所使用的冠词“一(a)”或者“一个(an)”，不是进一步的量化或者特征化，而是可以理解为诸如“一个或者多个”或者“至少一个”。可以使用各种数字视频压缩技术来进行有效的数字视频通信、分发和/或消费。这种数字视频的商业部署标准的示例可以由ISO/IEC和ITU-T开发，诸如H.26、MPEG-1、MPEG-2、H.263、MPEG-4part2、H.264/MPEG-4part10AVC和/或高效率视频编码(HEVC)(例如，其可以由ITU-T视频编码专家组(VCEG)和ISO/IEC运动图像专家组(MPEG)联合开发)。就相同或类似的视频质量而言，HEVC可以被用来实现更大的压缩(例如，是H.264/AVC压缩的两倍)和/或更低的比特率(例如，一半的比特率)。数字视频服务可以经由通过卫星、电缆、陆地广播信道、因特网(例如，在移动设备上，诸如在智能电话、平板电脑(tablets)和/或其他WTRU上)的TV服务和/或其他视频应用(诸如视频聊天、移动视频记录和共享和/或视频流)来实现。可以在各种环境中执行这些视频传输。在各种类型的视频传输场景(诸如3屏幕或N屏幕)中，各种消费者设备(例如，PC、智能电话、平板电脑、TV等)可以适应具有各种不同能力(例如，计算能力、存储器/存储设备大小、显示器分辨率、显示器帧率等)的视频消费。网络和/或传输信道可以具有各种不同的特性(例如，分组丢失率、可用信道带宽、突发错误率等)。视频数据可以通过有线网络和/或无线网络的组合进行传送，这会使得底层传输信道特性变得复杂。在这种或其他场景中，可缩放视频编码(SVC)的前提可以被用来改善通过各种网络在具有不同能力的设备上运行的视频应用的体验质量。SVC可以被用来以最高的表示(representation)(例如，时间分辨率、空间分辨率、质量等)对信号进行编码(例如，在一些实施方式中，可能一次)。SVC可以依赖于由客户端设备上运行的应用所实现的速率和/本文档来自技高网...

【技术保护点】
1.一种用于多层视频编码的方法，该方法包括：由WTRU接收包括采样栅格信息的信号，所述采样栅格信息包括亮度平面相移数据和色度平面相移数据，其中所述亮度平面相移数据指明了第一视频层内第一图像的亮度采样栅格与第二视频层内第二图像的亮度采样栅格之间的亮度相移，所述色度平面相移数据指明了所述第一图像的色度采样栅格与所述第二图像的色度采样栅格之间的色度相移；由所述WTRU基于所述亮度平面相移数据和所述色度平面相移数据，确定一个或多个多相滤波器；以及由所述WTRU基于所接收的采样栅格信息并使用所确定的一个或多个多相滤波器执行采样栅格校正，以将所述第一图像的所述亮度采样栅格与所述第二图像的所述亮度采样栅格相对准，并将所述第一图像的所述色度采样栅格与所述第二图像的所述色度采样栅格相对准。

【技术特征摘要】
2012.08.06 US 61/680,244;2013.04.05 US 61/809,1021.一种用于多层视频编码的方法，该方法包括：由WTRU接收包括采样栅格信息的信号，所述采样栅格信息包括亮度平面相移数据和色度平面相移数据，其中所述亮度平面相移数据指明了第一视频层内第一图像的亮度采样栅格与第二视频层内第二图像的亮度采样栅格之间的亮度相移，所述色度平面相移数据指明了所述第一图像的色度采样栅格与所述第二图像的色度采样栅格之间的色度相移；由所述WTRU基于所述亮度平面相移数据和所述色度平面相移数据，确定一个或多个多相滤波器；以及由所述WTRU基于所接收的采样栅格信息并使用所确定的一个或多个多相滤波器执行采样栅格校正，以将所述第一图像的所述亮度采样栅格与所述第二图像的所述亮度采样栅格相对准，并将所述第一图像的所述色度采样栅格与所述第二图像的所述色度采样栅格相对准。2.根据权利要求1所述的方法，其中确定一个或多个多相滤波器包括选择一个或多个高效视频编码(HEVC)多相滤波器。3.根据权利要求1所述的方法，其中所述色度平面相移数据包括以下中的至少一者：水平色度相移和垂直色度相移。4.根据权利要求1所述的方法，其中所述亮度平面相移数据包括以下中的至少一者：水平亮度相移和垂直亮度相移。5.根据权利要求1所述的方法，其中所述信号包括标志，所述标志指示所述采样栅格信息被包括在所述信号中。6.根据权利要求1所述的方法，其中所述第一视频层为基层，而所述第二视频层为增强层。7.根据权利要求1所述的方法，其中所述亮度平面相移数据指示所述第一视频层内的所述第一图像和所述第二视频层内的所述第二图像之间的非零相对相移；以及其中所述色度平面相移数据指示所述第一视频层内的所述第一图像和所述第二视频层内的所述第二图像之间的非零相对相移。8.一种用于执行多层视频编码的设备，该设备包括：处理器，被配置为至少：接收包括采样栅格信息的信号，所述采样栅格信息包括亮度平面相移数据和色度平面相移数据，其中所述亮度平面相移数据指明了第一视频层内第一图像的亮度采样栅格与第二视频层内第二图像的亮度采样栅格之间的亮度相移，所述色度平面相移数据指明了所述第一图像的色度采样栅格与所述第二图像的色度采样栅格之间的色度相移；基于所述亮度平面相移数据和所述色度平面相移数据，确定一个或多个多相滤波器；以及基于所接收的采样栅格信息并使用所确定的一个或多个多相滤波器执行采样栅格校正，以将所述第...

【专利技术属性】
技术研发人员：叶琰，贺玉文，董洁，
申请(专利权)人：VID拓展公司，
类型：发明
国别省市：美国,US