用于帧间预测的视频数据的变换编码制造技术

本发明专利技术公开了，与变换解码相关联的一些操作可以为帧内预测的编码块提供编码增益，但不为利用某些帧间预测工具或技术预测的编码块提供。这些操作可以包括例如多变换选择(MTS)和/或变换跳过，并且帧间预测工具或技术可以包括仿射运动补偿、组合的帧间和帧内预测(CIIP)、三角形分区模式(TPM)或几何合并模式(GEO)中的一者或多者。因此，与多功能视频编码相关联的系统、方法和工具可以被配置成使得可以为编码块禁用与变换解码相关联的前述操作，该编码块是利用本文描述的一个或多个帧间预测工具或技术预测的。许多益处可以从禁用这些操作中得出，包括例如减少编码时间和/或信令开销。开销。开销。

【技术实现步骤摘要】
【国外来华专利技术】用于帧间预测的视频数据的变换编码
[0001]相关申请的交叉引用
[0002]本申请要求于2019年12月30日提交的欧洲专利申请号19306778.2的权益，该专利申请的公开内容全文以引用方式并入本文。

技术介绍

[0003]视频编码系统和装置可用于压缩数字视频信号，例如以缩小此类信号需要的存储和/或传输带宽。视频编码可利用帧内和/或帧间预测技术、变换技术、量化技术等来压缩视频数据。对于某些类型的编码单元，这些技术中的一些可能增加编码时间和/或信令开销而不提供显著的编码增益。

技术实现思路

[0004]本文描述了与通用视频编码相关联的系统、方法和工具。如本文所述的视频编码装置可以包括视频编码器，该视频编码器被配置成使用帧间预测技术确定编码块(例如，编码单元)的预测残差。视频编码器可以确定帧间预测技术在帧间预测技术集中，因而与变换编码相关联的至少一个操作将被禁用。基于该确定，视频编码器可以禁用与用于编码块的预测残差的变换编码相关联的至少一个操作，并且利用被禁用的与变换编码相关联的至少一个操作来编码预测残差。在示例中，待禁用的与变换编码相关联的至少一个操作可以包括多变换选择(MTS)。在示例中，待禁用的与变换编码相关联的至少一个操作可以包括变换跳过(TrSkip)。在示例中，为编码块的预测残差禁用MTS可以包括基于编码块的一个或多个候选变换跳过速率失真搜索的性能。在示例中，导致MTS和/或TrSkip被禁用的帧间预测技术集可以包括仿射运动补偿、组合的帧间和帧内预测、三角形分区和几何合并。
[0005]如本文所述的视频编码装置可以包括视频解码器，该视频解码器被配置成获得包括编码块(例如，编码单元)的预测残差的视频数据。视频解码器可以基于视频数据确定包括在视频数据中的预测残差是使用帧间预测技术确定的，该帧间预测技术在帧间预测技术集中，因而与变换编码相关联的至少一个操作被禁用。基于该确定，视频解码器可以利用被禁用的与变换编码相关联的至少一个操作来对编码块的预测残差进行解码。在示例中，被禁用的与变换编码相关联的至少一个操作可以包括多变换选择(MTS)。在示例中，被禁用的与变换编码相关联的至少一个操作可以包括变换跳过(TrSkip)。在示例中，利用被禁用的MTS对编码块的预测残差进行解码可以包括跳过从视频数据中获得MTS索引。在示例中，导致MTS和/或TrSkip被禁用的帧间预测技术集可以包括仿射运动补偿、组合的帧间和帧内预测、三角形分区和几何合并。
附图说明
[0006]图1是示出示例性视频编码器的示意图。
[0007]图2是示出示例性视频解码器的示意图。
[0008]图3是示出在其中实现各种方面和示例的系统的示例的示意图。
[0009]图4是示出具有两个控制点的仿射运动补偿的示例的示意图。
[0010]图5是示出基于三角形分区的帧间预测的示例的示意图。
[0011]图6A是示出在其中一个或多个所公开的示例可得以实施的示例性通信系统的系统示意图。
[0012]图6B是示出根据一个示例可在图6A所示的通信系统内使用的示例性无线发射/接收单元(WTRU)的系统示意图。
[0013]图6C是根据一个示例示出可在图6A所示的通信系统内使用的示例性无线电接入网(RAN)和示例性核心网络(CN)的系统示意图。
[0014]图6D是示出根据一个示例示出可在图6A所示的通信系统内使用的另外一个示例性RAN和另外一个示例性CN的系统示意图。
具体实施方式
[0015]现在将参考各种附图对例示性示例的具体实施方式进行详细描述。尽管本说明书提供了可能的具体实施的详细示例，但应当指出的是，细节旨在为示例性的，并且绝不限制本申请的范围。
[0016]本申请描述了多个方面，包括工具、特征、示例、模型、方法等。这些方面中的许多方面以特定的方式进行描述，并且至少为了示出个体特征，通常以听起来可能具有限制性的方式来描述。然而，这是为了描述清楚，并不限制这些方面的应用或范围。实际上，所有不同的方面可组合和互换以提供进一步的方面。此外，这些方面也可与先前提交中描述的方面组合和互换。
[0017]本专利申请中描述和设想的方面可以许多不同的形式实现。本文描述的图1至图6D可以提供一些示例，但是考虑了其他示例，并且图1
‑
图6D的讨论不限制具体实施的广度。这些方面中的至少一个方面通常涉及视频编码和解码，并且至少一个其他方面通常涉及发射生成或编码的比特流。这些和其他方面可实现为方法、装置、其上存储有用于根据该方法中任一种对视频数据编码或解码的指令的计算机可读存储介质，和/或其上存储有根据该方法中任一种生成的比特流的计算机可读存储介质。
[0018]在本申请中，术语“重构”和“解码”可以互换使用，术语“像素”和“样本”可以互换使用，术语“图像”、“图片”和“帧”可以互换使用。通常，但不一定，术语“重构”在编码端使用，而“解码”在解码端使用。
[0019]本文描述了各种方法，并且每种方法包括用于实现方法的一个或多个步骤或动作。除非正确操作方法需要特定顺序的步骤或动作，否则可修改或组合特定步骤和/或动作的顺序和/或用途。另外，在各种示例中，诸如“第一”、“第二”等术语可用于修饰元素、部件、步骤、操作等，诸如“第一解码”和“第二解码”。除非特定需要，否则使用此类术语并不暗示对修改操作的排序。因此，在这个示例中，第一解码不需要在第二解码之前执行，并且可例如在第二解码之前、期间或重叠的时间段发生。
[0020]本申请中所述的各种方法和其他方面可用于修改视频编码器100和解码器200的模块(例如，解码模块)，如图1和图2所示。此外，本专利技术方面不限于VVC或HEVC，并且可应用于例如其他标准和推荐(无论是预先存在的还是未来开发的)以及任何此类标准和推荐的扩展(包括VVC和HEVC)。除非另外指明或技术上排除在外，否则本申请中所述的方面可单独
或组合使用。
[0021]在本申请中使用了各种数值，例如，子块的大小为4
×
4，索引值在0
‑
82范围内，诸如此类。特定值是用于示例性目的，并且所描述的方面不限于这些特定值。
[0022]图1示出了编码器100。设想了这一编码器100的变型，但是为了清楚起见，下文描述了编码器100而不描述所有预期的变型。
[0023]在编码之前，视频序列可经过预编码处理(101)，例如，将颜色变换应用于输入彩色图片(例如，从RGB 4:4:4到YCbCr 4:2:0的转换)，或执行输入图片分量的重新映射，以便获得对压缩更具弹性的信号分布(例如，使用颜色分量中的一个颜色分量的直方图均衡化)。元数据可与预处理相关联并且附加到比特流。
[0024]在编码器100中，图片由编码器元件进行编码，如下所述。以例如CU为单位对要编码的图片进行分区(102)和处理。例如，使用帧内模式或帧间模式对每个单元进行编码。当单元以帧内模式进行编码时，其执行帧内预测(160)。在帧间模本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种用于视频解码的装置，所述装置包括一个或多个处理器，其中所述一个或多个处理器被配置为：获得视频数据，其中所述视频数据包括编码块的预测残差；基于所述视频数据确定所述预测残差是使用帧间预测技术获得的，所述帧间预测技术在帧间预测技术集中，因而与变换编码相关联的至少一个操作被禁用；以及利用被禁用的与变换编码相关联的所述至少一个操作对所述编码块的所述预测残差进行解码。2.根据权利要求1所述的装置，其中与变换编码相关联的所述至少一个操作包括多变换选择(MTS)。3.根据权利要求2所述的装置，其中所述一个或多个处理器被配置成利用被禁用的与变换编码相关联的所述至少一个操作对所述编码块的所述预测残差进行解码包括所述一个或多个处理器被配置成跳过从所述视频数据获得MTS索引。4.根据权利要求1至3中任一项所述的装置，其中与变换编码相关联的所述至少一个操作包括变换跳过。5.根据权利要求1至4中任一项所述的装置，其中所述帧间预测技术集包括仿射运动补偿、组合的帧间和帧内预测、三角形分区以及几何合并。6.一种用于视频解码的方法，所述方法包括：获得视频数据，其中所述视频数据包括编码块的预测残差；基于所述视频数据确定所述预测残差是使用帧间预测技术获得的，所述帧间预测技术在帧间预测技术集中，因而与变换编码相关联的至少一个操作被禁用；以及利用被禁用的与变换编码相关联的所述至少一个操作对所述编码块的所述预测残差进行解码。7.根据权利要求6所述的方法，其中与变换编码相关联的所述至少一个操作包括多变换选择(MTS)。8.根据权利要求7所述的方法，其中利用被禁用的与变换编码相关联的所述至少一个操作对所述编码块的所述预测残差进行解码包括跳过从所述视频数据获得MTS索引。9.根据权利要求6至8中任一项所述的方法，其中与变换编码相关联的所述至少一个操作包括变换跳过。10.根据权利要求6至9中任一项所述的方法，其中所述帧间预测技术集包括仿射运动补偿、组合的帧间和帧内预测、三角形分区和几何合并。11.一种用于视频编码的装置，所述装置包括一个或多个处理器，其中所述一个或多个处理器被配置为：使用帧间预测技术确定编码块的预测残差；确定所述帧间预测技术是否在帧间预测技术集中，因而与变换编码相关联的所述至少一个操作将被禁用；以及基于确定所述帧间预测技术在所述帧间预测技术集中，因而与变换编码相关联的所述至少一个操作将被禁用，禁用与用于所述预测残差的变换编码相关联的所述至少一个操作；以及利用被禁用的与变换编码相关联的所述至少一个操作对所述编码块的所述预测残差
进行编码。12.根据权利要求11所述的装置，其中与变换编码相关联的所述至少一个操作包括多变换选择(MTS)。13.根据权利要求12所述的装置，其中所述一个或多个处理器被配置成禁用与变换编码相关联的所述至少一个操作包括所述一个或多个处理器被配置成基于所述编码块的一个或多个候选变换跳过速率失真搜索的性能。14.根据权利要求11至13中任一项所述的装置，其中与变换编码相关联的所述至少一个操作包括变换跳过。15.根据权利要求11至14中任一项所述的装置，其中所述帧间预测技术集包括仿射运动补偿、组合的帧...

【专利技术属性】
技术研发人员：K，
申请(专利权)人：交互数字VC控股法国公司，
类型：发明
国别省市：