视频解码的方法和装置制造方法及图纸

本申请实施例提供了视频解码的方法和装置。在一些示例中，视频解码的方法包括：生成块的第一重建样本；将滤波器应用于所述块的第一重建样本的多个颜色分量，以确定要应用于一个或多个颜色分量的偏移；以及基于用于所述一个或多个颜色分量的所述偏移和所述块的第一重建样本，生成所述块的第二重建样本。

【技术实现步骤摘要】
视频解码的方法和装置通过引用并入本文本申请要求于2020年2月21日提交的、申请号为62/979,899、专利技术名称为"联合组件滤波器"的美国临时申请、以及于2020年11月11日提交的、申请号为17/095,622、专利技术名称为“过滤方法和装置”的美国申请的优先权，其全部内容通过引用并入本申请中。
本申请涉及视频编解码技术。具体地，涉及视频解码的方法和装置、设备和计算机可读介质。
技术介绍
通过具有运动补偿的帧间图片预测技术，可以进行视频编码和解码。未压缩的数字视频可包括一系列图片，每个图片具有例如1920×1080亮度样本及相关色度样本的空间维度。所述系列图片具有固定的或可变的图片速率(也非正式地称为帧率)，例如每秒60个图片或60Hz。未压缩的视频具有特定的比特率要求。例如，每个样本8比特的1080p604:2:0的视频(1920x1080亮度样本分辨率，60Hz帧率)要求接近1.5Gbit/s带宽。一小时这样的视频就需要超过600GB的存储空间。视频编码和解码的一个目的，是通过压缩减少输入视频信号的冗余信息。视频压缩可以帮助降低对上述带宽和/或存储空间的要求，在某些情况下可降低两个或更多数量级。无损压缩和有损压缩，以及两者的组合均可采用。无损压缩是指从压缩的原始信号中重建原始信号精确副本的技术。当使用有损压缩时，重建信号可能与原始信号不完全相同，但是原始信号和重建信号之间的失真足够小，使得重建信号可用于预期应用。有损压缩广泛应用于视频。容许的失真量取决于应用。例如，相比于电视应用的用户，某些消费流媒体应用的用户可以容忍更高的失真。可实现的压缩比反映出：较高的允许/容许失真可产生较高的压缩比。视频编码器和解码器可利用几大类技术，例如包括：运动补偿、变换、量化和熵编码。视频编解码器技术可包括已知的帧内编码技术。在帧内编码中，在不参考先前重建的参考图片的样本或其它数据的情况下表示样本值。在一些视频编解码器中，图片在空间上被细分为样本块。当所有的样本块都以帧内模式编码时，该图片可以为帧内图片。帧内图片及其衍生(例如独立解码器刷新图片)可用于复位解码器状态，并且因此可用作编码视频比特流和视频会话中的第一图片，或用作静止图像。帧内块的样本可用于变换，且可在熵编码之前量化变换系数。帧内预测可以是使预变换域中的样本值最小化的技术。在某些情形下，变换后的DC值越小，且AC系数越小，则在给定的量化步长尺寸下需要越少的比特来表示熵编码之后的块。如同从诸如MPEG-2代编码技术中所获知的，传统帧内编码不使用帧内预测。然而，一些较新的视频压缩技术包括：试图从例如周围样本数据和/或元数据中得到数据块的技术，其中周围样本数据和/或元数据是在空间相邻的编码/解码期间、且在解码顺序之前获得的。这种技术后来被称为"帧内预测"技术。需要注意的是，至少在某些情形下，帧内预测仅使用正在重建的当前图片的参考数据，而不使用参考图片的参考数据。可以存在许多不同形式的帧内预测。当在给定的视频编码技术中可以使用超过一种这样的技术时，所使用的技术可以按帧内预测模式进行编码。在某些情形下，模式可具有子模式和/或参数，且这些模式可单独编码或包含在模式码字中。将哪个码字用于给定模式/子模式/参数组合会通过帧内预测影响编码效率增益，因此用于将码字转换成比特流的熵编码技术也会出现这种情况。
技术实现思路
本申请的方面提供了视频编码/解码的方法和装置、设备和计算机可读介质，旨在解决传统的滤波过程的输入仅限于一个颜色分量的重建样本，而输出应用于一个颜色分量，从而影响滤波性能的问题。在一些示例中，视频解码的方法包括：生成块的第一重建样本；将滤波器应用于所述块的第一重建样本的多个颜色分量，以确定要应用于一个或多个颜色分量的偏移；以及基于用于所述一个或多个颜色分量的所述偏移和所述块的第一重建样本，生成所述块的第二重建样本。在一些示例中，视频解码的装置包括：第一生成模块，用于生成块的第一重建样本；应用模块，用于将滤波器应用于所述块的第一重建样本的多个颜色分量，以确定要应用于一个或多个颜色分量的偏移；以及第二生成模块，用于基于用于所述一个或多个颜色分量的所述偏移和所述块的第一重建样本，生成所述块的第二重建样本。本申请的实施例还提供了一种视频解码的设备，包括：一个或多个处理器和一个或多个存储器，所述一个或多个存储器中存储有至少一条程序指令，所述至少一条程序指令由所述一个或多个处理器加载并执行，以实现所述视频解码的方法。本申请的实施例还提供了一种非易失性计算机可读介质，用于存储程序指令，当所述程序指令被用于视频编码/解码的计算机执行时，使得所述计算机执行所述视频解码的方法。在本申请实施例中，将多个颜色分量的重建样本作为滤波过程的输入，并且滤波过程的输出可以应用于多个颜色分量，从而提高滤波性能。附图说明根据以下详细描述和附图，所公开的主题的其他特征、性质和各种优点将进一步明确，其中：图1A示出了帧内预测模式的示例性子集的示意图；图1B示出了示例性帧内预测方向的示意图；图2示出了一个示例中的当前块及其周围的空间合并候选的示意图；图3示出了根据实施例的通信系统的简化框图的示意图；图4示出了根据另一实施例的通信系统的简化框图的示意图；图5示出了根据实施例的解码器的简化框图的示意图；图6示出了根据实施例的编码器的简化框图的示意图；图7示出了根据另一实施例的编码器的框图；图8示出了根据另一实施例的解码器的框图；图9示出了根据本申请实施例的滤波器形状的示例；图10A-10D示出了根据本申请实施例的用于计算梯度的子采样位置的示例；图11A-11B示出了根据本申请实施例的虚拟边界滤波过程的示例；图12A-12F示出了根据本申请实施例的在虚拟边界处的对称填充操作的示例；图13示出了根据本申请一些实施例的图片的分区示例；图14示出了一些示例中的四叉树分割图案；图15示出了根据本申请实施例的交叉分量滤波器；图16示出了根据本申请实施例的滤波器形状的示例；图17示出了根据本申请一些实施例的用于交叉分量滤波器的语法示例；图18A-18B示出了根据本申请实施例的色度样本相对于亮度样本的示例性位置；图19示出了根据本申请实施例的方向搜索的示例；图20示出了一些示例中的子空间投影的示例；图21示出了根据本申请一些实施例的滤波器架构的框图；图22-31示出了根据本申请一些实施例的示例性滤波路径的示意图；图32示出了根据本申请实施例的概述过程的流程图；图33是根据实施例的计算机系统的示意图。具体实施方式H.264引入了一种帧内预测模式，其在H.265中进行了改进，且在诸如联合开发模型(JEM)/通用视频编码(VVC)/基准集合(BMS)的更新的编码技术中进一步被改进。通过使用属于已经可用的样本的相邻样本值本文档来自技高网...

【技术保护点】
1.一种视频解码的方法，其特征在于，包括：/n生成块的第一重建样本；/n将滤波器应用于所述块的第一重建样本的多个颜色分量，以确定要应用于一个或多个颜色分量的偏移；以及/n基于用于所述一个或多个颜色分量的所述偏移和所述块的第一重建样本，生成所述块的第二重建样本。/n

【技术特征摘要】
20200221 US 62/979,899;20201111 US 17/095,6221.一种视频解码的方法，其特征在于，包括：
生成块的第一重建样本；
将滤波器应用于所述块的第一重建样本的多个颜色分量，以确定要应用于一个或多个颜色分量的偏移；以及
基于用于所述一个或多个颜色分量的所述偏移和所述块的第一重建样本，生成所述块的第二重建样本。


2.根据权利要求1所述的方法，其特征在于，所述将滤波器应用于所述块的第一重建样本的多个颜色分量，以确定要应用于一个或多个颜色分量的偏移包括：
将所述滤波器应用于所述块的第一重建样本的三个颜色分量，以确定分别用于所述三个颜色分量三个偏移信号。


3.根据权利要求1所述的方法，其特征在于，所述将滤波器应用于所述块的第一重建样本的多个颜色分量，以确定要应用于一个或多个颜色分量的偏移包括：
将所述滤波器应用于所述块的第一重建样本的三个颜色分量，以确定要应用于所述三个颜色分量中的每一个的偏移。


4.根据权利要求1所述的方法，其特征在于，所述第一重建样本的所述多个颜色分量中的至少一个不同于所述一个或多个颜色分量。


5.根据权利要求1所述的方法，其特征在于，所述将滤波器应用于所述块的第一重建样本的多个颜色分量包括以下至少一项：
将具有不同滤波形状的所述滤波器应用于所述第一重建样本的所述多个颜色分量中的不同颜色分量；以及
将具有不同滤波尺寸的所述滤波器应用于所述第一重建样本的所述多个颜色分量中的不同颜色分量。


6.根据权利要求1所述的方法，其特征在于，所述基于用于所述一个或多个颜色分量的所述偏移和所述块的第一重建样本，生成所述块的第二重建样本包括：
将所述第一重建样本与用于所述一个或多个颜色分量的所述偏移组合，以生成所述第二重建样本。


7.根据权利要求6所述的方法，其特征在于，所述第一重建样本由以下至少一项生成：
解块滤波器之前的处理模块；
解块滤波器；
约束定向增强滤波器；以及
环路恢复滤波器。


8.根据权利要求1所述的方法，其特征在于，所述基于用于所述一个或多个颜色分量的所述偏移和所述块的第一重建样本，生成所述块的第二重建样本包括：
基于所述第一重建样本生成中间重建样本；以及
将所述中间重建样本与用于所述一个或多个颜...

【专利技术属性】
技术研发人员：杜祎鑫，赵欣，刘杉，
申请(专利权)人：腾讯美国有限责任公司，
类型：发明
国别省市：美国;US