使用上采样的基于矩阵的帧内预测制造技术

描述了用于数字视频编解码的设备、系统和方法，包括用于视频编解码的基于矩阵的帧内预测方法。在代表性方面，一种用于视频处理的方法包括使用基于矩阵的帧内预测(MIP)模式来执行视频的当前视频块和当前视频块的比特流表示之间的转换，其中在该MIP模式下，当前视频块的预测块通过对视频的先前编解码样点执行边界下采样操作、接着执行矩阵矢量乘法运算、并且接着执行上采样操作来确定，其中以固定顺序在垂直方向和水平方向上对从矩阵矢量乘法运算获得的样点执行上采样操作。算获得的样点执行上采样操作。算获得的样点执行上采样操作。

【技术实现步骤摘要】
【国外来华专利技术】使用上采样的基于矩阵的帧内预测
[0001]相关申请的交叉引用
[0002]根据适用的专利法和/或依据巴黎公约的规则，本申请旨在及时要求于2019年5月22日提交的国际专利申请No.PCT/CN2019/087987的优先权和利益。出于法律规定的所有目的，前述申请的全部公开通过引用并入作为本申请的公开的一部分。


[0003]本专利文档涉及视频编解码技术、设备和系统。

技术介绍

[0004]尽管视频压缩有所进步，数字视频在互联网和其他数字通信网络上仍占最大的带宽使用量。随着能够接收和显示视频的连接用户设备的数量增加，预计数字视频使用所需的带宽将继续增长。

技术实现思路

[0005]描述了与数字视频编解码相关的设备、系统和方法，特别是用于视频编解码的基于矩阵的帧内预测方法。所描述的方法可以应用于现有的视频编解码标准(例如，高效视频编解码(High Efficiency Video Coding，HEVC))和未来的视频编解码标准(例如，多功能视频编解码(Versatile Video Coding，VVC))或编解码器。
[0006]视频处理的第一示例方法包括使用基于矩阵的帧内预测(MIP)模式来执行视频的当前视频块和当前视频块的比特流表示之间的转换，其中在该MIP模式下，当前视频块的预测块通过对视频的先前编解码样点执行边界下采样操作、接着执行矩阵矢量乘法运算、并且接着执行上采样操作来确定，其中，以固定顺序在垂直方向和水平方向上对从矩阵矢量乘法运算获得的样点执行上采样操作。
>[0007]视频处理的第二示例方法包括使用基于矩阵的帧内预测(MIP)模式来执行视频的当前视频块和当前视频块的比特流表示之间的转换，其中在该MIP模式下，当前视频块的预测块通过对视频的先前编解码样点执行边界下采样操作、接着执行矩阵矢量乘法运算、并且接着执行上采样操作来确定，其中，该转换包括在上采样操作之前执行转置操作，其中，该转置操作对通过执行边界下采样操作和矩阵矢量乘法运算而获得的预测块的第一样点集合进行转置，并且其中，转置操作根据预测块的维度来执行。
[0008]视频处理的第三示例方法包括使用基于矩阵的帧内预测(MIP)模式来执行视频的当前视频块和当前视频块的比特流表示之间的转换，其中在该MIP模式下，当前视频块的预测块通过对视频的先前编解码样点执行边界下采样操作、接着执行矩阵矢量乘法运算、并且接着执行上采样操作来确定，其中，上采样操作通过根据规则选择和使用除了双线性滤波器的插值滤波器来执行。
[0009]在另一代表性方面，所公开的技术可以用于提供一种用于视频处理的方法。该示例性方法包括确定使用仿射线性加权帧内预测(ALWIP)模式对当前视频块进行编解码，基
于该确定，基于非ALWIP帧内模式的最可能模式(MPM)列表的至少一部分来构建ALWIP模式的MPM列表的至少一部分，以及基于ALWIP模式的MPM列表，执行当前视频块和当前视频块的比特流表示之间的转换。
[0010]在另一代表性方面，所公开的技术可以用于提供一种用于视频处理的方法。该示例性方法包括确定使用仿射线性加权帧内预测(ALWIP)模式对当前视频块的亮度分量进行编解码，基于该确定来推断色度帧内模式，以及基于色度帧内模式，执行当前视频块和当前视频块的比特流表示之间的转换。
[0011]在又一代表性方面，所公开的技术可以用于提供一种用于视频处理的方法。该示例性方法包括确定使用仿射线性加权帧内预测(ALWIP)模式对当前视频块进行编解码，以及基于该确定，执行当前视频块和当前视频块的比特流表示之间的转换。
[0012]在又一代表性方面，所公开的技术可以用于提供一种用于视频处理的方法。该示例性方法包括确定使用不同于仿射线性加权帧内预测(ALWIP)模式的编解码模式对当前视频块进行编解码，以及基于该确定，执行当前视频块和当前视频块的比特流表示之间的转换。
[0013]在又一代表性方面，所公开的技术可以用于提供一种用于视频处理的方法。该示例性方法包括使用仿射线性加权帧内预测(ALWIP)模式为当前视频块生成第一预测，基于第一预测使用位置依赖帧内预测组合(PDPC)生成第二预测，以及基于第二预测，执行当前视频块和当前视频块的比特流表示之间的转换。
[0014]在又一代表性方面，所公开的技术可以用于提供一种用于视频处理的方法。该示例性方法包括确定使用仿射线性加权帧内预测(ALWIP)模式对当前视频块进行编解码，基于ALWIP模式来预测当前视频块的多个子块，以及基于该预测，执行当前视频块和当前视频块的比特流表示之间的转换。
[0015]在又一代表性方面，公开了一种视频处理方法。该方法包括基于当前视频块的规则，确定指示在当前视频块和当前视频块的比特流表示之间的转换期间使用仿射线性加权帧内预测(ALWIP)模式的标志的上下文，基于ALWIP模式，预测当前视频块的多个子块，以及基于该预测，执行当前视频块和当前视频块的比特流表示之间的转换。
[0016]在又一代表性方面，公开了一种视频处理方法。该方法包括确定使用仿射线性加权帧内预测(ALWIP)模式对当前视频块进行编解码，以及在当前视频块和当前视频块的比特流表示之间的转换期间，在与ALWIP模式相关联的上采样过程中对当前视频块的样点执行至少两个滤波阶段，其中，至少两个滤波阶段中的第一滤波阶段中的样点的第一精度不同于至少两个滤波阶段中的第二滤波阶段中的样点的第二精度。
[0017]在又一方面，公开了一种视频处理方法。该方法包括确定使用仿射线性加权帧内预测(ALWIP)模式对当前视频块进行编解码，在当前视频块和当前视频块的比特流表示之间的转换期间，在与ALWIP模式相关联的上采样过程中对当前视频块的样点执行至少两个滤波阶段，其中，对于执行垂直上采样和水平上采样两者的情况，上采样过程以固定顺序被执行。
[0018]在又一方面，公开了一种视频处理方法。该方法包括确定使用仿射线性加权帧内预测(ALWIP)模式对当前视频块进行编解码，在当前视频块和当前视频块的比特流表示之间的转换期间，在与ALWIP模式相关联的上采样过程中对当前视频块的样点执行至少两个
滤波阶段，其中，该转换包括在上采样过程之前执行转置操作。
[0019]在又一代表性方面，上述方法以处理器可执行代码的形式体现，并存储在计算机可读程序介质中。
[0020]在又一代表性方面，公开了一种被配置或可操作来执行上述方法的设备。该设备可以包括被编程为实施该方法的处理器。
[0021]在又一代表性方面，一种视频解码器装置可以实施本文描述的方法。
[0022]在附图、说明书和权利要求书中更详细地描述了所公开的技术的上述和其他方面和特征。
附图说明
[0023]图1示出了33个帧内预测方向的示例。
[0024]图2示出了67种帧内预测模式的示例。
[0025]图3示出了用于推导线性模型的权重的样点位置的示例。
[0026]图4示出了与本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种用于视频处理的方法，包括：使用基于矩阵的帧内预测(MIP)模式来执行视频的当前视频块和当前视频块的比特流表示之间的转换，其中在所述MIP模式下，当前视频块的预测块通过对视频的先前编解码样点执行边界下采样操作、接着执行矩阵矢量乘法运算、并且接着执行上采样操作来确定，其中，以固定顺序在垂直方向和水平方向上对从矩阵矢量乘法运算获得的样点执行上采样操作。2.根据权利要求1所述的方法，其中，所述固定顺序包括首先在水平方向上执行上采样操作、接着在垂直方向上执行上采样操作。3.根据权利要求1所述的方法，其中，所述固定顺序包括首先在垂直方向上执行上采样操作、接着在水平方向上执行上采样操作。4.一种用于视频处理的方法，包括：使用基于矩阵的帧内预测(MIP)模式来执行视频的当前视频块和当前视频块的比特流表示之间的转换，其中在所述MIP模式下，当前视频块的预测块通过对视频的先前编解码样点执行边界下采样操作、接着执行矩阵矢量乘法运算、并且接着执行上采样操作来确定，其中，所述转换包括在上采样操作之前执行转置操作，其中，所述转置操作对通过执行边界下采样操作和矩阵矢量乘法运算而获得的预测块的第一样点集合进行转置，并且其中，所述转置操作根据预测块的维度来执行。5.根据权利要求4所述的方法，其中，所述转置操作对预测块的第一样点集合进行转置，并且其中，所述转置操作将宽度为第一值且高度为第二值的预测块转换为宽度为第二值且高度为第一值的预测块。6.根据权利要求5所述的方法，还包括：执行另一转置操作，其中所述另一转置操作对在上采样操作之后获得的预测块的第二样点集合进行转置，其中，所述另一转置操作将宽度为第二值且高度为第一值的预测块转换为宽度为第一值且高度为第二值的预测块。7.一种用于视频处理的方法，包括：使用基于矩阵的帧内预测(MIP)模式来执行视频的当前视频块和当前视频块的比特流表示之间的转换，其中在所述MIP模式下，当前视频块的预测块通过对视频的先前编解码样点执行边界下采样操作、接着执行矩阵矢量乘法运算、并且接着执行上采样操作来确定，其中，所述上采样操作通过根据规则选择和使用除了双线性滤波器的插值滤波器来执行。8.根据权利要求7所述的方法，其中，所述规则指定插值滤波...

【专利技术属性】
技术研发人员：邓智玭，张凯，张莉，刘鸿彬，许继征，
申请(专利权)人：字节跳动有限公司，
类型：发明
国别省市：