交织预测和其他编解码工具之间的交互制造技术

提供了一种视频处理的方法，包括：对于视频的当前视频块与视频的编解码表示之间的转换，确定当前视频块的至少一个子块的细化运动信息；以及使用细化运动信息进行转换，其中基于交织预测工具生成细化运动信息，在交织预测工具中，使用多个样式生成当前视频块的分割的运动信息，并且其中当前视频块的细化运动信息基于是否满足的条件而用于后续处理或选择性储存。储存。储存。

【技术实现步骤摘要】
【国外来华专利技术】交织预测和其他编解码工具之间的交互
[0001]相关申请的交叉引用
[0002]根据巴黎公约的适用专利法和/或细则，提出本申请是为了及时要求于2019年1月13日提交的国际专利申请PCT/CN2019/071507以及2019年1月14日提交的国际专利申请PCT/CN2019/071576的优先权和权益。出于美国法律的所有目的，上述申请的全部公开内容通过引用并入本文作为本申请公开的一部分。


[0003]本专利文件涉及视频编解码技术、装置和系统。

技术介绍

[0004]运动补偿(MC)是视频处理中的技术，其用于在给定之前帧和/或未来帧的情况下，通过考虑相机的运动和/或视频中的对象而预测视频中的帧。运动补偿可用于视频数据的编码以用于视频压缩。

技术实现思路

[0005]本文件公开了涉及视频运动补偿中的基于子块的运动预测的方法、系统和装置。
[0006]在一个代表性方面中，公开了视频处理的方法。该方法包含：为属于视频的当前视频块的第一细分样式的子块的第一集合导出一个或多个运动矢量；以及基于一个或多个运动矢量，进行当前视频块和视频的编解码表示之间的转换。
[0007]在另一个代表性方面中，公开了视频处理的方法。该方法包含：细分第一颜色分量的视频块以获得第一颜色分量的第一集合子块；细分第二颜色分量的对应视频块以获得第二颜色分量的子块的第二集合；基于子块的第二集合的一个或多个运动矢量，导出子块的第一集合的一个或多个运动矢量；以及基于子块第一集合和子块的第二集合的一个或多个运动矢量，进行视频块和视频的编解码表示之间的转换。
[0008]在另一个代表性方面中，公开了视频处理的方法。该方法包含：对于视频的当前视频块和视频的比特流表示之间的转换，根据依据当前视频块的高度(H)或宽度(W)的多个细分样式将当前视频块细分为分割；以及使用多个分割的交织预测进行转换。
[0009]在另一个代表性方面中，公开了视频处理的方法。该方法包含：确定对视频的当前视频块应用预测，该预测包含根据细分样式将当前视频块细分为子块；确定应用位移位以生成当前视频块的子块上的预测块；以及进行当前视频块和视频的编解码表示之间的转换。
[0010]在另一个代表性方面中，公开了视频处理的方法。该方法包含：基于视频的当前视频块的特性，确定是否将交织的预测工具用于当前块和视频的编解码表示之间的转换；以及根据所述确定进行转换，其中，一经确定当前视频块的特性不满足条件，通过禁用仿射预测工具和/或交织预测工具的使用来进行转换。
[0011]在另一个代表性方面中，公开了视频处理的方法。该方法包含：基于视频的当前视
频块的特性，确定是否将交织的预测工具用于当前块和视频的编解码表示之间的转换；以及根据所述确定进行转换，其中，一经确定当前视频块的特征满足条件，通过仿射预测工具和/或交织预测工具来进行转换。
[0012]在另一个代表性方面中，公开了视频处理的方法。该方法包含：确定交织预测要被应用于视频的当前视频块；以及基于确定要应用交织预测，对于当前视频块禁用双向预测；以及进行当前视频块和视频的编解码表示之间的转换。
[0013]在另一个代表性方面中，公开了视频处理的方法。该方法包含：对于视频的当前视频块和视频的编解码表示之间的转换，确定当前视频块的至少一个子块的细化运动信息；以及使用细化运动信息进行转换，其中，基于交织预测工具生成细化运动信息，在所述交织预测工具中，使用多个样式生成当前视频块的分割的运动信息，并且其中当前视频块的细化运动信息基于是否满足条件而用于后续处理或选择性存储。
[0014]在另一个代表性方面中，公开了视频处理的方法。该方法包含：确定是否将交织的预测应用于视频的当前视频块；以及基于确定是否将交织预测应用于当前视频块，而确定对当前视频块使用滤波过程；以及基于对滤波过程的使用的确定，而进行当前视频块与视频的编解码表示之间的转换。
[0015]在另一个代表性方面中，公开了视频处理的方法。该方法包含：确定是否将交织的预测应用于视频的当前视频块；以及基于对交织预测的使用的确定来确定是否对当前视频块使用局部照明补偿或加权预测；以及基于对局部照明补偿或加权预测的使用的确定，进行当前视频块与视频的编解码表示之间的转换。
[0016]在另一个代表性方面中，公开了视频处理的方法。该方法包含：确定加权预测应用于视频的当前视频块或当前视频块的子块；以及通过禁用双向光流(BDOF)技术而进行当前视频块和视频的编解码表示之间的转换。
[0017]在另一代表性方面中，公开了一种包括处理器和其上具有指令的非瞬态存储器的设备。由处理器执行指令时，使处理器选择来自视频帧的像素集合以形成块，根据第一样式将块细分为子块的第一集合，基于子块的第一集合生成第一中间预测块，根据第二样式将块细分为子块的第二集合，其中第二集合中的至少一个子块具有与第一集合中的子块不同的大小，基于子块的第二集合生成第二中间预测块，以及基于第一中间预测块和第二中间预测块确定预测块。
[0018]在又一代表性方面中，一种视频处理的方法包含，导出当前视频块的子块的第一集合的一个或多个运动矢量，其中子块的第一集合中的每一个具有第一细分样式，并且基于一个或多个运动矢量来重构当前视频块。
[0019]在又一代表性方面中，本文中所描述的各种技术可以是实施为非瞬态计算机可读介质上储存的计算机程序产品。计算机程序产品包含用于进行本文中所描述的方法的程序代码。
[0020]在又一代表性方面中，视频解码器设备可以实现如本文中所描述的方法。
[0021]以下所附附件、附图以及说明书中提出了一个或多个实现方式的细节。其他特征从说明书和附图以及权利要求将变得清楚。
附图说明
[0022]图1是示出基于子块的预测的示例的示意图。
[0023]图2示出了由两个控制点运动矢量描述的块的仿射运动场的示例。
[0024]图3示出了块的每个子块的仿射运动矢量场的示例。
[0025]图4示出了AF_INTER模式中的块400的运动矢量预测的示例。
[0026]图5A示出了当前编解码单元(CU)的候选块的选择顺序的示例。
[0027]图5B示出了AF_MERGE模式中的当前CU的候选块的另一示例。
[0028]图6示出了CU的可选时域运动矢量预测(ATMVP)运动预测过程的示例。
[0029]图7示出了具有四个子块和相邻块的一个CU的示例。
[0030]图8示出了双向光流(BIO)方法中的示例性光流轨迹。
[0031]图9A示出了块之外的访问位置的示例。
[0032]图9B示出了可以用于避免额外存储器访问和计算的填充区域(padding area)。
[0033]图10示出了帧速率上转换(FRUC)方法中使用的双边匹配的示例。
[0034]图11示出了FRUC方法中使用的模板匹配的示例。
[0035]图12示出了FRUC方法中的本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种视频处理的方法，包括：对于视频的当前视频块与视频的编解码表示之间的转换，确定所述当前视频块的至少一个子块的细化运动信息；以及使用所述细化运动信息进行所述转换，其中基于交织预测工具生成所述细化运动信息，在所述交织预测工具中，使用多个样式生成所述当前视频块的分割的运动信息，并且其中所述当前视频块的细化运动信息基于是否满足条件而被用于后续处理或选择性储存。2.如权利要求1所述的方法，其中所述后续处理是要在所述当前视频块之后转换的后续块的转换。3.如权利要求1所述的方法，其中所述后续处理是所述当前视频块的滤波过程。4.如权利要求1所述的方法，其中基于子块的位置确定是否满足所述条件，所述位置与所述视频中的块、CTU、CTU行、片、条带、片组或图片有关。5.如权利要求1所述的方法，其中基于所述当前视频块或所述当前视频块的相邻视频块中的至少一个的编解码模式确定是否满足所述条件。6.如权利要求1所述的方法，其中基于所述当前视频块的尺寸确定是否满足所述条件。7.如权利要求1所述的方法，其中基于与所述当前视频块相关的图片、条带类型或参考图片列表中的至少一个确定是否满足所述条件。8.一种视频处理的方法，包括：确定交织预测是否应用于视频的当前视频块；基于确定所述交织预测是否应用于所述当前视频块而确定对所述当前视频块使用滤波过程；以及基于对所述滤波过程的使用的确定而进行所述当前视频块与所述视频的编解码表示之间的转换。9.如权利要求8所述的方法，其中所述滤波过程包含解块过程、样点适应性偏移(SAO)滤波或适应性回路滤波。10.如权利要求8所述的方法，还包括：确定与如何应用所述滤波过程相关的参数，并且其中基于所述滤波过程的参数进行所述转换。11.如权利要求8所述的方法，其中在所述边缘在以所述当前视频块的另一细分样式的子块之内的情况下，不在以所述当前视频块的细分样式的两个子块之间的边缘上应用所述滤波过程。12.如权利要求8所述的方法，其中在所述边缘在以所述当前视频块的另一细分样式的子块之内的情况下，所述滤波过程在以所述当前视频块的细分样式的两个子块之间的边缘的较弱级中。13.如权利要求9所述的方法，其中作为所述解块过程中使用的变量bS[xDi][yDj]，β，Δ，或t
C
中的至少一个对于所述边缘具有较小值。14.如权利要求8所述...

【专利技术属性】
技术研发人员：张凯，张莉，刘鸿彬，王悦，
申请(专利权)人：字节跳动有限公司，
类型：发明
国别省市：