在视频比特流中依赖随机访问点指示制造技术

描述了一种在视频比特流中依赖随机访问点指示、编码、解码或转码视觉媒体数据的系统、方法和装置。一种处理视觉媒体数据的示例方法包括：根据格式规则执行视觉媒体数据和视觉媒体数据的比特流之间的转换，其中格式规则规定与第一类型的补充增强信息(SEI)消息不同的第二类型的SEI消息是否以及如何被包括在比特流中，并且其中，第一类型的SEI消息和第二类型的SEI消息分别指示第一类型的依赖随机访问点(DRAP)图片和第二类型的DRAP图片。(DRAP)图片和第二类型的DRAP图片。(DRAP)图片和第二类型的DRAP图片。

【技术实现步骤摘要】
在视频比特流中依赖随机访问点指示
[0001]相关申请的交叉引用
[0002]根据适用的专利法和/或符合巴黎公约的规则，本申请是为了及时要求2020年9月29日提交的美国临时专利申请No.63/084,953的优先权和利益。出于根据法律的所有目的，前述申请的全部公开内容通过引用而并入作为本申请的公开内容的一部分。


[0003]本专利文档涉及数字视频编解码技术，包括视频编码、转码或解码。

技术介绍

[0004]数字视频占互联网和其他数字通信网络上最大的带宽使用。随着能够接收和显示视频的连接用户设备的数量增加，预期数字视频使用的带宽需求将继续增长。

技术实现思路

[0005]本文档公开了可以由视频编码器和解码器用于根据文件格式处理视频或图像的编解码表示的技术。
[0006]在一个示例方面，公开了一种处理视觉媒体数据的方法。该方法包括：根据格式规则执行在视觉媒体数据和包括多层的视觉媒体数据的比特流之间的转换；其中，所述格式规则规定补充增强信息(SEI)消息被包括在比特流中，以指示允许解码器解码1)与SEI消息相关联的层中的依赖随机访问点(DRAP)图片和/或2)包括在该层中并且按照解码顺序和输出顺序在DRAP图片之后的图片，而不必解码该层中除了与DRAP图片相关联的帧内随机访问点(IRAP)图片之外的其他图片。
[0007]在另一个示例方面，公开了另一种处理视觉媒体数据的方法。该方法包括：根据格式规则执行在视觉媒体数据和视觉媒体数据的比特流之间的转换，其中，格式规则规定不同于第一类型的补充增强信息(SEI)消息的第二类型的SEI消息是否以及如何被包括在比特流中，并且其中，第一类型的SEI消息和第二类型的SEI消息分别指示第一类型的依赖随机访问点(DRAP)图片和第二类型的DRAP图片。
[0008]在另一个示例方面，公开了另一种处理视觉媒体数据的方法。该方法包括：根据格式规则执行在视觉媒体数据和视觉媒体数据的比特流之间的转换，其中，格式规则规定指代依赖随机访问点(DRAP)图片的补充增强信息(SEI)消息被包括在比特流中，并且其中，格式规则还规定SEI消息包括语法元素，该语法元素指示在与依赖随机访问点(DRAP)图片相同的编解码层视频序列(CLVS)内的帧内随机访问点(IRAP)图片或DRAP图片的数量。
[0009]在又一示例方面，公开了一种视频处理装置。该视频处理装置包括被配置为实施上述方法的处理器。
[0010]在又一示例方面，公开了一种将视觉媒体数据存储到包括一个或多个比特流的文件中的方法。该方法对应于上述方法，并且还包括将一个或多个比特流存储到非暂时性计算机可读记录介质。
[0011]在又一示例方面，公开了一种存储比特流的计算机可读介质。根据上述方法生成比特流。
[0012]在又一示例方面，公开了一种存储比特流的视频处理装置，其中，该视频处理装置被配置为实施上述方法。
[0013]在又一示例方面，公开了一种计算机可读介质，在该计算机可读介质上，比特流符合根据上述方法生成的文件格式。
[0014]贯穿本文档描述了这些以及其他特征。
附图说明
[0015]图1是示例视频处理系统的框图。
[0016]图2是视频处理装置的框图。
[0017]图3是视频处理的示例方法的流程图。
[0018]图4是示出根据本公开的一些实施例的视频编解码系统的框图。
[0019]图5是示出根据本公开的一些实施例的编码器的框图。
[0020]图6是示出根据本公开的一些实施例的解码器的框图。
[0021]图7至图9是基于所公开技术的一些实施例的处理视觉媒体数据的示例方法的流程图。
具体实施方式
[0022]为了便于理解，在本文档中使用了章节标题，并且不将每个章节中公开的技术和实施例的适用性仅限于该章节。此外，在一些描述中使用H.266术语仅仅是为了便于理解，而不是为了限制所公开的技术的范围。这样，本文描述的技术也适用于其他视频编解码器协议和设计。在本文档中，相对于VVC规范的当前草案，通过指示删除文本的删除线和指示添加文本的突出显示(包括粗体斜体)来示出对文本的编辑改变。
[0023]1.初步讨论
[0024]本文档涉及视频编解码技术。具体地，本文档涉及基于补充增强信息(SEI)消息的视频编解码中对跨随机访问点(RAP)参考的支持。这些思想可以单独或以各种组合的方式应用于任何视频编解码标准或非标准视频编解码器，例如最近定稿的通用视频编解码(VVC)。
[0025]2.缩写
[0026]ACT
ꢀꢀꢀꢀ
自适应颜色变换
[0027]ALF
ꢀꢀꢀꢀ
自适应环路滤波器
[0028]AMVR
ꢀꢀꢀ
自适应运动矢量分辨率
[0029]APS
ꢀꢀꢀꢀ
自适应参数集
[0030]AU
ꢀꢀꢀꢀꢀ
访问单元
[0031]AUD
ꢀꢀꢀꢀ
访问单元分割符
[0032]AVC
ꢀꢀꢀꢀ
高级视频编解码(Rec.ITU
‑
T H.264|ISO/IEC 14496
‑
10)
[0033]B
ꢀꢀꢀꢀꢀꢀ
双向预测
[0034]BCW
ꢀꢀꢀꢀ
带有CU级别权重的双向预测
[0035]BDOF
ꢀꢀꢀ
双向光流
[0036]BDPCM
ꢀꢀ
基于块的增量脉冲编解码调制
[0037]BP
ꢀꢀꢀꢀꢀ
缓冲时段
[0038]CABAC
ꢀꢀ
基于上下文的自适应二进制算术编解码
[0039]CB
ꢀꢀꢀꢀꢀ
编解码块
[0040]CBR
ꢀꢀꢀꢀ
恒定比特率
[0041]CCALF
ꢀꢀ
跨分量自适应环路滤波器
[0042]CLVS
ꢀꢀꢀ
编解码层视频序列
[0043]CLVSS
ꢀꢀ
编解码层视频序列开始
[0044]CPB
ꢀꢀꢀꢀ
编解码图片缓冲区
[0045]CRA
ꢀꢀꢀꢀ
干净随机访问（clean random access）
[0046]CRC
ꢀꢀꢀꢀ
循环冗余校验
[0047]CTB
ꢀꢀꢀꢀ
编解码树块
[0048]CTU
ꢀꢀꢀꢀ
编解码树单元
[0049]CU
ꢀꢀꢀꢀꢀ
编解码单元
[0050]CVS
ꢀꢀꢀꢀ
编解码视频序列
[0051]CVSS
ꢀꢀꢀ
编解码视频序列起始
[0052]DPB
ꢀꢀꢀꢀ<本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种处理视觉媒体数据的方法，包括：根据格式规则执行视觉媒体数据和所述视觉媒体数据的比特流之间的转换，其中，所述格式规则规定与第一类型的补充增强信息(SEI)消息不同的第二类型的SEI消息是否以及如何被包括在所述比特流中，并且其中，所述第一类型的SEI消息和所述第二类型的SEI消息分别指示第一类型的依赖随机访问点(DRAP)图片和第二类型的DRAP图片。2.根据权利要求1所述的方法，其中，所述格式规则还规定所述第二类型的SEI消息包括随机访问点(RAP)图片标识符。3.根据权利要求1的方法，其中，对于所述第一类型的DRAP图片或所述第二类型的DRAP图片，随机访问点(RAP)图片标识符被包括在所述比特流中。4.根据权利要求3的方法，其中，所述RAP图片标识符被编解码为u(16)，所述u(16)是使用16位的无符号整数，或者所述RAP图片标识符被编解码为ue(v)，所述ue(v)是使用指数Golomb码的无符号整数。5.根据权利要求1所述的方法，其中，所述格式规则还规定所述第一类型的SEI消息或所述第二类型的SEI消息包括关于所述第一类型的DRAP图片或所述第二类型的DRAP图片的图片顺序计数(POC)值的信息。6.根据权利要求1的方法，其中，所述格式规则还规定每个IRAP图片或DRAP图片与随机访问点(RAP)图片标识符相关联。7.根据权利要求6的方法，其中，所述格式规则还规定所述IRAP图片的RAP图片标识符的值被推断为等于0。8.根据权利要求6的方法，其中，所述格式规则还规定在编解码层视频序列(CLVS)内任意两个IRAP图片或DRAP图片的RAP图片标识符的值彼此不同。9.根据权利要求6的方法，其中，所述格式规则还规定在编解码层视频序列(CLVS)内的IRAP图片或DRAP图片的RAP图片标识符的值按照所述IRAP图片或DRAP图片的解码顺序递增。10.根据权利要求6的方法，其中，所述格式规则还规定所述DRAP图片的RAP图片标识符的值比在编解码层视频序列(CLVS)内的按照解码顺序的先前IRAP图片或DRAP图片的值大一。11.根据权利要求1
‑
10任一所述的方法，其中，所述转换的执行包括从所述视觉媒体数据生成所述比特流。12.根据权利要求1
‑
10任一所述的方法，其中，所述转换的执行包括从所述比特流重构所述视觉媒体数据。13.一种处理视觉媒体数据的装置，包括处理器和其上具有指令的非暂时性存储器，其中，所述指令在由所述处理器执行时使得所述处理器：根据格式规则执行视觉媒体数据和所述视觉媒体数据的比特流之间的转换，其中，所述格式规则规定与第一类型的补充增强信息(SEI)消息不同的第二类型的SEI消息是否以及如何被包括在所述比特流中，并且其中，所述第一类型的SEI消息和所述第二类型的SEI消息分别指示第一类型的依赖随机访问点(DRAP)图片和第二类型的DRAP图片。
14.根据权利要求13所述的装置，其中，所述格式规则还规定所述第二类型的SEI消息包括随机访问点(RAP)图片标识符。15.根据权利要求13所述的装置，其中...

【专利技术属性】
技术研发人员：王业奎，
申请(专利权)人：脸萌有限公司，
类型：发明
国别省市：