视频比特流中的嵌套的和非嵌套的SEI消息制造技术

描述了用于编码、解码或转码数字视频的系统、方法和装置。视频处理的一种示例方法包括视频和包括多层的视频的比特流之间的转换，其中，比特流包括与特定输出层集OLS或特定层的访问单元AU或解码单元DU相关联的多个补充增强信息SEI消息，其中，包括不同于可缩放嵌套类型的消息类型的多个SEI消息基于格式规则，并且其中格式规则规定由于多个SEI消息与特定OLS或特定层的AU或DU相关联而导致多个SEI消息中的每一个具有相同的SEI有效载荷内容。息中的每一个具有相同的SEI有效载荷内容。息中的每一个具有相同的SEI有效载荷内容。

【技术实现步骤摘要】
【国外来华专利技术】视频比特流中的嵌套的和非嵌套的SEI消息
[0001]相关申请的交叉引用
[0002]根据巴黎公约适用的专利法和/或规则，提出本申请是为了及时要求2020年9月25日提交的国际专利申请No.PCT/CN2020/117596的优先权和权益。出于法律规定的所有目的，上述申请的全部公开内容通过引用并入作为本申请的公开内容的部分。


[0003]该专利文档涉及文件格式的数字音频视频媒体信息的生成、存储和消费。

技术介绍

[0004]数字视频占互联网和其他数字通信网络上最大的带宽使用。随着能够接收和显示视频的连接用户设备数量的增加，预计数字视频使用的带宽需求将继续增长。

技术实现思路

[0005]本文档公开了可由视频编码器和解码器使用以根据文件格式处理视频或图像的编解码表示的技术。
[0006]在一个示例方面，公开了一种视频处理方法。该方法包括：执行视频和包括多层的视频的比特流之间的转换，其中比特流包括与特定输出层集OLS或特定层的访问单元AU或解码单元DU相关联的多个补充增强信息SEI消息，其中包括不同于可缩放嵌套类型的消息类型的多个SEI消息基于格式规则，并且其中格式规则规定由于多个SEI消息与特定OLS或特定层的AU或DU相关联，多个SEI消息中的每一个具有相同的SEI有效载荷内容。
[0007]在另一个示例方面，公开了另一种视频处理方法。该方法包括：执行包括当前块的视频和视频的比特流之间的转换，其中比特流符合格式规则，并且其中，格式规则规定，由于从比特流中排除语法字段而对比特流的约束，语法字段指示与包括当前块的当前图片或包括当前块的当前访问单元相关联的图片顺序计数。
[0008]在又一个示例方面，公开了另一种视频处理方法。该方法包括：执行视频和视频的比特流之间的转换，其中比特流符合由规则定义的子比特流提取过程的顺序，规则规定(a)子比特流提取过程排除从输出比特流中移除满足条件的所有补充增强信息(SEI)网络抽象层(NAL)单元的操作，或者(b)子比特流提取过程的顺序包括在从输出比特流中移除SEI NAL单元之前用替换参数集替换参数集。
[0009]在又一示例方面，公开了一种视频编码器装置。视频编码器包括被配置为实现上述方法的处理器。
[0010]在又一示例方面，公开了一种视频解码器装置。视频解码器包括被配置为实现上述方法的处理器。
[0011]在又一示例方面，公开了一种其上存储有代码的计算机可读介质。该代码以处理器可执行代码的形式体现了这里描述的方法之一。
[0012]在又一示例方面，公开了一种其上存储有比特流的计算机可读介质。使用本文档
中描述的方法生成或处理比特流。
[0013]这些和其他特征在整个本文档中都进行了描述。
附图说明
[0014]图1显示了分割为18个片、24个条带和24个子图片的图片。
[0015]图2显示了典型的基于子图片的视口相关的360
°
视频传输方案。
[0016]图3显示了从包含两个子图片和四个条带的比特流中提取一个子图片的示例。
[0017]图4为示例视频处理系统的框图。
[0018]图5为视频处理装置的框图。
[0019]图6是图示根据本公开的一些实施例的视频编解码系统的框图。
[0020]图7是图示根据所公开技术的一些实施例的编码器的框图。
[0021]图8是图示根据所公开技术的一些实施例的解码器的框图。
[0022]图9
‑
11是根据所公开技术的一些实施例的视频处理的示例方法的流程图。
具体实施方式
[0023]本文档中使用章节标题是为了易于理解并且不将各章节中公开的技术和实施例的适用性仅限制于该章节。此外，在一些描述中使用H.266术语仅仅是为了易于理解，而不是为了限制所公开技术的范围。因此，本文描述的技术也适用于其他视频编解码器协议和设计。
[0024]1.初步讨论
[0025]本文档涉及视频编解码技术。具体地说，它涉及图像顺序计数(POC)、补充增强信息(SEI)和子图片子比特流提取。这些思想可以单独或以各种组合应用于任何视频编解码标准或非标准视频编解码器，例如最近完成的多功能视频编解码(VVC)。
[0026]2.缩略语
[0027]ACT
ꢀꢀꢀꢀꢀ
自适应颜色变换
[0028]ALF
ꢀꢀꢀꢀꢀ
自适应环路滤波器
[0029]AMVR
ꢀꢀꢀꢀ
自适应运动矢量精度
[0030]APS
ꢀꢀꢀꢀꢀ
自适应参数集
[0031]AU
ꢀꢀꢀꢀꢀꢀ
访问单元
[0032]AUD
ꢀꢀꢀꢀꢀ
访问单元定界符
[0033]AVC
ꢀꢀꢀꢀꢀ
高级视频编解码(Rec.ITU
‑
T H.264|ISO/IEC 14496
‑
10)
[0034]B
ꢀꢀꢀꢀꢀꢀꢀ
双向预测
[0035]BCW
ꢀꢀꢀꢀꢀ
CU级别双向加权预测
[0036]BDOF
ꢀꢀꢀꢀ
双向光流
[0037]BDPCM
ꢀꢀꢀ
基于块的增量脉冲编解码调制
[0038]BP
ꢀꢀꢀꢀꢀꢀ
缓冲期
[0039]CABAC
ꢀꢀꢀ
基于上下文的自适应二元算术编解码
[0040]CB
ꢀꢀꢀꢀꢀꢀ
编解码块
[0041]CBR
ꢀꢀꢀꢀꢀ
恒定比特率
[0042]CCALF
ꢀꢀꢀ
跨分量自适应环路滤波器
[0043]CLVS
ꢀꢀꢀꢀ
编解码层视频序列
[0044]CLVSS
ꢀꢀꢀ
编解码层视频序列开始
[0045]CPB
ꢀꢀꢀꢀꢀ
编解码图片缓冲器
[0046]CRA
ꢀꢀꢀꢀꢀ
清洁随机访问
[0047]CRC
ꢀꢀꢀꢀꢀ
循环冗余校验
[0048]CTB
ꢀꢀꢀꢀꢀ
编解码树块
[0049]CTU
ꢀꢀꢀꢀꢀ
编解码树单元
[0050]CU
ꢀꢀꢀꢀꢀꢀ
编解码单元
[0051]CVS
ꢀꢀꢀꢀꢀ
编解码视频序列
[0052]CVSS
ꢀꢀꢀꢀ
编解码视频序列开始
[0053]DPB
ꢀꢀꢀꢀꢀ
解码图片缓冲器
[0054]DCI
ꢀꢀꢀꢀꢀ
解码能力信息
[0055]DRAP
ꢀꢀꢀꢀ
依赖随机访问点
[0056]DU
ꢀꢀꢀꢀꢀꢀ
解码单元<本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种处理视频数据的方法，包括：执行包括多层的视频和所述视频的比特流之间的转换，其中，所述比特流包括与特定输出层集OLS或特定层的访问单元AU或解码单元DU相关联的多个补充增强信息SEI消息，其中，包括不同于可缩放嵌套类型的消息类型的所述多个SEI消息基于格式规则，并且其中，所述格式规则规定，由于所述多个SEI消息与所述特定OLS或所述特定层的AU或DU相关联，所述多个SEI消息中的每一个具有相同的SEI有效载荷内容。2.根据权利要求1所述的方法，其中，所述可缩放嵌套SEI消息的有效载荷类型的值等于133。3.根据权利要求1所述的方法，其中，所述多个SEI消息包括至少一个包含在可缩放嵌套SEI消息中的SEI消息和至少一个不包含在可缩放嵌套SEI消息中的SEI消息。4.一种处理视频数据的方法，包括：执行包括当前块的视频和所述视频的比特流之间的转换，其中，所述比特流符合格式规则，并且其中，所述格式规则规定，由于从所述比特流中排除语法字段而对所述比特流的约束，所述语法字段指示与包括所述当前块的当前图片或包括所述当前块的当前访问单元AU相关联的图片顺序计数POC。5.根据权利要求4所述的方法，其中，所述语法字段指示与所述当前图片和所述当前AU相关联的所述POC的所述语法字段被排除，并且其中，所述约束规定在所述当前AU中没有属于当前层的参考层的图片。6.根据权利要求4或5所述的方法，其中，所述约束规定按解码顺序的前一个图片不是随机访问跳过前导RASL图...

【专利技术属性】
技术研发人员：王业奎，邓智玭，
申请(专利权)人：字节跳动有限公司，
类型：发明
国别省市：