交叉随机访问点信令增强制造技术

公开了一种用于处理视频数据的机制。一个或多个随机访问图片(RAP)图片标识符被信令通知用于一个或多个交叉RAP参考(CRR)图片。基于一个或多个RAP图片标识符在视觉媒体数据和比特流之间执行转换。特流之间执行转换。特流之间执行转换。

【技术实现步骤摘要】
【国外来华专利技术】交叉随机访问点信令增强
[0001]相关申请的交叉引用
[0002]本专利申请要求Ye
‑
Kui Wang等人于2021年1月6日提交的、标题为“Signalling Of Cross Random Access Point Referencing In Video Bitstreams And Media Files”的国际申请号PCT/CN2021/070400的权益，在此通过引用将该申请并入。


[0003]本专利文件涉及文件格式的数字音频视频媒体信息的生成、存储和消费。

技术介绍

[0004]数字视频占因特网和其他数字通信网络上使用的最大带宽。随着能够接收和显示视频的连接用户设备数量的增加，数字视频使用的带宽需求可能会继续增长。

技术实现思路

[0005]第一方面涉及一种用于处理视频数据的方法，包括：确定用于一个或多个交叉RAP参考(CRR)图片的一个或多个随机访问图片(RAP)图片标识符；基于一个或多个RAP图片标识符在视觉媒体数据和比特流之间进行转换。
[0006]可选地，在前述方面的任一方面中，该方面的另一实施方式规定一个或多个RAP图片标识符各自被编解码在编解码层视频序列减一(t2drap_rap_id_in_clvs_minus1)字段中。
[0007]可选地，在前述方面的任一方面中，该方面的另一实施方式规定，一个或多个RAP图片标识符各自被包括在类型2依赖随机访问点(DRAP)补充增强信息(SEI)消息中。
[0008]可选地，在前述方面的任一方面中，该方面的另一实施方式规定一个或多个RAP图片标识符中的每一个由t2drap_rap_id_in_clvs_minus1字段的值加一来指定。
[0009]可选地，在前述方面的任一方面中，该方面的另一实施方式规定，用于CRR图片中的每一个的一个或多个RAP图片标识符被设置为大于零的值。
[0010]可选地，在前述方面的任一方面中，该方面的另一实施方式规定CRR图片中的每一个与帧内随机访问点(IRAP)图片相关联，并且其中IRAP图片与为零的RAP图片标识符相关联。
[0011]可选地，在前述方面的任一方面中，该方面的另一实施方式规定IRAP图片的RAP图片标识符被推断为零并且不被信令通知。
[0012]可选地，在前述方面的任一方面中，该方面的另一实施方式规定，对于与同一IRAP图片相关联的CRR图片中的每一个，一个或多个RAP图片标识符是不同的。
[0013]可选地，在前述方面的任一方面中，该方面的另一实施方式规定一个或多个RAP图片标识被表示为RapPicId。
[0014]可选地，在前述方面的任一方面中，该方面的另一实施方式规定仅当类型2DRAP SEI消息中的RAP图片标识符大于零时信令通知类型2DRAP SEI消息中的其他语法元素。
[0015]可选地，在前述方面的任一方面中，该方面的另一实施方式规定，CRR图片被表示为类型2DRAP图片。
[0016]可选地，在前述方面的任一方面中，该方面的另一实施方式规定CRR图片被表示为增强型依赖随机访问点(EDRAP)图片。
[0017]可选地，在前述方面的任一方面中，该方面的另一实施方式规定一个或多个RAP图片标识符各自被包括在SEI消息中。
[0018]可选地，在前述方面的任一方面中，该方面的另一实施方式规定比特流被约束使得与CRR图片在同一层中并且按解码顺序在CRR图片之后的任何图片应当按输出顺序在在同一层中并按解码顺序位于CRR图片之前的任何图片之后。
[0019]可选地，在前述方面的任一方面中，该方面的另一实施方式规定类型2DRAP SEI消息包括以下指示：按解码顺序在CRR图片之后并且按输出顺序在CRR图片之前的图片是否被允许参考按解码顺序位于CRR图片之前的参考图片用于帧间预测。
[0020]可选地，在前述方面的任一方面中，该方面的另一实施方式规定，该指示还指示当参考图片与图片处于同一层时，该图片是否被允许参考参考图片。
[0021]可选地，在前述方面的任一方面中，该方面的另一实施方式规定，该指示为一比特标志。
[0022]可选地，在前述方面的任一方面中，该方面的另一实施方式规定，该指示是t2drap_reserved_zero_13bits字段中的比特。
[0023]可选地，在前述方面的任一方面中，该方面的另一实施方式规定，转换包括根据视觉媒体数据生成比特流。
[0024]可选地，在前述方面的任一方面中，该方面的另一实施方式规定，转换包括解析比特流以获得视觉媒体数据。
[0025]第二方面涉及一种用于处理视频数据的装置，包括处理器和其上具有指令的非暂时性存储器，其中指令在由处理器执行时使处理器执行前述方面中的任一方面的方法。
[0026]第三方面涉及一种非暂时性计算机可读介质，包括供视频编解码设备使用的计算机程序产品，该计算机程序产品包括存储在非暂时性计算机可读介质上的计算机可执行指令，使得当由处理器执行时导致视频编解码设备执行前述方面的任一方面的方法。
[0027]为了清楚起见，前述实施例中的任何一个可以与其他前述实施例中的任何一个或多个组合以创建在本公开的范围内的新实施例。
[0028]从结合附图和权利要求的以下详细描述中将更清楚地理解这些和其他特征。
附图说明
[0029]为了更完整地理解本公开，现在参考以下结合附图和详细描述进行的简要描述，其中相同的附图标记表示相同的部分。
[0030]图1是在使用IRAP图片解码比特流时用于随机访问的示例机制的示意图。
[0031]图2是在使用DRAP图片解码比特流时用于随机访问的示例机制的示意图。
[0032]图3是在使用CRR图片解码比特流时用于随机访问的示例机制的示意图。
[0033]图4是用于信令通知外部比特流以支持基于CRR的随机访问的示例机制的示意图。
[0034]图5是示出当图片按解码顺序在DRAP和/或CRR图片之后并且按输出顺序在DRAP
23008
‑
2的高效视频编解码(HEVC)、假设参考解码器(HRD)、假设流调度器(HSS)、帧内(I)、帧内块复制(IBC)、瞬时解码刷新(IDR)、层间参考图片(ILRP)、帧内随机访问点(IRAP)、低频不可分离变换(LFNST)、最小概率码元(LPS)、最低有效比特(LSB)、长期参考图片(LTRP)、带色度缩放的亮度映射(LMCS)、基于矩阵的帧内预测(MIP)、最可能码元(MPS)、最高有效比特(MSB)、多重变换选择(MTS)、运动矢量预测(MVP)、网络抽象层(NAL)、输出层集(OLS)、操作点(OP)、操作点信息(OPI)、预测(P)、图片标头(PH)、图片顺序计数(POC)、图片参数集(PPS)、采用光流的预测细化(PROF)、图片定时(PT)、图片单元(PU)、量化参数(QP)、随机访问可解本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种用于处理视频数据的方法，包括：确定用于一个或多个交叉随机访问图片(RAP)参考(CRR)图片的一个或多个随机访问图片(RAP)图片标识符；以及基于所述一个或多个RAP图片标识符来执行视觉媒体数据和比特流之间的转换。2.根据权利要求1所述的方法，其中，所述一个或多个RAP图片标识符各自被编解码在编解码层视频序列减一(t2drap_rap_id_in_clvs_minus1)字段中。3.根据权利要求1
‑
2中任一项所述的方法，其中，所述一个或多个RAP图片标识符各自被包括在类型2依赖随机访问点(DRAP)补充增强信息(SEI)消息中。4.根据权利要求1
‑
3中任一项所述的方法，其中，所述一个或多个RAP图片标识符中的每一个由所述t2drap_rap_id_in_clvs_minus1字段的值加一来指定。5.根据权利要求1
‑
4中任一项所述的方法，其中，用于所述CRR图片中的每一个的所述一个或多个RAP图片标识符被设置为大于零的值。6.根据权利要求1
‑
5中任一项所述的方法，其中，所述CRR图片中的每一个与帧内随机访问点(IRAP)图片相关联，并且其中，所述IRAP图片与为零的RAP图片标识符相关联。7.根据权利要求1
‑
6中任一项所述的方法，其中，所述IRAP图片的RAP图片标识符被推断为零并且不被信令通知。8.根据权利要求1
‑
7中任一项所述的方法，其中，对于与同一IRAP图片相关联的所述CRR图片中的每一个，所述一个或多个RAP图片标识符是不同的。9.根据权利要求1
‑
8中任一项所述的方法，其中，所述一个或多个RAP图片标识符被表示为RapPicId。10.根据权利要求1
‑
9中任一项所述的方法，其中，仅当类型2DRAP SEI消息中的RAP图片标识符大于零时才信令通知所述类型2DRAP SEI消息中的其他语法元素。11.根据权利要求1
‑
10中任一项所述的方法，其中，所述CRR图片被表示为类型2DRAP图片。12.根据权利要求1
‑
...

【专利技术属性】
技术研发人员：王业奎，王洋，张莉，
申请(专利权)人：字节跳动有限公司，
类型：发明
国别省市：