允许对漂移进行限制的视频编码概念制造技术

一种用于从数据流解码视频的视频解码器被配置成从所述数据流解码指示，所述指示对所述视频的图片的序列有效并且指示图片的所述序列内的

【技术实现步骤摘要】
【国外来华专利技术】允许对漂移进行限制的视频编码概念


[0001]本申请涉及适于限制漂移的视频编码和概念
。

技术介绍

[0002]编码的视频的
HTTP
流传输在过去的十年已成为视频分发的重要途径，并且
OTT
服务提供商现今能够经由公共互联网到达数亿用户
。
标准协议
(
诸如
HTTP
上的动态自适应流传输
(DASH)[1])
使得服务提供商能够通过使服务器以各个比特率
、
按时间上分段的形式提供媒体来向客户端流传送媒体
。
客户端装置然后能够通过根据可用网络带宽及其解码能力以动态和自适应方式在所提供的特定区段
(segment)
的变体中进行选择，来下载接连的区段以用于连续回放
。
在实践中，内容被提供为通常涉及多个分辨率和保真度的最佳化的比特率阶梯所生成的多个所谓的表示，以便最佳化针对特定比特率的所感知质量并且由此最佳化用户体验
[2]。
由于每个区段典型地使用所谓的闭合的图片的组
(GOP)
编码结构
[2]而不依赖于较早区段来被编码，因此下载和去分组化的区段数据能够被连系成一致的比特流并被馈送到解码器中
。
与这类闭合的
GOP
结构相反，使用所谓的开放
GOP
编码结构的区段含有采用来自较早区段中的图片的帧间预测
(
这有益于编码效率
)/>的一些图片
。
虽然当随机接入区段时，使用来自较早区段的帧间预测的图片能够被跳过以免被输出而没有回放问题或视觉假象
(
因为它们按呈现顺序首先到来
)
，但是当分辨率切换在连续播出期间发生时会出现问题，因为这些图片在这类非无缝切换下被跳过
。
即使在纯比特率切换中，当区段未被合适地编码以用于切换时，一些图片可能被丢弃或展现严重的视觉假象
。
[0003]激增的较早代编解码器
(
诸如
AVC[4]和
HEVC[5])
不提供为使用不同分辨率的参考图片所要求的参考图片重采样
(RPR)
功能性
。
因此，在分辨率切换后，当以这类开放
GOP
结构来被执行时，区段的一些图片不能够被正确解码，因为来自较早区段的参考图片在所要求的分辨率下不可用，这导致自丢弃图片的区段切换下的非恒定帧率播出
。
在
[6]中，作者提出了通过对
HEVC
解码过程采用规范改变或者使用提供
RPR
功能性的不太激增的
HEVC
的可缩放扩展
(SHVC)
来克服开放
GOP
分辨率切换的问题的方法
。
然而，可用的解决方案至今尚未使能开放
GOP
编码在
HTTP
流传输中的实质采用
。
[0004]最近敲定的多功能视频编码
(VVC)
标准
[7]的版本1是从
ITU
‑
T
的视频编码专家组和
ISO/IEC
的分委员会
29(
又称为移动图片专家组
)
的合作工作所显现的最新视频编码标准
。
除了提供相比于较早代编解码器实质上提高的编码效率
[8]以外，
VVC
还在初始
Main10
简档中包含许多应用驱动的特征，诸如
RPR。
在
VVC
开发期间，
RPR
主要在具有低延迟编码结构的会话场景的上下文中被研究
[9]，其中对时延和缓冲大小的真实世界要求为用于分辨率切换的帧内编码的图片的插入的可行性设定严格限制
。
[0005]然而，
VVC
中的
RPR
也能够将实质益处提供到针对流传输领域的视频编码中的编码效率
。
[0006]手头具有使能在使用编解码器
(
诸如
VVC)
的
HTTP
流传输中使用开放
GOP
分辨率切换的概念将是有利的，其中上文概述的问题不仅针对
RPR
而出现，而且还出现在通过连系与
例如不同
SNR
相关联的区段来形成视频比特流时
。

技术实现思路

[0007]因此，本专利技术的目的是提供一种视频编码概念，所述视频编码概念使能更有效地限制由漂移对视频质量的负面影响，所述漂移例如由在不同视频比特流表示之间的切换下的分段视频比特流形成来引起
。
[0008]此目的由本申请的独立权利要求的主题来达成
。
[0009]根据本专利技术的第一方面的实施例提供用于从数据流解码视频的视频解码器，所述视频解码器被配置成从所述数据流解码指示
(
例如，
gci_rasl_pictures_tool_constraint_flag)
，所述指示对所述视频的图片的序列有效，并且所述指示指示图片的所述序列内的
RASL
图片以排除一个或多个编码工具的预定的集合的方式来被编码
。
例如，所述指示可用作一种承诺，使得所述解码器知道，通过连系以不同空间分辨率和
/
或不同
SNR
来编码的视频的分开编码的开放
GOP
版本而进行的开放
GOP
切换不导致
RASL
图片中的过多漂移
。
进一步的实施例提供用于将视频编码到数据流中的视频编码器，所述视频编码器被配置用于将所述指示编码到所述数据流中
。
例如，
RASL
图片表示按解码顺序在例如
CRA
的图片的所述序列的帧内编码的图片之后
、
但按呈现顺序在它之前的图片，并且其可使用按解码顺序在帧内编码的图片之前的参考图片
。
例如，在前的图片可属于图片的先前序列，例如，帧内编码的图片按编码顺序可以是所述序列的第一图片
。
由于对按解码顺序在帧内编码的图片之前的图片的参考，当针对包括先前帧内编码的图片的视频的先前区段切换帧内编码的图片处的分辨率时，可发生上文提到的漂移假象或其他类型的假象
。
在数据流中发信号通知上文提到的指示可向解码器给出保证：相比于图片的先前序列，图片的所述序列处的分辨率切换不涉及
RASL
图片中的过多漂移
。
相应地，解码器可基于所述指示来判定分辨率切换是否是有利的
。
[0010]根据本专利技术的进一步的实施例提供用于从本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.
用于从数据流解码视频的视频解码器，所述视频解码器被配置成从所述数据流解码指示，所述指示对所述视频的图片的序列有效并且指示图片的所述序列内的
RASL
图片以排除一个或多个编码工具的预定的集合的方式来被编码
。2.
如权利要求1所述的视频解码器，其中，一个或多个编码工具的所述预定的集合包括基于跨分量线性模型的预测工具
(100)
，和
/
或解码器侧运动向量细化工具
(400)。3.
如先前权利要求中的任一项所述的视频解码器，其中，所述指示被包含在补充增强信息消息中
。4.
如先前权利要求中的任一项所述的视频解码器，其中，所述指示包括共同指示针对图片的所述序列内的所述
RASL
图片的编码而排除一个或多个编码工具的所述预定的集合的所有编码工具的一个比特
。5.
如先前权利要求中的任一项所述的视频解码器，其中，所述解码器被配置成支持参考图片重采样，其中，根据所述参考图片重采样，帧间预测的块的参考图片经历样本重采样，以便弥合所述参考图片与其中含有所述帧间预测的块的图片之间的缩放窗口大小偏差或样本分辨率偏差，来为所述帧间预测的块提供帧间预测信号
。6.
如先前权利要求中的任一项所述的视频解码器，其中所述指示指示图片的所述序列内的所有
RASL
图片以排除一个或多个编码工具的所述预定的集合的方式来被编码，和
/
或所述指示指示以排除一个或多个编码工具的所述预定的集合的方式来编码具有按解码顺序在
CRA
图片之前的参考图片的图片的所述序列内的所有
RASL
图片，所述
CRA
图片与所述所有
RASL
图片相关联，和
/
或所述指示指示以排除一个或多个编码工具的所述预定的集合的方式来编码用作在后图片的时间运动向量预测参考图片的图片的所述序列内的所有
RASL
图片，和
/
或所述指示指示以排除一个或多个编码工具的所述预定的集合的方式来编码不属于最高时间层的图片的所述序列内的所有
RASL
图片
。7.
如先前权利要求中的任一项所述的视频解码器，其中，所述指示指示图片的所述序列内的所述
RASL
图片以排除一个或多个编码工具的所述预定的集合的方式
、
以使得以下情况成立的方式来被编码：对于一个或多个编码工具的所述预定的集合中的一个或多个编码工具的第一子集，第一特性适用于的所有
RASL
图片以排除一个或多个编码工具的所述预定的集合中的一个或多个编码工具的所述第一子集的方式来被编码，以及对于一个或多个编码工具的所述预定的集合中的一个或多个编码工具的第二子集，所有
RASL
图片或第二特性适用于的所有
RASL
图片以排除一个或多个编码工具...

【专利技术属性】
技术研发人员：R，
申请(专利权)人：弗劳恩霍夫应用研究促进协会，
类型：发明
国别省市：