System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 用于图片重采样的高级语法制造技术_技高网

用于图片重采样的高级语法制造技术

技术编号:40507905 阅读:8 留言:0更新日期:2024-03-01 13:22
一种方法,该方法包括:对表示来自视频数据的视频序列的多个图片中的图片进行解码(701);获得(702)从与该视频数据相关联的元数据确定的滤波器的参数,该元数据包括至少一个第一信息,该至少一个第一信息指定应用该滤波器的该多个图片的子集;以及,响应于元数据对所解码的图片应用(703)滤波器。

【技术实现步骤摘要】
【国外来华专利技术】

1.本实施例中的至少一个总体上涉及用于控制旨在对视频内容的图片进行重采样的后滤波处理的方法、装置和信号。


技术介绍

0、2.
技术介绍

1、为了实现高压缩效率,视频编码方案通常采用预测和变换来利用视频内容中的空间和时间冗余。在编码期间,将视频内容的图片划分为样本块(即像素),然后将这些块分区为一个或多个子块,在下文称为原始子块。然后对每个子块应用帧内或帧间预测以利用帧内或帧间图像相关性。无论使用何种预测方法(帧内或帧间),都针对每个原始子块确定预测值子块。然后,对表示原始子块与预测值子块之间的差的子块(通常表示为预测误差子块、预测残差子块或简单地表示为残差子块)进行变换、量化和熵编码,以生成编码视频流。为了重构视频,通过对应于变换、量化和熵编码的逆过程来解码压缩数据。

2、上一代视频压缩标准,例如mpeg-4/avc(iso/cei 14496-10)、hevc(iso/iec23008-2-mpeg-h part 2,高效视频编码/itu-t h.265)或由itu-t和iso/iec专家组成的联合协作团队(称为联合视频专家团队(jvet))正在开发的名为通用视频编码(vvc)的国际标准均通过经适配的元数据的定义来支持后滤波的使用。例如,限定补充增强信息(sei)消息以传送一些后滤波参数。

3、在vvc中,被称为参考图片重采样(reference picture resampling,rpr)的新工具允许对图片的序列进行编码,其中图片分辨率是异质的。

4、图1表示rpr工具的应用。在图1中,图片4由对图片3进行时间预测得出。图片3由对图片2进行时间预测得出。图片2由对图片1进行时间预测得出。由于图片4和图片3具有不同的分辨率,因此在解码过程期间图片3被上采样到图片4的分辨率。图片3和图片2具有相同的分辨率。不对图片2应用上采样或下采样以进行时间预测。图片1大于图片2。在解码期间对图片1应用下采样以对图片2进行时间预测。然而,被应用于时间预测的重采样过程通常被应用于块级别,使得在解码器的输出处没有重采样的图片可用。只有处于其重构分辨率的图片是可用的,用处于不同分辨率的图片编码的视频序列以处于其编码的分辨率的图片输出。因此需要重采样后滤波处理来使图片分辨率均质化。

5、到目前为止所定义的后滤波sei消息主要被设计为指定旨在改善输出图片主观质量的滤波器。这些sei消息不是为指定重采样滤波器而设计的,并且更不用说不是为包括具有异质分辨率的图片的视频序列而设计的。实际上,这些sei消息被设计为对视频序列的所有图片进行相同的后滤波,而旨在使图片分辨率均质化的重采样后滤波处理不能对不同分辨率的图片进行相同的处理。

6、希望提出允许克服上述问题的解决方案。特别地,希望提出一种解决方案,其允许指定重采样后滤波器并且适于具有异质的编码分辨率的视频序列的特定情况,该异质的编码分辨率需要这些分辨率的均质化。

7、3.
技术实现思路

8、在第一方面,本专利技术实施方案中的一个或多个实施方案提供了一种方法,该方法包括:

9、对表示来自比特流的一部分的视频序列的多个图片中的当前图片进行解码;获得从嵌入在比特流中的元数据确定的滤波器的参数,该元数据包括至少一个第一信息,该至少一个第一信息指定要在其上应用该滤波器的多个图片的子集;以及,响应于该元数据将滤波器应用于解码的当前图片。

10、在实施例中,该滤波器是重采样滤波器。

11、在实施例中,该滤波器是可分离的滤波器,并且该元数据指定水平滤波器的参数和垂直滤波器的参数。

12、在实施例中,滤波器旨在被应用于图片的子集中的每个图片的亮度和色度分量,并且该元数据指定适于对亮度分量进行滤波的滤波器的参数和与适于对亮度分量进行滤波的滤波器的参数不同的适于对色度分量进行滤波的滤波器的参数。

13、在实施例中,该至少一个第一信息指定滤波器仅被应用于具有不同于最大分辨率的分辨率的图片。

14、在实施例中,该元数据包括指定多种滤波方法中的滤波方法的第二信息。

15、在实施例中,多种滤波方法包括亮度滤波、色度滤波、双线性滤波、定向三次卷积插值、基于迭代曲率的插值、边缘引导图像插值以及基于深度学习的滤波方法。

16、在第二方面,本专利技术实施方案中的一个或多个实施方案提供了一种方法,该方法包括:

17、对表示比特流的一部分中的视频序列的多个图片进行编码;以及,对表示比特流中的滤波器的元数据进行编码,该元数据包括至少一个第一信息,该至少一个第一信息指定要在其上应用该滤波器的多个图片的子集。

18、在实施例中,该滤波器是重采样滤波器。

19、在实施例中,该滤波器是可分离的滤波器,并且该元数据指定水平滤波器的参数和垂直滤波器的参数。

20、在实施例中,滤波器旨在被应用于图片的子集中的每个图片的亮度和色度分量,并且该元数据指定适于对亮度分量进行滤波的滤波器的参数和与适于对亮度分量进行滤波的滤波器的参数不同的适于对色度分量进行滤波的滤波器的参数。

21、在实施例中,该至少一个第一信息指定滤波器仅被应用于具有不同于最大分辨率的分辨率的图片。

22、在实施例中,该元数据包括指定多种滤波方法中的滤波方法的第二信息。

23、在实施例中,多个滤波方法包括亮度滤波、色度滤波、双线性滤波、定向三次卷积插值、基于迭代曲率的插值、边缘引导图像插值以及基于深度学习的滤波方法。

24、在第三方面,本专利技术实施方案中的一个或多个实施方案提供了一种设备,该设备包括电子电路,该电子电路适于:

25、对表示来自比特流的一部分的视频序列的多个图片中的当前图片进行解码;获得从嵌入在比特流中的元数据确定的滤波器的参数,该元数据包括至少一个第一信息,该至少一个第一信息指定要在其上应用该滤波器的多个图片的子集;以及,响应于该元数据将滤波器应用于解码的当前图片。

26、在实施例中,该滤波器是重采样滤波器。

27、在实施例中,该滤波器是可分离的滤波器,并且该元数据指定水平滤波器的参数和垂直滤波器的参数。

28、在实施例中,滤波器旨在被应用于图片的子集中的每个图片的亮度和色度分量,并且该元数据指定适于对亮度分量进行滤波的滤波器的参数和与适于对亮度分量进行滤波的滤波器的参数不同的适于对色度分量进行滤波的滤波器的参数。

29、在实施例中,该至少一个第一信息指定滤波器仅被应用于具有不同于最大分辨率的分辨率的图片。

30、在实施例中,该元数据包括指定多种滤波方法中的滤波方法的第二信息。

31、在实施例中,多种滤波方法包括亮度滤波、色度滤波、双线性滤波、定向三次卷积插值、基于迭代曲率的插值、边缘引导图像插值以及基于深度学习的滤波方法。

32、在第四方面,本专利技术实施方案中的一个或多个实施方案提供了一种设备,该设备包括电子电路,该电子电路适于:

33、对表本文档来自技高网...

【技术保护点】

1.一种方法,所述方法包括:

2.根据权利要求1所述的方法,其中,所述滤波器是重采样滤波器。

3.根据权利要求1或2所述的方法,其中,所述滤波器是能够分离的滤波器,并且所述元数据指定水平滤波器的参数和垂直滤波器的参数。

4.根据权利要求1、2或3所述的方法,其中,所述滤波器旨在被应用于所述图片的子集中的每个图片的亮度分量和色度分量,并且所述元数据指定适于对所述亮度分量进行滤波的所述滤波器的参数以及与适于对所述亮度分量进行滤波的所述滤波器的参数不同的适于对所述色度分量进行滤波的所述滤波器的参数。

5.根据任一前述权利要求所述的方法,其中,所述至少一个第一信息指定所述滤波器仅被应用于具有不同于最大分辨率的分辨率的图片。

6.根据任一前述权利要求所述的方法,其中,所述元数据包括指定多种滤波方法中的滤波方法的第二信息。

7.根据权利要求6所述的方法,其中,所述多种滤波方法包括亮度滤波、色度滤波、双线性滤波、定向三次卷积插值、基于迭代曲率的插值、边缘引导图像插值以及基于深度学习的滤波方法。

8.一种方法,所述方法包括:

9.根据权利要求8所述的方法,其中,所述滤波器是重采样滤波器。

10.根据权利要求8或9所述的方法,其中,所述滤波器是能够分离的滤波器,并且所述元数据指定水平滤波器的参数和垂直滤波器的参数。

11.根据权利要求8、9或10所述的方法,其中,所述滤波器旨在被应用于所述图片的子集中的每个图片的亮度分量和色度分量,并且所述元数据指定适于对所述亮度分量进行滤波的所述滤波器的参数以及与适于对所述亮度分量进行滤波的所述滤波器的参数不同的适于对所述色度分量进行滤波的所述滤波器的参数。

12.根据权利要求8至11中任一前述权利要求所述的方法,其中,所述至少一个第一信息指定所述滤波器仅被应用于具有不同于最大分辨率的分辨率的图片。

13.根据权利要求8至12中任一前述权利要求所述的方法,其中,所述元数据包括指定多种滤波方法中的滤波方法的第二信息。

14.根据权利要求13所述的方法,其中,所述多种滤波方法包括亮度滤波、色度滤波、双线性滤波、定向三次卷积插值、基于迭代曲率的插值、边缘引导图像插值以及基于深度学习的滤波方法。

15.一种包括电子电路的设备,所述设备适于:

16.根据权利要求15所述的设备,其中,所述滤波器是重采样滤波器。

17.根据权利要求15或16所述的设备,其中,所述滤波器是能够分离的滤波器,并且所述元数据指定水平滤波器的参数和垂直滤波器的参数。

18.根据权利要求15、16或17所述的设备,其中,所述滤波器旨在被应用于所述图片的子集中的每个图片的亮度分量和色度分量,并且所述元数据指定适于对所述亮度分量进行滤波的所述滤波器的参数以及与适于对所述亮度分量进行滤波的所述滤波器的参数不同的适于对所述色度分量进行滤波的所述滤波器的参数。

19.根据权利要求15至18中任一前述权利要求所述的设备,其中,所述至少一个第一信息指定所述滤波器仅被应用于具有不同于最大分辨率的分辨率的图片。

20.根据权利要求15至19中任一前述权利要求所述的设备,其中,所述元数据包括指定多种滤波方法中的滤波方法的第二信息。

21.根据权利要求20所述的设备,其中,所述多种滤波方法包括亮度滤波、色度滤波、双线性滤波、定向三次卷积插值、基于迭代曲率的插值、边缘引导图像插值以及基于深度学习的滤波方法。

22.一种包括电子电路的设备,所述设备适于:

23.根据权利要求22所述的设备,其中,所述滤波器是重采样滤波器。

24.根据权利要求21或22所述的设备,其中,所述滤波器是能够分离的滤波器,并且所述元数据指定水平滤波器的参数和垂直滤波器的参数。

25.根据权利要求21、22或23所述的设备,其中,所述滤波器旨在被应用于所述图片的子集中的每个图片的亮度分量和色度分量,并且所述元数据指定适于对所述亮度分量进行滤波的所述滤波器的参数以及与适于对所述亮度分量进行滤波的所述滤波器的参数不同的适于对所述色度分量进行滤波的所述滤波器的参数。

26.根据权利要求22至25中任一前述权利要求所述的设备,其中所述至少一个第一信息指定所述滤波器仅被应用于具有不同于最大分辨率的分辨率的图片。

27.根据权利要求22至26中任一前述权利要求所述的设备,其中,所述元数据包括指定多种滤波方法中的滤波方法的第二信息。

28.根据权利要求27所述的设备,其中,所述多种滤波方法包...

【技术特征摘要】
【国外来华专利技术】

1.一种方法,所述方法包括:

2.根据权利要求1所述的方法,其中,所述滤波器是重采样滤波器。

3.根据权利要求1或2所述的方法,其中,所述滤波器是能够分离的滤波器,并且所述元数据指定水平滤波器的参数和垂直滤波器的参数。

4.根据权利要求1、2或3所述的方法,其中,所述滤波器旨在被应用于所述图片的子集中的每个图片的亮度分量和色度分量,并且所述元数据指定适于对所述亮度分量进行滤波的所述滤波器的参数以及与适于对所述亮度分量进行滤波的所述滤波器的参数不同的适于对所述色度分量进行滤波的所述滤波器的参数。

5.根据任一前述权利要求所述的方法,其中,所述至少一个第一信息指定所述滤波器仅被应用于具有不同于最大分辨率的分辨率的图片。

6.根据任一前述权利要求所述的方法,其中,所述元数据包括指定多种滤波方法中的滤波方法的第二信息。

7.根据权利要求6所述的方法,其中,所述多种滤波方法包括亮度滤波、色度滤波、双线性滤波、定向三次卷积插值、基于迭代曲率的插值、边缘引导图像插值以及基于深度学习的滤波方法。

8.一种方法,所述方法包括:

9.根据权利要求8所述的方法,其中,所述滤波器是重采样滤波器。

10.根据权利要求8或9所述的方法,其中,所述滤波器是能够分离的滤波器,并且所述元数据指定水平滤波器的参数和垂直滤波器的参数。

11.根据权利要求8、9或10所述的方法,其中,所述滤波器旨在被应用于所述图片的子集中的每个图片的亮度分量和色度分量,并且所述元数据指定适于对所述亮度分量进行滤波的所述滤波器的参数以及与适于对所述亮度分量进行滤波的所述滤波器的参数不同的适于对所述色度分量进行滤波的所述滤波器的参数。

12.根据权利要求8至11中任一前述权利要求所述的方法,其中,所述至少一个第一信息指定所述滤波器仅被应用于具有不同于最大分辨率的分辨率的图片。

13.根据权利要求8至12中任一前述权利要求所述的方法,其中,所述元数据包括指定多种滤波方法中的滤波方法的第二信息。

14.根据权利要求13所述的方法,其中,所述多种滤波方法包括亮度滤波、色度滤波、双线性滤波、定向三次卷积插值、基于迭代曲率的插值、边缘引导图像插值以及基于深度学习的滤波方法。

15.一种包括电子电路的设备,所述设备适于:

16.根据权利要求15所述的设备,其中,所述滤波器是重采样滤波器。

17.根据权利要求15或16所述的设备,其中,所述滤波器是能够分离的滤波器,并且所述元数据指定水平滤波器的参数和垂直滤波器的参数。...

【专利技术属性】
技术研发人员:T·波里尔F·莱莱昂内克K·纳赛尔G·马丁科谢
申请(专利权)人:交互数字CE专利控股有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1