System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 一种自回归熵建模的渐进图像编码、解码、压缩方法技术_技高网

一种自回归熵建模的渐进图像编码、解码、压缩方法技术

技术编号:40753706 阅读:5 留言:0更新日期:2024-03-25 20:08
本发明专利技术提供一种自回归熵建模的渐进图像编码、解码、压缩方法,包括:获取待编码图像的多通道特征图、超先验特征、超先验二进制码流以及超先验信息;将多通道特征图进行空间分组,对每个空间分组的每个特征死区量化得到最高质量增强层的量化特征;获得初始码字和初始量化特征,对齐码字,依次获得L个低质量的质量层的量化特征;计算基本层的码字,编码获得基本层二进制码流;逐层计算码字,编码获得增强层二进制码流;合并超先验二进制码流、基本层二进制码流、L个增强层二进制码流形成二进制码流。本发明专利技术可以单个二进制码流适配带宽动态变化、接入终端异构的真实图像通信场景,提高用户体验,降低网络传输的整体带宽需求。

【技术实现步骤摘要】

本专利技术涉及图像处理,具体涉及一种自回归熵建模的渐进图像编码、解码、压缩方法


技术介绍

1、随着深度学习的快速发展,端到端图像压缩也逐渐变得火热,其利用深度神经网络,对图像压缩各个模块进行联合优化,从而实现优越的压缩性能。而在现实生活中,不同终端,异构网络,或者不同用户对码率的要求是不一样的,这就要求模型具有适应不同码率的能力。而后,研究者们又进行了可变码率模型的研究,单个模型可实现多个码率,但是他们的码流是不可伸缩的,仍然对存储造成了一定负担。

2、渐进压缩可编码一个图像为单个码流,码流又可分为一个基本层与若干个增强层。基本层被用来恢复一个较粗粒度图像,增强层被用来逐步细化图像质量。经过对现有技术的文献检索发现,lu等人在2021年《ieee international conference on imageprocessing》(icip)会议上发表的“progressive neural image compression withnested quantization and latent ordering”和lee等人在2022年的《ieee conferenceon computer vision and pattern recognition》(cvpr)会议上发表的“dpict:deepprogressive image compression using trit-planes”被认为是最早的两篇以卷积神经网络(cnn)为基础的,通过调整量化步长并采取超先验模型进行熵建模实现的渐进图像压缩编码方案。lee等人在2023年的《ieee conference on computer vision and patternrecognition》(cvpr)会议上发表的“context-based trit-plane coding forprogressive image compression”是第一个利用超先验模型和已经编码的信息作为上下文进行熵建模的方案。

3、然而上述单独使用超先验模型进行熵建模的模型性能较差,同时利用上下文的模型虽然性能提升,但是由于其利用上下文的方式导致其编解码速度较慢,因此基于自回归模型的渐进编码方案必须被进一步提升。


技术实现思路

1、本专利技术针对目前渐近编码方案中的不足:超先验模型性能较差,同时利用上下文信息的渐进编码方法复杂度太高,提供一种自回归熵建模的渐进图像编码、解码、压缩方法。

2、本专利技术的第一方面,提供一种自回归熵建模的渐进图像编码方法,包括:

3、获取待编码图像的多通道特征图;

4、基于所述多通道特征图得到超先验特征、超先验二进制码流以及超先验信息;

5、将所述多通道特征图按照每个通道划分为k个空间分组,k为正整数;

6、对所述多通道特征图的每个空间分组的每个特征,根据超先验信息和该通道已量化特征进行预测,给定死区和其它量化区间大小进行死区量化,得到最高质量增强层的量化特征;

7、以固定尺度因子依次放缩死区量化的量化区间,通过死区量化获得初始码字和初始量化特征,对齐码字得到量化特征作为当前质量层的量化特征,依次获得l个低质量的质量层的量化特征,其中:l为正整数,具有最大量化区间的最低质量的质量层为基本层,其余l-1个质量层按量化区间从大到小依次为第1到第l-1个增强层;

8、根据基本层的量化特征计算基本层的码字,根据量化区间估计概率,编码基本层的码字获得基本层二进制码流;

9、按照第1到第l个增强层的顺序,逐层根据对应增强层的量化特征计算码字,计算估计概率,编码码字获得l个增强层二进制码流;

10、合并上述超先验二进制码流、基本层二进制码流、l个增强层二进制码流形成二进制码流。

11、可选地,对所述多通道特征图的每个空间分组的每个特征,根据超先验信息和该通道已量化特征进行预测,给定死区和其它量化区间大小进行死区量化,得到最高质量增强层的码字和量化特征,包括:

12、根据当前通道的已量化空间分组和当前空间分组的已量化特征提取上下文信息,与超先验信息融合,获得当前特征y在最高质量增强层的预测值μl;

13、计算当前特征y在最高质量增强层的预测残差

14、对预测残差进行死区量化,根据码字映射函数得到最高质量增强层的初始码字具体地:

15、

16、这里,死区量化的死区大小pl=1,其它量化区间大小ql=1,sign(·)返回输入的符号,max(·,·)返回两个输入间的较大值;

17、对所述初始码字根据重建函数得到最高质量增强层的量化特征

18、

19、这里,重建函数为

20、

21、其中,|·|返回输入的绝对值。

22、可选地,所述以固定尺度因子依次放缩死区量化的量化区间,通过死区量化获得初始码字和初始量化特征,对齐码字得到量化特征作为当前质量层的量化特征,依次获得l个较低质量的质量层的量化特征,包括:

23、按照质量从高到低的顺序,从第l个质量层开始,依次获得码字和量化特征,其中对于第l(l=l,…,1)个质量层,具体步骤为:

24、根据第l+1个质量层的预测μl+1,以死区大小pl、其它量化区间大小ql进行死区量化,通过码字映射函数获得初始码字

25、

26、对所述初始码字根据重建函数得到初始量化特征

27、

28、根据当前通道的已量化空间分组和当前空间分组的已量化特征提取上下文信息,与超先验信息融合,获得当前特征y在第l个增强层的预测值μl;

29、将初始量化特征转换到量化区间ql的均匀量化,根据第l+1个质量层的预测μl+1得到均匀量化特征ξl:

30、

31、其中,均匀量化的码字映射函数β(·)为死区量化与均匀量化转换的正向转换函数;

32、对齐码字获得第l个质量层的量化特征

33、

34、其中β-1(·)为死区量化与均匀量化转换的反向转换函数。

35、可选地,所述根据基本层的量化特征计算基本层的码字,根据量化区间估计概率,编码基本层的码字获得基本层二进制码流,包括:

36、根据基本层的量化特征计算基本层码字c0:

37、

38、计算基本层码字的量化区间[a0,b0],其中

39、

40、

41、基于高斯概率密度函数对基本层码字c0进行概率估计

42、

43、其中

44、根据概率p(c0)进行算术编码,得到基本层二进制码流。

45、可选地,所述按照第1到第l个增强层的顺序,逐层根据获得对应增强层的量化特征计算码字,计算估计概率,编码码字获得增强层二进制码流,包括:

46、对于任意第l(l=1,…,l本文档来自技高网...

【技术保护点】

1.一种自回归熵建模的渐进图像编码方法,其特征在于,包括:

2.根据权利要求1所述的自回归熵建模的渐进图像编码方法,其特征在于,所述对所述多通道特征图的每个空间分组的每个特征,根据超先验信息和该通道已量化特征进行预测,给定死区和其它量化区间大小进行死区量化,得到最高质量增强层的码字和量化特征,包括:

3.根据权利要求1所述的自回归熵建模的渐进图像编码方法,其特征在于,所述以固定尺度因子依次放缩死区量化的量化区间,通过死区量化获得初始码字和初始量化特征,对齐码字得到量化特征作为当前质量层的量化特征,依次获得L个较低质量的质量层的量化特征,包括:

4.根据权利要求3所述的自回归熵建模的渐进图像编码方法,其特征在于,采用正向转换函数β(x)将死区量化的量化特征转换为对应的均匀量化的量化特征:

5.根据权利要求1所述的自回归熵建模的渐进图像编码方法,其特征在于,所述根据基本层的量化特征计算基本层的码字,根据量化区间估计概率,编码基本层的码字获得基本层二进制码流,包括:

6.根据权利要求1所述的自回归熵建模的渐进图像编码方法,其特征在于,所述按照第1到第L个增强层的顺序,逐层根据获得对应增强层的量化特征计算码字,计算估计概率,编码码字获得增强层二进制码流,包括:

7.根据权利要求1所述的自回归熵建模的渐进图像编码方法,其特征在于,任意第l个和第l+1个质量层的其它量化区间大小以固定尺度因子s缩放:

8.一种自回归熵建模的图像渐进解码方法,用于对权利要求1-7任一项得到的编码进行解码,其特征在于,包括:

9.一种自回归熵建模的渐进图像压缩方法,其特征在于,包括:

10.一种渐进图像压缩系统,包括编码器和解码器,其特征在于,包括:

11.一种渐进图像压缩装置,所述图像压缩装置包括存储器和处理器,所述存储器存储一段可由所述处理器执行的程序,其特征在于,所述处理器在执行所述程序时可以执行以下任一种方法:

...

【技术特征摘要】

1.一种自回归熵建模的渐进图像编码方法,其特征在于,包括:

2.根据权利要求1所述的自回归熵建模的渐进图像编码方法,其特征在于,所述对所述多通道特征图的每个空间分组的每个特征,根据超先验信息和该通道已量化特征进行预测,给定死区和其它量化区间大小进行死区量化,得到最高质量增强层的码字和量化特征,包括:

3.根据权利要求1所述的自回归熵建模的渐进图像编码方法,其特征在于,所述以固定尺度因子依次放缩死区量化的量化区间,通过死区量化获得初始码字和初始量化特征,对齐码字得到量化特征作为当前质量层的量化特征,依次获得l个较低质量的质量层的量化特征,包括:

4.根据权利要求3所述的自回归熵建模的渐进图像编码方法,其特征在于,采用正向转换函数β(x)将死区量化的量化特征转换为对应的均匀量化的量化特征:

5.根据权利要求1所述的自回归熵建模的渐进图像编码方法,其特征在于,所述根据基本层的量化特征计算基本层的码字,根据量化区间...

【专利技术属性】
技术研发人员:戴文睿田文新李成林邹君妮熊红凯
申请(专利权)人:上海交通大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1