System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 一种人工智能视频编解码方法、装置及设备制造方法及图纸_技高网

一种人工智能视频编解码方法、装置及设备制造方法及图纸

技术编号:39955489 阅读:8 留言:0更新日期:2024-01-08 23:38
本申请提供了一种人工智能视频编解码方法、装置及设备;方法包括:获取第一视频帧;获取所述第一视频帧的编码特征;检测所述第一视频帧的类型;响应于所述第一视频帧的类型为前向预测编码图像帧,获取所述第一视频帧的参考解码特征,将所述第一视频帧的编码特征以及所述第一视频帧的参考解码特征进行上下文编码,得到所述第一视频帧的融合特征,以及基于第一预设码本对所述第一视频帧的融合特征进行量化处理,得到第一编码序列,其中,所述第一预设码本共用于所述前向预测编码图像帧的编码阶段和解码阶段。本申请能够实现视频编解码过程中跨平台计算的一致性。

【技术实现步骤摘要】

本申请涉及计算机技术,尤其涉及一种人工智能视频编解码方法、装置及设备


技术介绍

1、在人工智能视频编解码的相关技术中,视频编解码过程中特征图的传输通常采用熵编码估计实现,在编码的过程,熵编码过程会引入高精度的概率估计函数,而解码设备为了能够从编码设备编码的字节流中完全正确的解码对应元素,需要使用与编码设备完全一致的概率估计函数。但是,当编解码器运行在不同的机器或不同的计算环境下时,执行的单精度计算可能存在较大的精度误差,从而导致解码设备解码失败。


技术实现思路

1、本申请实施例提供一种人工智能视频编解码方法、装置、电子设备、计算机可读存储介质及计算机程序产品,能够实现跨平台编解码的一致性。

2、本申请实施例的技术方案是这样实现的:

3、本申请实施例提供一种视频编码方法,包括:

4、获取第一视频帧;

5、获取所述第一视频帧的编码特征;

6、检测所述第一视频帧的类型;

7、响应于所述第一视频帧的类型为前向预测编码图像帧,获取所述第一视频帧的参考解码特征,将所述第一视频帧的编码特征以及所述第一视频帧的参考解码特征进行上下文编码,得到所述第一视频帧的融合特征,以及

8、基于第一预设码本对所述第一视频帧的融合特征进行量化处理,得到第一编码序列,其中,所述第一预设码本共用于所述前向预测编码图像帧的编码阶段和解码阶段。

9、本申请实施例提供一种视频解码方法,包括:

10、获取第三编码序列,其中,所述第三编码序列用于重建第一视频帧;

11、检测所述第一视频帧的类型;

12、响应于所述第一视频帧的类型为前向预测编码图像帧,基于第一预设码本对所述第三编码序列进行反量化处理,得到所述第一视频帧的融合特征,其中,所述第一预设码本共用于所述前向预测编码图像帧的编码阶段和解码阶段,以及

13、获取所述第一视频帧的参考解码特征,将所述第一视频帧的参考解码特征以及所述第一视频帧的融合特征进行上下文解码,得到所述第一视频帧的解码特征;

14、基于所述第一视频帧的解码特征进行解码处理,得到所述第一视频帧的重建图像。

15、在上述方案中,所述获取第三编码序列,包括:

16、接收编码设备发送的第二编码序列,以作为第三编码序列,其中,所述第二编码序列是编码设备响应于所述第一视频帧的类型为帧内编码图像帧,对所述第一视频帧进行编码得到的。

17、在上述方案中,所述基于第一预设码本对所述第三编码序列进行反量化处理,得到所述第一视频帧的融合特征,包括:

18、获取所述第三编码序列中的多个索引值;

19、从所述第一预设码本中查询每个所述索引值的匹配特征;

20、将每个所述索引值的匹配特征组合成所述第一视频帧的融合特征。

21、在上述方案中,所述第一视频帧的融合特征包括多个通道的融合通道特征,所述第一视频帧的参考解码特征包括多个通道的参考解码通道特征;

22、所述将所述第一视频帧的参考解码特征以及所述第一视频帧的融合特征进行上下文解码,得到所述第一视频帧的解码特征,包括:

23、从所述第一视频帧的参考解码特征提取多个通道的参考解码通道特征,以及从所述第一视频帧的融合特征提取多个通道的融合通道特征;

24、将所述每个通道对应的所述参考解码通道特征以及所述融合通道特征进行叠加,得到所述每个通道对应的叠加通道特征;

25、将所述每个通道对应的叠加通道特征组合作为所述第一视频帧的解码特征。

26、在上述方案中,所述获取所述第一视频帧的参考解码特征,包括:

27、获取第二视频帧的解码特征,以作为所述第一视频帧的参考解码特征,其中,所述第二视频帧为所述第一视频帧的前一帧。

28、本申请实施例提供一种人工智能视频编码装置,包括:

29、获取模块,用于获取第一视频帧、获取所述第一视频帧的编码特征、获取所述第一视频帧的参考解码特征;

30、检测模块,用于检测所述第一视频帧的类型;

31、上下文编码模块,用于将所述第一视频帧的编码特征以及所述第一视频帧的参考解码特征进行上下文编码,得到所述第一视频帧的融合特征;

32、量化模块,用于基于第一预设码本对所述第一视频帧的融合特征进行量化处理,得到第一编码序列,其中,所述第一预设码本共用于编码阶段和解码阶段。

33、本申请实施例提供一种人工智能视频解码装置,包括:

34、获取模块,用于获取第三编码序列,以及获取所述第一视频帧的参考解码特征,其中,所述第三编码序列用于重建第一视频帧;

35、反量化模块,用于基于第一预设码本对所述第三编码序列进行反量化处理,得到所述第一视频帧的融合特征,其中,所述第一预设码本共用于所述前向预测编码图像帧的编码阶段和解码阶段;

36、检测模块,用于检测所述第一视频帧的类型;

37、上下文解码模块,用于将所述第一视频帧的参考解码特征以及所述第一视频帧的融合特征进行上下文解码,得到所述第一视频帧的第一解码特征;

38、重建模块,用于基于所述第一视频帧的第一解码特征进行解码处理,得到所述第一视频帧的重建图像。

39、本申请实施例提供一种电子设备,包括:

40、存储器,用于存储可执行指令;

41、处理器,用于执行所述存储器中存储的可执行指令时,实现本申请实施例提供的视频编码方法和视频解码方法。

42、本申请实施例提供一种计算机可读存储介质,存储有计算机程序或计算机可执行指令,所述计算机程序或计算机可执行指令被处理器执行时实现本申请实施例提供的视频编码方法和解码方法。

43、本申请实施例具有以下有益效果:

44、在编码阶段,通过检测出前向预测编码图像帧的视频帧,将视频帧的融合特征通过预设的码本来量化为编码序列,在解码阶段使用同样的码本,对编码序列进行反量化,进而解码出视频帧的重建图像,保证了前向预测编码图像帧在跨平台环境中编码阶段和解码阶段的计算的一致性;相较于已有技术的通过熵编码估计方案,由于没有引入复杂的统计模型,因此显著降低了视频编解码的计算复杂度。

本文档来自技高网...

【技术保护点】

1.一种视频编码方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述方法还包括:

3.根据权利要求2所述的方法,其特征在于,

4.根据权利要求2或3所述的方法,其特征在于,

5.根据权利要求1至3任一项所述的方法,其特征在于,所述获取所述第一视频帧的参考解码特征,包括:

6.根据权利要求1至3任一项所述方法,其特征在于,

7.根据权利要求6所述方法,其特征在于,所述将每个所述通道特征对应的所述索引值组合为第一编码序列,包括:

8.根据权利要求1至3任一项所述方法,其特征在于,所述方法还包括:

9.根据权利要求1至3任一项所述方法,其特征在于,

10.根据权利要求1至3任一项所述方法,其特征在于,所述获取所述第一视频帧的编码特征,包括:

11.一种视频解码方法,其特征在于,所述方法包括:

12.根据权利要求11所述方法,其特征在于,所述方法还包括:

13.根据权利要求12所述方法,其特征在于,所述基于第二预设码本对所述第三编码序列进行反量化处理,得到所述第一视频帧的第二解码特征,包括:

14.根据权利要求13所述方法,其特征在于,

15.根据权利要求11至14任一项所述方法,其特征在于,所述获取第三编码序列,包括:

16.根据权利要求11至14任一项所述方法,其特征在于,所述获取第三编码序列,包括:

17.一种视频编码装置,其特征在于,所述装置包括:

18.一种视频解码装置,其特征在于,所述装置包括:

19.一种电子设备,其特征在于,所述电子设备包括:

20.一种计算机可读存储介质,存储有计算机可执行指令或者计算机程序,其特征在于,所述计算机可执行指令或者计算机程序被处理器执行时实现权利要求1至10任一项所述的视频编码方法,或权利要求11至16任一项所述的视频解码方法。

...

【技术特征摘要】

1.一种视频编码方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述方法还包括:

3.根据权利要求2所述的方法,其特征在于,

4.根据权利要求2或3所述的方法,其特征在于,

5.根据权利要求1至3任一项所述的方法,其特征在于,所述获取所述第一视频帧的参考解码特征,包括:

6.根据权利要求1至3任一项所述方法,其特征在于,

7.根据权利要求6所述方法,其特征在于,所述将每个所述通道特征对应的所述索引值组合为第一编码序列,包括:

8.根据权利要求1至3任一项所述方法,其特征在于,所述方法还包括:

9.根据权利要求1至3任一项所述方法,其特征在于,

10.根据权利要求1至3任一项所述方法,其特征在于,所述获取所述第一视频帧的编码特征,包括:

11.一种视频解码方法,其特征在于,所述方法包括:

12.根据权利要求...

【专利技术属性】
技术研发人员:田宽张军
申请(专利权)人:腾讯科技深圳有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1