一种基于人体特征紧凑表示的视频压缩方法技术

技术编号:43474006 阅读:30 留言:0更新日期:2024-11-27 13:13
本发明专利技术属于视频编码领域,公开了一种基于人体特征紧凑表示的视频压缩方法,包括步骤1:构建人体视频压缩框架;使用人体骨架特征来表征运动,首先将提取出的骨架特征通过人体特征压缩算法压缩冗余,与参考帧一同传输到解码端;之后恢复成原骨架,与重构的参考帧一起输入到生成网络中生成预测帧;最后输入到残差优化模块中进一步提升质量;步骤2:设计人体特征压缩算法;步骤3:特征残差编码优化;首先通过特征提取器提取预测帧和原始帧的深度特征,之后计算深度特征之间的残差,输入到上下文编码器当中,在熵模型的优化下进一步降低比特率。本发明专利技术极大提高了人体骨架信息的压缩率;能够以较低的比特流生成主观与客观质量良好的重构人体视频。

【技术实现步骤摘要】

本专利技术属于视频编码领域,尤其涉及一种基于人体特征紧凑表示的视频压缩方法


技术介绍

1、近年来,基于深度学习的视频编码框架显示出了良好的发展前景。lu等人提出了首个端到端视频压缩框架dvc,用神经网络代替传统的运动估计、运动补偿、残差编码等模块,并通过率失真函数共同优化整个网络。lin等人采用多参考帧进行运动补偿和运动矢量预测,有效地消除了时间冗余。yang等人提出了一种基于学习的分层质量和循环增强视频压缩方法,压缩不同质量的视频帧,通过循环增强网络提高视频质量。hu等人将编码过程转移到特征域,使用可变形卷积估计运动偏移量。他们的多帧特征融合模块从当前帧和前一帧中提取多个特征表示,并使用可变形补偿和非局部注意机制来细化初始重构特征,从而实现更好的帧重构。habibian等人将多个帧视为一个整体,并使用3d卷积直接压缩。liu等人使用图像编码器和独立压缩每帧,并提出了一种熵模型来探讨潜在特征的时间相关性。此外,li等人将残差编码转化为条件编码,利用时间上下文优化编码器和熵模型。然而,这些方法无论是使用光流扭曲还是直接使用潜在表示来生成预测帧,都没有利用人本文档来自技高网...

【技术保护点】

1.一种基于人体特征紧凑表示的视频压缩方法,其特征在于,包括如下步骤:

2.根据权利要求1所述的基于人体特征紧凑表示的视频压缩方法,其特征在于,所述步骤1包括如下具体步骤:

3.根据权利要求1所述的基于人体特征紧凑表示的视频压缩方法,其特征在于,所述人体特征压缩算法将由骨架提取器提取出的骨架信息根据人体关节分成六个部分:头,身体,左臂,右臂,左腿和右腿。

4.根据权利要求1所述的基于人体特征紧凑表示的视频压缩方法,其特征在于,所述步骤2包括如下具体步骤:

5.根据权利要求1所述的基于人体特征紧凑表示的视频压缩方法,其特征在于,步骤3所述时域...

【技术特征摘要】

1.一种基于人体特征紧凑表示的视频压缩方法,其特征在于,包括如下步骤:

2.根据权利要求1所述的基于人体特征紧凑表示的视频压缩方法,其特征在于,所述步骤1包括如下具体步骤:

3.根据权利要求1所述的基于人体特征紧凑表示的视频压缩方法,其特征在于,所述人体特征压缩算法将由骨架提取器提取出的骨架信息根据人体关节分成六个部分:头,身体,左臂,右臂,左腿和右腿。

4.根据权利要求1所述的基于人体特征紧凑表示的视频压缩方法,其特征在于,所述步骤2包括如下具体步骤:

5.根据权利要...

【专利技术属性】
技术研发人员:殷海兵郦渊浩王鸿奎黄晓峰谢亚光林聚财
申请(专利权)人:杭州电子科技大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1