一种基于背景建模的全景视频编码方法及其系统技术方案

技术编号:41295398 阅读:17 留言:0更新日期:2024-05-13 14:44
一种基于背景建模的全景视频编码方法及其系统,涉及视频编码技术领域。提升现有的全景视频编码框架在背景变化不明显的场景下编码的效率和性能,并提高视口预测的效率,为全景视频的高质量传输提供帮助。方法为:对视频序列进行背景建模,生成背景图像;将所述背景图像作为帧间预测的长期参考帧,分别对图像进行高质量编码和低质量编码;采用所述背景图像和边缘信息进行运动物体检测,确定感兴趣区域,根据所述感兴趣区域预测未来的视口区域;根据预测的结果采用所述高质量编码的码流将视口区域进行传输;根据预测的结果采用所述低质量编码的码流将非视口区域进行传输。本发明专利技术适用于全景视频的编码。

【技术实现步骤摘要】

本专利技术涉及视频编码。


技术介绍

1、随着采集设备和计算设备的发展,用户越来越追求沉浸式、交互式的数字媒体。全景视频因其广泛的视野、独特的呈现方式而备受青睐。在存储方面,高效的视频压缩技术能去除全景视频中的冗余信息,大幅降低视频的存储空间。现有的针对全景视频的编码方法主要考虑了相邻图像之间的关联,消除了整个视频中时间和空间的短期相关性,但是往往忽视了时间和空间的长期相关性。背景冗余就是其中之一。

2、在传输方面,主流方案采用基于视口预测的方法。通过对用户所观看的图像区域进行预测,高质量传输视口区域,低质量传输其他图像区域,可以显著降低全景视频传输的数据量。目前利用深度学习技术对视口区域进行预测的方法取得了较好的效果,但是需要大量的额外计算开销,无法适应全景直播、全景监控等对实时性要求较高的场景。


技术实现思路

1、本专利技术提供一种基于背景建模的全景视频编码方法及其系统,提升现有的全景视频编码框架在背景变化不明显的场景下编码的效率和性能,并提高视口预测的效率,为全景视频的高质量传输提供帮助。...

【技术保护点】

1.一种基于背景建模的全景视频编码方法,其特征在于,所述方法为:

2.根据权利要求1所述的一种基于背景建模的全景视频编码方法,其特征在于,所述步骤S1中采用改进的中值法对视频序列进行背景建模,生成背景图像。

3.根据权利要求2所述的一种基于背景建模的全景视频编码方法,其特征在于,所述步骤S1具体为:

4.根据权利要求1所述的一种基于背景建模的全景视频编码方法,其特征在于,所述步骤S2中在英特尔商用编码框架SVT-HEVC的低延迟B结构中,将所述背景图像作为帧间预测的长期参考帧。

5.根据权利要求4所述的一种基于背景建模的全景视频编码方法,其...

【技术特征摘要】

1.一种基于背景建模的全景视频编码方法,其特征在于,所述方法为:

2.根据权利要求1所述的一种基于背景建模的全景视频编码方法,其特征在于,所述步骤s1中采用改进的中值法对视频序列进行背景建模,生成背景图像。

3.根据权利要求2所述的一种基于背景建模的全景视频编码方法,其特征在于,所述步骤s1具体为:

4.根据权利要求1所述的一种基于背景建模的全景视频编码方法,其特征在于,所述步骤s2中在英特尔商用编码框架svt-hevc的低延迟b结构中,将所述背景图像作为帧间预测的长期参考帧。

5.根据权利要求4所述的一种基于背景建模的全景视频编码方法,其特征在于,将所述背景图像作为帧间预测的长期参考帧具体为:

6.根据权利要求...

【专利技术属性】
技术研发人员:范晓鹏王昶力王智涛王兴涛
申请(专利权)人:哈尔滨工业大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1