基于视频预测的视频编码方法技术

本发明专利技术涉及一种基于视频预测的视频编码方法，包括以下步骤：步骤S1：对待处理视频已编码的视频重建帧进行深度估计，预测出其对应的深度图；步骤S2：根据得到深度图来预测当前正在编码的视频帧，得到其预测图像；步骤S3：将得到的预测图像作为参考帧加入到视频编码过程中。本发明专利技术能够有效预测由相机运动引起的背景像素运动，达到更高的压缩效率。达到更高的压缩效率。达到更高的压缩效率。

【技术实现步骤摘要】
基于视频预测的视频编码方法


[0001]本专利技术涉及图像处理
，具体涉及一种基于视频预测的视频编码方法。

技术介绍

[0002]帧间预测是视频编码最重要的技术之一，它利用帧与帧之间的相关性去除视频中存在的时域冗余。具体而言，在帧间预测过程中，使用已编码的重建图像来预测待编码的当前图像，这时候只需要对少量预测信息以及残差信息进行编码，从而大幅度提高压缩效率。
[0003]传统的帧间预测方法比如运动估计和运动补偿通常适用于静止相机的应用场景，此时在编码端直接使用重建图像作为参考帧非常有效。然而，在高速运动的远程驾驶场景下，即使是静止的背景，相机的运动使得已编码的重构图像与待编码图像之间也存在由投影变换引起的像素运动。因此，现有的帧间预测方法对于远程驾驶场景的编码性能有待进一步提高。

技术实现思路

[0004]有鉴于此，本专利技术的目的在于提供一种基于视频预测的视频编码方法，能够有效预测由相机运动引起的背景像素运动，达到更高的压缩效率。
[0005]为实现上述目的，本专利技术采用如下技术方案：
[000本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于视频预测的视频编码方法，其特征在于，包括以下步骤：步骤S1：对待处理视频已编码的视频重建帧进行深度估计，预测出其对应的深度图；步骤S2：根据得到深度图来预测当前正在编码的视频帧，得到其预测图像；步骤S3：将得到的预测图像作为参考帧加入到视频编码过程中。2.根据权利要求1所述的基于视频预测的视频编码方法，其特征在于，所述步骤S1具体为：步骤S11：采用光流神经网络对第n
‑
1帧和第n
‑
2帧重建图像进行点匹配；步骤S12：采用三角化方法估计第n
‑
1帧的深度图像。3.根据权利要求2所述的基于视频预测的视频编码方法，其特征在于，所述步骤S11具体为：将第n
‑
1帧和第n
‑
2帧输入光流神经网络中，并将网络输出的光流信息转化为对应匹配点的坐标。4.根据权利要求2所述的基于视频预测的视频编码方法，其特征在于，所述步骤S12具体为：d1p1＝d2R2→1p2+T2→1其中，d1和d2分别表示第n
‑
1帧和第n
‑
2帧的深度值，p1和p2表示匹配点的坐标，R2→1和T2→1表示相机从第n
‑
2帧到第n
‑
1帧的旋转和位移矩阵。5.根据权利要求1所述的基于视频预测的视频编码方法，其特征在于，所述步骤S2具体为：步骤S21：根据得到深度图，利用对应的深度值将图像上的点投影到空间中；步骤S22：通过相机的运动信息，对坐标系进行转换得到其在第n帧坐标系下的三维坐标；步骤S23：将得到的三维坐标投影回图像平面，得到p
n
‑1在第n帧图像上的投影坐标步骤S24：根据得到的投影坐标通过插值过程得到预测的第n帧。6.根据权利要求5所述的基于视频预测的视频编码方...

【专利技术属性】
技术研发人员：陈志峰，方正，郭恩特，杨晶晶，
申请(专利权)人：福州大学，
类型：发明
国别省市：