一种视频帧预测方法、装置及终端设备制造方法及图纸

本发明专利技术适用于视频压缩技术领域，提供了一种视频帧预测方法、装置及终端设备，所述方法包括：计算当前帧和当前帧前一帧的初始光流；根据所述初始光流和当前帧前一帧得到初始预测帧；将所述当前帧和初始预测帧输入运动编解码网络中得到所述初始光流中每个像素点对应的分离卷积核；对所述每个像素点对应的分离卷积核进行统计，得到每个分离卷积核的重心坐标；将所述初始光流中每个像素分别与对应的分离卷积核的重心坐标相加得到修复光流；根据所述修复光流和当前帧前一帧得到最终预测帧。本发明专利技术基于分离卷积核，在每个待预测点处计算一个光流修正，从而改善光流法的预测效果，提升视频压缩性能。

A video frame prediction method, device and terminal equipment

【技术实现步骤摘要】
一种视频帧预测方法、装置及终端设备
本专利技术属于视频压缩
，尤其涉及一种视频帧预测方法、装置及终端设备。
技术介绍
在视频压缩过程中，使用光流去除时域冗余是一个非常有效的方法，然而其缺点在于不能有效处理旋转，缩放等非刚体运动。分离卷积通过在每个像素点计算自适应卷积核的方法可以弥补这一缺点，但是会导致模糊。因此，有必要提出一个新的技术方案，来解决上述问题。
技术实现思路
有鉴于此，本专利技术实施例提供了一种视频帧预测方法、装置及终端设备，以解决现有技术中视频压缩性能低的问题。本专利技术实施例的第一方面提供了一种视频帧预测方法，包括：计算当前帧和当前帧前一帧的初始光流；根据所述初始光流和当前帧前一帧得到初始预测帧；将所述当前帧和初始预测帧输入运动编解码网络中得到所述初始光流中每个像素点对应的分离卷积核；对所述每个像素点对应的分离卷积核进行统计，得到每个分离卷积核的重心坐标；将所述初始光流中每个像素分别与对应的分离卷积核的重心坐标相加得到修复光流；根据所述修复本文档来自技高网...

【技术保护点】
1.一种视频帧预测方法，其特征在于，包括：/n计算当前帧和当前帧前一帧的初始光流；/n根据所述初始光流和当前帧前一帧得到初始预测帧；/n将所述当前帧和初始预测帧输入运动编解码网络中得到所述初始光流中每个像素点对应的分离卷积核；/n对所述每个像素点对应的分离卷积核进行统计，得到每个分离卷积核的重心坐标；/n将所述初始光流中每个像素分别与对应的分离卷积核的重心坐标相加得到修复光流；/n根据所述修复光流和当前帧前一帧得到最终预测帧。/n

【技术特征摘要】
1.一种视频帧预测方法，其特征在于，包括：
计算当前帧和当前帧前一帧的初始光流；
根据所述初始光流和当前帧前一帧得到初始预测帧；
将所述当前帧和初始预测帧输入运动编解码网络中得到所述初始光流中每个像素点对应的分离卷积核；
对所述每个像素点对应的分离卷积核进行统计，得到每个分离卷积核的重心坐标；
将所述初始光流中每个像素分别与对应的分离卷积核的重心坐标相加得到修复光流；
根据所述修复光流和当前帧前一帧得到最终预测帧。


2.如权利要求1所述的视频帧预测方法，其特征在于，所述计算当前帧和当前帧前一帧的初始光流包括：
计算当前帧图像的像素与当前帧前一帧图像的像素的空间位置映射关系，得到光流信息。


3.如权利要求1所述的视频帧预测方法，其特征在于，所述根据所述初始光流和当前帧前一帧得到初始预测帧包括：
根据所述初始光流对当前帧前一帧进行warp操作得到初始预测帧。


4.如权利要求1所述的视频帧预测方法，其特征在于，所述根据所述修复光流和当前帧前一帧得到最终预测帧包括：
根据所述修复光流对当前帧前一帧进行warp操作得到最终预测帧。


5.如权利要求1所述的视频帧预测方法，其特征在于，在所述根据所述修复光流和当前帧前一帧得到最终预测帧后，还包括：
将所述最终预测帧与所述当前帧相减得到残差；
将所述残差输入残差压缩网络得到解压残差；
将所述最终预测帧与所述解压残差相加得到当前帧的重构帧。<...

【专利技术属性】
技术研发人员：孙庆强，
申请(专利权)人：合肥图鸭信息科技有限公司，
类型：发明
国别省市：江苏;32