一种视频帧预测方法、装置及终端设备制造方法及图纸

本发明专利技术适用于视频压缩技术领域，提供了一种视频帧预测方法、装置及终端设备，所述方法包括：计算当前帧和参考帧之间的光流信息；将所述光流信息、参考帧和当前帧输入运动补偿网络得到运动补偿特征信息；对所述运动补偿特征信息进行熵编码和熵解码后输入所述运动补偿网络得到重构光流信息和分离卷积核；基于所述重构光流信息和分离卷积核得到当前帧的预测帧。本发明专利技术通过结合光流和分离卷积来使得分离卷积核具有自适应位置映射的效果，从而可减小分离卷积核的大小，提高了视频预测的性能。

A video frame prediction method, device and terminal equipment

【技术实现步骤摘要】
一种视频帧预测方法、装置及终端设备
本专利技术属于视频压缩
，尤其涉及一种视频帧预测方法、装置及终端设备。
技术介绍
目前公开的视频压缩技术中主要包含通过光流及分离卷积两类来进行预测，然而光流法适合对平移等刚体运动进行预测，而分离卷积适合对旋转、缩放等非刚体运动进行预测，当视频中既包含刚体运动和非刚体运动时，无论采用哪种方法都不能很好地进行预测，从而导致视频预测性能低。因此，有必要提出一种新的技术方案，以解决上述问题。
技术实现思路
有鉴于此，本专利技术实施例提供了一种视频帧预测方法及终端设备，以解决现有技术中视频预测性能低的问题。本专利技术实施例的第一方面提供了一种视频帧预测方法，包括：计算当前帧和参考帧之间的光流信息；将所述光流信息、参考帧和当前帧输入运动补偿网络得到运动补偿特征信息；对所述运动补偿特征信息进行熵编码和熵解码后输入所述运动补偿网络得到重构光流信息和分离卷积核；基于所述重构光流信息和分离卷积核得到当前帧的预测帧。本专利技术实施例的第二方面提供了一本文档来自技高网...

【技术保护点】
1.一种视频帧预测方法，其特征在于，包括：/n计算当前帧和参考帧之间的光流信息；/n将所述光流信息、参考帧和当前帧输入运动补偿网络得到运动补偿特征信息；/n对所述运动补偿特征信息进行熵编码和熵解码后输入所述运动补偿网络得到重构光流信息和分离卷积核；/n基于所述重构光流信息和分离卷积核得到当前帧的预测帧。/n

【技术特征摘要】
1.一种视频帧预测方法，其特征在于，包括：
计算当前帧和参考帧之间的光流信息；
将所述光流信息、参考帧和当前帧输入运动补偿网络得到运动补偿特征信息；
对所述运动补偿特征信息进行熵编码和熵解码后输入所述运动补偿网络得到重构光流信息和分离卷积核；
基于所述重构光流信息和分离卷积核得到当前帧的预测帧。


2.如权利要求1所述的视频帧预测方法，其特征在于，所述计算当前帧和参考帧之间的光流信息包括：
计算当前帧图像的像素与参考帧图像的像素的空间位置映射关系，得到光流信息。


3.如权利要求1所述的视频帧预测方法，其特征在于，所述将所述光流信息、参考帧和当前帧输入运动补偿网络得到运动补偿特征信息包括：
将所述光流信息、参考帧和当前帧输入运动补偿网络进行下采样操作和卷积操作后得到运动补偿特征信息。


4.如权利要求1所述的视频帧预测方法，其特征在于，所述基于所述重构光流信息和分离卷积核得到当前帧的预测帧包括：
根据所述重构光流信息对所述参考帧进行warp操作后得到warp预测帧；
将所述warp预测帧与所述分离卷积核进行分离卷积操作得到当前帧的预测帧。


5.如权利要求1所述的视频帧预测方法，其特征在于，在所述基于所述重构光流信息和分离卷积核得到当前帧的预测帧后，还包括：
将所述当前帧的预测帧与所述当前帧相减得到残差；
将所述残差输入残差压缩网络得到解压残差；
将所述当前帧的...

【专利技术属性】
技术研发人员：李东阳，
申请(专利权)人：合肥图鸭信息科技有限公司，
类型：发明
国别省市：江苏;32