一种视频插帧方法及装置制造方法及图纸

本发明专利技术公开了一种视频插帧方法及装置，涉及视频处理技术领域，主要目的在于针对视频中的运动对象生成清晰的视频插帧。本发明专利技术主要的技术方案为：获取视频中相邻的至少两帧图像，确定所述图像中的运动对象；利用光流信息确定所述运动对象在目标时间点时的图像位置；基于预训练模型以及所述图像位置生成所述目标时间点对应的插帧图像，所述预训练模型为设置指定损失函数的模型，所述指定损失函数用于增加所述运动对象在所述插帧图像中的清晰度。本发明专利技术用于生成视频插帧。

【技术实现步骤摘要】
一种视频插帧方法及装置
本专利技术涉及视频处理
，尤其涉及一种视频插帧方法及装置。
技术介绍
随着显示技术的发展，电子消费市场中出现了各种尺寸、分辨率的高性能终端设备，而目前所使用的视频编解码与传输技术并不能满足这些设备的显示需求，因此，需要在显示时进行时域和空域分辨率增强的后处理过程来满足设备的视频显示。从时域角度看，可以在解码端通过插帧实现视频帧率的转换，以提高图像显示的流畅性。然而，通过帧重复、帧平均得到的内插帧在图像清晰度上会有所降低，特别是对于视频图像中存在有运动对象时，其得到的视频插帧就会产生明显的运动抖动与模糊。
技术实现思路
鉴于上述问题，本专利技术提出了一种视频插帧方法及装置，主要目的在于针对视频中的运动对象生成清晰的视频插帧。为达到上述目的，本专利技术主要提供如下技术方案：第一方面，本专利技术提供一种视频插帧方法，包括：获取视频中相邻的至少两帧图像，确定所述图像中的运动对象；利用光流信息确定所述运动对象在目标时间点时的图像位置；基于预训练模型以及所述图本文档来自技高网...

【技术保护点】
1.一种视频插帧方法，所述方法包括：/n获取视频中相邻的至少两帧图像，确定所述图像中的运动对象；/n利用光流信息确定所述运动对象在目标时间点时的图像位置；/n基于预训练模型以及所述图像位置生成所述目标时间点对应的插帧图像，所述预训练模型为设置指定损失函数的模型，所述指定损失函数用于增加所述运动对象在所述插帧图像中的清晰度。/n

【技术特征摘要】
1.一种视频插帧方法，所述方法包括：
获取视频中相邻的至少两帧图像，确定所述图像中的运动对象；
利用光流信息确定所述运动对象在目标时间点时的图像位置；
基于预训练模型以及所述图像位置生成所述目标时间点对应的插帧图像，所述预训练模型为设置指定损失函数的模型，所述指定损失函数用于增加所述运动对象在所述插帧图像中的清晰度。


2.根据权利要求1所述的方法，其特征在于，所述方法还包括：
设置所述预训练模型的指定损失函数，所述指定损失函数至少包括两部分，其中，第一分部用于评价插帧图像与标准图像的差异，第二部分用于加所述运动对象在所述插帧图像中的清晰度。


3.根据权利要求2所述的方法，其特征在于，所述第一部分采用L2范数损失函数；所述第二部分采用基于全变分正则化项设置的损失函数，其中，所述第二部分的取值是全变分正则化项的相反数。


4.根据权利要求3所述的方法，其特征在于，所述指定损失函数的表达式为：
L(I)＝∑j∑i||I(i,j)-I'(i,j)||2-∑j∑i(||I(i+1,j)-I(i,j)||+||I(i,j+1)-I(i,j)||)
其中，L(I)表示插帧图像I的损失函数，I’表示标准图像，i、j表示图像中像素点的坐标。


5.根据权利要求2所述的方法，其特征在于，所述第二部分采用基于Laplacian算子或能量梯度的损失函数，所述第...

【专利技术属性】
技术研发人员：张文浩，
申请(专利权)人：京东方科技集团股份有限公司，
类型：发明
国别省市：北京;11