一种画面补帧方法技术

本申请公开了一种画面补帧方法

【技术实现步骤摘要】
一种画面补帧方法、装置、设备及可读存储介质


[0001]本申请涉及图像处理
，尤其涉及一种画面补帧方法
、
装置
、
设备及可读存储介质
。

技术介绍

[0002]目前，现在随着元宇宙技术的飞速发展，元宇宙技术已经应用到银行业务系统中，大大提升了银行用户对银行业务办理的体验感
。
对于元宇宙来说，高质量的模型，流畅的画面是元宇宙的最基础，只有高质量的画面流畅的运动才能真正让元宇宙脱离低级的界面虚假元宇宙
。
但是受制于元宇宙的目标对象极其广泛，网络环境以及
3d
场景测算的巨大压力，服务器很难以支撑大量用户同时在线时画面的流畅度需求，往往会因为流畅度较低，导致的用户体验下降
。

技术实现思路

[0003]本申请提供了一种画面补帧方法
、
装置
、
设备及可读存储介质，如下：
[0004]一种画面补帧方法，包括：
[0005]获取目标视频的原始画面帧以及原始画面帧的帧数据，所述原始画面帧的帧数据包括所述原始画面帧的序位和目标区域的定位数据，所述目标区域为包括目标对象的区域画面；
[0006]基于所述原始画面帧的帧数据获取所述目标对象的移动路径数据；
[0007]依据所述目标视频的帧频率确定多个补充位置；
[0008]基于各个所述补充位置和所述目标对象的移动路径数据，获取各个所述补充位置的补充画面帧的动态区域；
[0009]基于同一个所述补充位置的补充画面帧的静态区域和动态区域，生成各个所述补充位置对应的补充画面帧；
[0010]基于所述补充画面帧和所述补充画面帧的补充位置对所述目标视频进行画面补帧
。
[0011]可选地，获取目标视频的原始画面帧以及原始画面帧的帧数据，包括：
[0012]获取所述目标视频的帧频率；
[0013]若所述目标视频的帧频率小于第一预设帧频率，获取所述目标视频的各帧所述原始画面帧的目标区域的定位数据，所述目标区域为包含所述目标对象的最小矩形区域，所述定位数据包括所述最小矩形区域的预设的定位点的坐标数据
。
[0014]生成所述目标视频的原始画面帧以及所述原始画面帧的帧数据
。
[0015]可选地，基于所述原始画面帧的帧数据获取所述目标对象的移动路径数据，包括：
[0016]对于每一帧所述原始画面帧，基于所述目标区域的定位数据定位得到所述目标区域；
[0017]从所述目标区域中识别所述目标对象的关键点位，得到所述关键点位的坐标数
据；
[0018]基于所述原始画面帧的序位以及所述目标对象的各个所述关键点位的坐标数据，生成所述目标对象的移动路径数据，所述目标对象的移动路径数据包括对象移动轨迹和
/
或点位移动轨迹
。
[0019]可选地，依据所述目标视频的帧频率确定多个补充位置，包括：
[0020]基于预设的补帧规则以及所述目标视频的帧频率，确定目标帧频率，所述补帧规则包括帧频率范围和目标帧频率的对应关系；
[0021]基于所述目标视频的帧频率和所述目标帧频率，计算目标补帧数量；
[0022]基于所述目标补帧数量，获取多个所述补充位置
。
[0023]可选地，补帧规则包括：
[0024]当所述目标视频的帧频率小于第二预设帧频率时，所述目标帧频率为第二预设帧频率，当所述目标视频的帧频率不小于所述第二预设帧频率且小于所述第一预设帧频率时，所述目标帧频率为所述第一预设帧频率
。
[0025]可选地，方法在所述基于同一个所述补充位置的补充画面帧的静态区域和动态区域，生成各个所述补充位置对应的补充画面帧之前，还包括：
[0026]对于每一所述原始画面帧，获取所述原始画面帧中的非目标区域的定位数据，所述非目标区域为所述原始画面帧中除了所述目标区域以外的区域；
[0027]基于所述原始画面帧的序位和所述非目标区域的定位数据，将所述非目标区域划分得到静态区域组序列，所述静态区域组序列包括依序排序的静态区域组，每一组所述静态区域组包括依序排序的所述原始画面帧的非目标区域，其中，属于同一所述静态区域组的非目标区域的画面相似度大于预设的静态阈值；
[0028]基于各个所述补充位置和所述静态区域组序列，获取每一所述补充位置的补充画面帧的静态区域
。
[0029]可选地，基于各个所述补充位置和所述静态区域组序列，获取每一所述补充位置的补充画面帧的静态区域，包括：
[0030]对于每个所述补充位置，将所述补充位置所在的静态区域组中的非目标区域，作为所述补充画面帧的静态区域
。
[0031]一种画面补帧装置，包括：
[0032]对象区域定位单元，用于获取目标视频的原始画面帧以及原始画面帧的帧数据，所述原始画面帧的帧数据包括所述原始画面帧的序位和目标区域的定位数据，所述目标区域为包括目标对象的区域画面；
[0033]路径测算单元，用于基于所述原始画面帧的帧数据获取所述目标对象的移动路径数据；
[0034]补充位置定位单元，用于依据所述目标视频的帧频率确定多个补充位置；
[0035]动态区域生成单元，用于基于各个所述补充位置和所述目标对象的移动路径数据，获取各个所述补充位置的补充画面帧的动态区域；
[0036]补充帧生成单元，用于基于同一个所述补充位置的补充画面帧的静态区域和动态区域，生成各个所述补充位置对应的补充画面帧；
[0037]实时补帧单元，用于基于所述补充画面帧和所述补充画面帧的补充位置对所述目
标视频进行画面补帧
。
[0038]一种画面补帧设备，包括：存储器和处理器；
[0039]所述存储器，用于存储程序；
[0040]所述处理器，用于执行所述程序，实现画面补帧方法的各个步骤
。
[0041]一种可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时，实现画面补帧方法的各个步骤
。
[0042]由上述技术方案可以看出，本申请实施例提供的画面补帧方法
、
装置
、
设备及可读存储介质，获取目标视频的原始画面帧以及原始画面帧的帧数据，原始画面帧的帧数据包括原始画面帧的序位和目标区域的定位数据
。
基于原始画面帧的帧数据获取目标对象的移动路径数据
。
依据目标视频的帧频率确定多个补充位置
。
基于各个补充位置和目标对象的移动路径数据，获取各个补充位置的补充画面帧的动态区域
。
基于同一个补充位置的补充画面帧的静态区域和动态区域，生成各个补充位置对应的补充画面帧
。
基于补充画面帧和补充画面帧的补充位置对目标视频进行画面补帧，可见，本申请通过将原始画面帧划分为包括目本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.
一种画面补帧方法，其特征在于，包括：获取目标视频的原始画面帧以及原始画面帧的帧数据，所述原始画面帧的帧数据包括所述原始画面帧的序位和目标区域的定位数据，所述目标区域为包括目标对象的区域画面；基于所述原始画面帧的帧数据获取所述目标对象的移动路径数据；依据所述目标视频的帧频率确定多个补充位置；基于各个所述补充位置和所述目标对象的移动路径数据，获取各个所述补充位置的补充画面帧的动态区域；基于同一个所述补充位置的补充画面帧的静态区域和动态区域，生成各个所述补充位置对应的补充画面帧；基于所述补充画面帧和所述补充画面帧的补充位置对所述目标视频进行画面补帧
。2.
根据权利要求1所述的方法，其特征在于，所述获取目标视频的原始画面帧以及原始画面帧的帧数据，包括：获取所述目标视频的帧频率；若所述目标视频的帧频率小于第一预设帧频率，获取所述目标视频的各帧所述原始画面帧的目标区域的定位数据，所述目标区域为包含所述目标对象的最小矩形区域，所述定位数据包括所述最小矩形区域的预设的定位点的坐标数据；生成所述目标视频的原始画面帧以及所述原始画面帧的帧数据
。3.
根据权利要求2所述的方法，其特征在于，所述基于所述原始画面帧的帧数据获取所述目标对象的移动路径数据，包括：对于每一帧所述原始画面帧，基于所述目标区域的定位数据定位得到所述目标区域；从所述目标区域中识别所述目标对象的关键点位，得到所述关键点位的坐标数据；基于所述原始画面帧的序位以及所述目标对象的各个所述关键点位的坐标数据，生成所述目标对象的移动路径数据，所述目标对象的移动路径数据包括对象移动轨迹和
/
或点位移动轨迹
。4.
根据权利要求3所述的方法，其特征在于，所述依据所述目标视频的帧频率确定多个补充位置，包括：基于预设的补帧规则以及所述目标视频的帧频率，确定目标帧频率，所述补帧规则包括帧频率范围和目标帧频率的对应关系；基于所述目标视频的帧频率和所述目标帧频率，计算目标补帧数量；基于所述目标补帧数量，获取多个所述补充位置
。5.
根据权利要求4所述的方法，其特征在于，所述补帧规则包括：当所述目标视频的帧频率小于第二预设帧频率时，所述目标帧频率为第二预设帧频率，当所述目标视频的帧频率不小于所述第二预设帧频率且小于所述第一预设帧频率时，所述目标帧频率为所述第一预设帧...

【专利技术属性】
技术研发人员：吕明明，
申请(专利权)人：中国银行股份有限公司，
类型：发明
国别省市：