一种视频处理方法、装置、计算机设备及存储介质制造方法及图纸

本申请公开了一种视频处理方法、装置、计算机设备及存储介质，该方法包括获得解码后的当前视频帧；将当前视频帧作为输入数据，输入至预训练的超分辨率网络模型，超分辨率网络模型包括至少一个以U型网络结构设计的轻量网络模块；采用超分辨率网络模型对当前视频帧进行处理，获得具备目标分辨率的目标视频帧。利用该方法，所采用的超分辨率网络模型具备有多个U型网络结构的轻量网络模块，通过多个轻量网络模块的级联，实现了模型结构的简化，加快了模型运算速度的同时也提升了模型性能，也提高了模型到移动终端等边端设备上的可移植性；从而保证了视频数据的实时有效处理，同时还保证恢复视频分辨率后的视频具备更优的播放质量。恢复视频分辨率后的视频具备更优的播放质量。恢复视频分辨率后的视频具备更优的播放质量。

【技术实现步骤摘要】
一种视频处理方法、装置、计算机设备及存储介质


[0001]本申请涉及图像处理
，尤其涉及一种视频处理方法、装置、计算机设备及存储介质。

技术介绍

[0002]对于在线视频会议、视频直播等视频传输应用场景，需要保证传输视频数据的实时性。然而，当网络信号差，或者传输的数据超过带宽的承受能力时，在线视频会议等相关应用会受到严重影响。为保证视频传输的实时性，需要在发送端对视频数据进行压缩传输，然后在接收端对接收的视频进行信息恢复以展示视频内容。
[0003]在保证视频传输实时性的现有技术方案中，其中一类方案是将原始视频进行低码率压缩编码，通过网络传输后由接收端从低码率编码数据中解码原始视频。该种方案的问题在于：低码率压缩编码会导致原始视频损失大量的信息，并且会引入明显的压缩伪影，影响接收端所解码视频的视频质量，难以满足实际的使用需求。
[0004]在上述问题的基础上，提出的改进方案为发送端先将原始视频进行下采样压缩，然后对低分辨率视频进行编码压缩并传输，接收端则使用超分辨率方法对接收视频进行上采样，从而恢复到原始视频的分辨率大小。本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种视频处理方法，其特征在于，包括：获得解码后的当前视频帧，所述当前视频帧在发送端通过压缩编码后传输至执行终端；将所述当前视频帧作为输入数据，输入至预训练的超分辨率网络模型，所述超分辨率网络模型包括至少一个以U型网络结构设计的轻量网络模块；采用所述超分辨率网络模型对所述当前视频帧进行处理，获得具备目标分辨率的目标视频帧。2.根据权利要求1所述的方法，其特征在于，U型网络结构的所述轻量网络模块包括：下采样网络单元和上采样网络单元；所述下采样网络单元及所述上采样网络单元中分别包括设定个数的下采样卷积层和上采样组合层；各所述上采样组合层由一个上采样卷积层和一个像素重组pixelshuffle层构成；各所述下采样卷积层按由上自下顺序依次连接，各所述上采样组合层按由下自上顺序依次连接，且一个下采样卷积层与一个上采样组合层中的上采样卷积层对应，并建立有跳连接。3.根据权利要求2所述的方法，其特征在于，在一个轻量网络模块中，各所述下采样卷积层分别用于将下采样输入特征图的图像尺寸缩小第一倍数，以及将下采样输入特征图的通道量增大第二倍数，输出下采样特征图；各所述下采样卷积层的下采样输入特征图为：前一下采样卷积层输出的下采样特征图，或者，前一轻量网络模块输出的模块特征图，或者，当前视频帧的原始特征图；各所述上采样组合层分别用于将上采样输入特征图的图像尺寸增大所述第一倍数，以及将下采样输入特征图的通道量缩小第二倍数，输出上采样特征图；首个上采样组合层的上采样输入特征图为：末个下采样卷积层输出的下采样特征图；非首个上采样组合层关联的上采样输入特征图为：前一上采样组合层所输出上采样特征图与所关联各下采样卷积层所输出下采样特征图的拼接。4.根据权利要求2所述的方法，其特征在于，所述超分辨率网络模型还包括：卷积
‑
pixelshuffle组合层，所述卷积
‑
pixelshuffle组合层与末个轻量网络模...

【专利技术属性】
技术研发人员：张玉兵，
申请(专利权)人：广州视源人工智能创新研究院有限公司，
类型：发明
国别省市：