视频超分辨率重建方法、装置、电子设备以及存储介质制造方法及图纸

技术编号:41176007 阅读:16 留言:0更新日期:2024-05-07 22:12
本申请提供一种视频超分辨率重建方法、装置、电子设备以及存储介质。方法包括:获取待重建视频的视频帧,提取所述视频帧对应的浅层特征;基于当前视频帧的浅层特征提取所述当前视频帧的多维度深层特征,并对所述多维度深层特征、所述浅层特征和所述当前视频帧进行特征融合处理,得到所述当前视频帧的第二融合特征;确定所述当前视频帧对应的参考帧,基于所述第二融合特征对所述当前视频帧和所述参考帧进行融合处理,得到第三融合特征;基于所述第三融合特征进行重建处理得到重建特征,以基于所述重建特征执行视频重建操作,提高了重建结果的视频质量以及重建效率。

【技术实现步骤摘要】

本申请涉及计算机视觉技术,尤其涉及一种视频超分辨率重建方法、装置、电子设备以及存储介质


技术介绍

1、随着高清和超高清设备的普及,用户端显示设备的分辨率已经普遍提升到2k甚至更高水平。相对早期的游戏或电影在当下高分辨率设备下无法得到很好的表现,这促使了很多经典游戏和电影的高清重制工作被提上来日程。

2、因此,有很多视频超分辨率重建算法被提出。具体的,超分辨率技术(super-resolution)通过从退化的(如,模糊、噪声、下采样和失真)低分辨率(lr)图像中恢复出其对应的一个或多个清晰锐利的高分辨率(hr)图像,从而可实现多媒体内容的高清重建工作。

3、但是,现有的视频超分辨率重建算法中没有充分利用待重建视频中的视频信息进行重建,导致得到的重建视频清晰度有限,视觉效果较差。


技术实现思路

1、本申请提供一种视频超分辨率重建方法、装置、电子设备以及存储介质,用以解决现有技术的视频超分辨率重建算法存在重建效果差和重建效率低问题,提高了重建结果的视频质量以及重建效率

2、本文档来自技高网...

【技术保护点】

1.一种视频超分辨率重建方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述基于当前视频帧的浅层特征提取所述当前视频帧的多维度深层特征,并对所述多维度深层特征和所述浅层特征进行特征融合处理得到所述当前视频帧的第二融合特征,包括:

3.根据权利要求2所述的方法,其特征在于,所述对所述浅层特征进行多维度深层特征提取,得到所述当前视频帧的局部特征和非局部特征,并对所述局部特征和所述非局部特征进行特征融合处理,得到所述当前视频帧的第一融合特征,包括:

4.根据权利要求3所述的方法,其特征在于,所述非局部注意力网络包括通道非注意力网络模块、时...

【技术特征摘要】

1.一种视频超分辨率重建方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述基于当前视频帧的浅层特征提取所述当前视频帧的多维度深层特征,并对所述多维度深层特征和所述浅层特征进行特征融合处理得到所述当前视频帧的第二融合特征,包括:

3.根据权利要求2所述的方法,其特征在于,所述对所述浅层特征进行多维度深层特征提取,得到所述当前视频帧的局部特征和非局部特征,并对所述局部特征和所述非局部特征进行特征融合处理,得到所述当前视频帧的第一融合特征,包括:

4.根据权利要求3所述的方法,其特征在于,所述非局部注意力网络包括通道非注意力网络模块、时间非注意力网络模块和/或空间非注意力网络模块;

5.根据权利要求1所述的方法,其特征在于,所述确定所述当前视频帧对应的参考帧,包括:

6.根据权利要求1所述的方法,其特征在于,所述基于所述...

【专利技术属性】
技术研发人员:黄良王华君唐宗福周清琳刘琼曾勇松
申请(专利权)人:深圳市裕同包装科技股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1