一种视频超分辨率方法、装置、设备及存储介质制造方法及图纸

技术编号:46629128 阅读:0 留言:0更新日期:2025-10-14 21:27
本发明专利技术涉及数字图像处理技术领域,公开了一种视频超分辨率方法、装置、设备及存储介质。该方法包括:将高质量视频输入低质视频自动生成网络进行逐帧处理,得到低质量视频;将随机噪声图像与低质量视频输入光流作用去噪网络,利用低质量视频与随机噪声图像对光流作用去噪网络进行训练,对光流引导与向量相似度引导进行动态调整,得到训练后的光流作用去噪网络;获取待超分的低质量视频,将待超分的低质量视频输入训练后的光流作用去噪网络,得到超分后的高质量视频。本申请能够对特定类型的视频进行预训练,产生较为有效的数据退化,对光流引导与向量相似度引导进行动态调整,从而产生更好的超分辨率效果。

【技术实现步骤摘要】

本专利技术涉及数字图像处理,尤其涉及一种视频超分辨率方法、装置、设备及存储介质


技术介绍

1、视频超分辨率是一种面向视频的端到端处理技术,通过算法将低分辨率视频提升为高分辨率,增强视频的清晰度和细节,改善视觉体验。视频超分辨率的主要难点在于图像超分辨率算法和视频时序信息保持,图像超分辨率算法需要确保视频的每一帧经过超分之后清晰度得到改善并且不丢失原来的信息,视频时序信息保持是指经过超分之后视频的相邻帧是连贯的,不会有突然的变化。

2、现有技术中视频超分辨率的一般算法存在以下缺点:(1)未针对目标视频类型优化,导致超分效果有限;(2)基于规则的退化方法产生的低质数据与真实低质视频差异大,容易对模型的学习产生误导;(3)时序保持策略中,光流特征与向量相似度特征引导的分配缺乏动态调整机制。以上缺点导致超分辨率效果欠佳,生成的超分视频质量较低。


技术实现思路

1、有鉴于此,本专利技术的目的是为了克服现有技术中的不足,提供一种视频超分辨率方法、装置、设备及存储介质。

2、本专利技术提供如下技术本文档来自技高网...

【技术保护点】

1.一种视频超分辨率方法,其特征在于,所述方法包括:

2.根据权利要求1所述的视频超分辨率方法,其特征在于,所述低质视频自动生成网络包括编码模块、向量化层与解码器,所述通过所述低质视频自动生成网络对所述高质量视频进行逐帧处理,得到对应的低质量视频,包括:

3.根据权利要求2所述的视频超分辨率方法,其特征在于,所述编码模块包括第一编码器和第二编码器,所述双通道编码特征包括第一编码特征和第二编码特征,所述将每帧所述高质量图像输入所述编码模块,执行编码操作,得到每帧所述高质量图像对应的双通道编码特征,包括:

4.根据权利要求1所述的视频超分辨率方法,其特征在...

【技术特征摘要】

1.一种视频超分辨率方法,其特征在于,所述方法包括:

2.根据权利要求1所述的视频超分辨率方法,其特征在于,所述低质视频自动生成网络包括编码模块、向量化层与解码器,所述通过所述低质视频自动生成网络对所述高质量视频进行逐帧处理,得到对应的低质量视频,包括:

3.根据权利要求2所述的视频超分辨率方法,其特征在于,所述编码模块包括第一编码器和第二编码器,所述双通道编码特征包括第一编码特征和第二编码特征,所述将每帧所述高质量图像输入所述编码模块,执行编码操作,得到每帧所述高质量图像对应的双通道编码特征,包括:

4.根据权利要求1所述的视频超分辨率方法,其特征在于,所述光流作用去噪网络包括光流计算层与若干个串联的单层去噪子网络,所述利用所述低质量视频与所述随机噪声图像对所述光流作用去噪网络进行训练,并对光流引导与向量相似度引导进行动态调整,得到训练后的光流作用去噪网络,包括:

5.根据权利要求4所述的视频超分辨率方法,其特征在于,所述单层去噪子网络包括时间一致性对齐模块、扩散模型与引导分配调度器,所述扩散模型包括残差层、向量合并层、自注意力层、向量拆分层与交叉注意力层,所述将所述随机噪声图像、所述低...

【专利技术属性】
技术研发人员:黄望梅炳寅朱理
申请(专利权)人:马栏山音视频实验室
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1