带有超前循环模块的在线视频去噪系统技术方案

一种带有超前循环模块的在线视频去噪系统，属于视频去噪技术领域。本发明专利技术针对现有基于双向循环神经网络的视频去噪系统不能在线处理的问题。包括前向循环模块，用于对当前帧和相邻前一帧噪声图像及相邻前一帧噪声图像的前向特征进行处理，获得当前帧噪声图像的前向特征；超前循环模块，用于对相邻选定未来帧和相邻选定未来帧的前一帧噪声图像及相邻选定未来帧的前一帧噪声图像的超前特征进行处理，获得相邻选定未来帧噪声图像的超前特征；对齐模块，用于将未来帧超前特征从未来帧噪声图像对齐到当前帧噪声图像，获得对齐后的超前特征；解码模块，用于将当前帧前向特征和对齐后的超前特征进行融合，得到当前帧的去噪图像。本发明专利技术用于在线视频去噪。本发明专利技术用于在线视频去噪。本发明专利技术用于在线视频去噪。

【技术实现步骤摘要】
带有超前循环模块的在线视频去噪系统


[0001]本专利技术涉及带有超前循环模块的在线视频去噪系统，属于视频去噪


技术介绍

[0002]视频去噪旨在从噪声视频中恢复出清晰视频。视频中产生噪声的主要原因是录制设备较差或处于低光环境，随着视频应用(如直播，在线会议等)的发展和流行，通过视频去噪获取高质量的视频内容成为研究的热点。
[0003]近年来，基于神经网络的图像去噪方法取得了较好的效果，但是不同网络结构仍然存在着各自的缺点。例如卷积神经网络不能利用长距离时序信息；单向循环神经网络不能利用未来时序信息；双向循环神经网络不能进行在线处理，无法用于在线视频任务。因此，如何较好地利用时序信息，同时能够在线处理，是目前亟待解决的问题。

技术实现思路

[0004]针对现有基于双向循环神经网络的视频去噪系统不能在线处理的问题，本专利技术提供一种带有超前循环模块的在线视频去噪系统。
[0005]本专利技术的一种带有超前循环模块的在线视频去噪系统，包括，
[0006]前向循环模块，用于对当前帧噪声图像和相邻前一帧本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种带有超前循环模块的在线视频去噪系统，其特征在于包括，前向循环模块(100)，用于对当前帧噪声图像和相邻前一帧噪声图像及相邻前一帧噪声图像的前向特征进行处理，获得当前帧噪声图像的前向特征；超前循环模块(200)，用于对相邻选定未来帧噪声图像和相邻选定未来帧的前一帧噪声图像及相邻选定未来帧的前一帧噪声图像的超前特征进行处理，获得相邻选定未来帧噪声图像的超前特征；对齐模块(300)，用于将未来帧噪声图像的超前特征从未来帧噪声图像对齐到当前帧噪声图像，获得对齐后的超前特征；解码模块(400)，用于将当前帧噪声图像的前向特征和对齐后的超前特征进行融合，得到当前帧的去噪图像。2.根据权利要求1所述的带有超前循环模块的在线视频去噪系统，其特征在于，所述前向循环模块(100)包括：前向光流网络，以时刻t对应的噪声图像作为当前帧噪声图像；由时刻t噪声图像和时刻t
‑
1噪声图像，得到时刻t到时刻t
‑
1的光流；前向反向形变单元，根据时刻t到时刻t
‑
1的光流对时刻t
‑
1的前向特征采用反向形变方法对齐到时刻t，得到时刻t
‑
1到t的前向特征；F个前向残差块，对当前帧噪声图像和时刻t
‑
1到t的前向特征依次进行处理，得到时刻t的前向特征；F为正整数。3.根据权利要求2所述的带有超前循环模块的在线视频去噪系统，其特征在于，所述超前循环模块(200)包括：超前光流网络，由时刻t+k
‑
1噪声图像和时刻t+k噪声图像，得到时刻t+k
‑
1到时刻t+k的光流；k为选定未来帧的帧数；扩大边缘的前向形变单元，根据时刻t+k
‑
1到时刻t+k的光流对时刻t+k
‑
1超前特征采用扩大边缘的前向形变方法对齐到时刻t+k，得到时刻t+k
‑
1到时刻t+k的超前特征；边缘分离模块，将时刻t+k
‑
1到时刻t+k的超前特征进行内容和边缘的分离，得到时刻t+k
‑
1到时刻t+k超前特征的内容和时刻t+k
‑
1到时刻t+k超前特征的边缘；L个超前残差块，对时刻t+k噪声图像和时刻t+k
‑
1到时刻t+k超前特征的内容依次进行处理，得到时刻t+k超前特征；L为正整数。4.根据权利要求3所述的带有超前循环模块的在线视频去噪系统，其特征在于，所述对齐模块(300)包括k
‑

【专利技术属性】
技术研发人员：武小荷，李俊义，魏于翔，左旺孟，
申请(专利权)人：哈尔滨工业大学，
类型：发明
国别省市：