一种视频帧重建方法技术

本发明专利技术公开了一种视频帧重建方法,包括以下步骤：S1、将原始视频A1重构为较高分辨率的处理视频A2；S2、得到消除噪音后的处理视频A3；S3、通过直方图法来将处理视频A3分为多个短视频；S4、将每个短视频中的频域中对视频的变换值进行操作；S5、使用傅里叶变换位移的特性，测定同一短视频图像中两个相邻帧之间的频域变化和滤波值，并根据频域变化计算出其空域的位移变化，位移变化就是相邻帧之间的位移信息；S6、当得到相邻帧的位移信息后，可以对多帧图像进行数据融合，从而达到视频帧重建的目的，本发明专利技术通过使用鲁棒自适应背景模型、Hog特征和轮廓特征融合的特征提取方法对视频进行处理，可以有效的消除视频中的噪音，使得最后的结果误差小。

【技术实现步骤摘要】
一种视频帧重建方法
本专利技术涉及视频数据处理
，尤其涉及一种视频帧重建方法。
技术介绍
图像或视频中的信息对于人类来说是最直接的和最容易接触的，在视频监控方面，其摄像速度和存储容量是非常有限的，为了提高图像的分辨率，使其接近目标原型，人们利用改善硬件的方法来提高其图像的分辨率，其成本高，技术难度非常大，容易受到各种因素的影响，并且其提高有限，为了播放流式媒体的高质量视频，利用很窄的宽度，通过帧重建技术，来压缩和传输视频中的数据，为了达到使用最少的数据获得最佳的图像质量的技术，人们使用从软件方面入手，来提高图像的分辨率，考虑到计算量和重建质量，采用图像处理技术，在视频质量的提高过程中，视频帧重建是其中非常关键的一个过程，其影响着视频质量的高低。因此，我们提出了一种视频帧重建方法。
技术实现思路
本专利技术的目的是为了解决现有技术中存在的缺点，而提出的一种视频帧重建方法。为了实现上述目的，本专利技术采用了如下技术方案：一种视频帧重建方法，包括以下步骤：S1、输入原始视频A1，通过最大后验概率估计方法，将原始视频A1重构为较高分辨率的处理视频A2；S2、处理视频A2中噪音的消除：建立复杂环境下鲁棒自适应背景模型，并对处理视频A2中的图像进行分割，采用Hog特征和轮廓特征融合的特征提取方法，将处理视频A2中的有效特征进行提取，并将提取后的有效特征利用多帧图像重建方法，得到消除噪音后的处理视频A3；S3、短视频边界的检测和分割：使用直方图法来计算相邻两个帧之间的差值，若差值大于预设的阈值时，则两个相邻帧为两个短视频的边界，通过直方图法来将处理视频A3分为多个短视频；S4、短视频的去模糊处理：将每个短视频中的频域中对视频的变换值进行操作；S5、帧间配准：使用傅里叶变换位移的特性，测定同一短视频图像中两个相邻帧之间的频域变化和滤波值，并根据频域变化计算出其空域的位移变化，位移变化就是相邻帧之间的位移信息；S6、数据融合：当得到相邻帧的位移信息后，可以对多帧图像进行数据融合，从而达到视频帧重建的目的。优选的，所述S3中直方图法的公式为：Dk,k+1＝∑|H(i)-H(i)|，HK(i)表示第K帧的直方图，i表示K个颜色子区间的灰度级，Dk,k+1表示第k帧和第k+1帧的帧间差，假设T为短视频分割点的阈值，如果Dk,k+1大于T，则第k帧和第k+1帧为两个短视频的分割点。优选的，所述S4中短视频的去模糊处理的操作过程具体是对视频进行傅里叶变化到频域，并对短视频的频谱进行滤波修正，将修正后的短视频傅里叶变化到空域，从而增强短视频的画质，以此达到短视频的去模糊处理。优选的，所述S5中位移变化的计算公式为：f2(x，y)＝f1(x-△x,y-△y),其中：x＝[X1X2]，△x＝[△X1△X2]，y＝[y1y2]，△y＝[△y1△y2]，对f2(x)求傅里叶变化得F2(u)＝f2(x,y)×e-j2Tπd(x，y)，F2(u)＝ej2TπF1(u)。优选的，所述S5中将滤波值的中值滤波后的连续两帧图像配准,配准时先在前一帧图像中选取背景,即背景图像,用区域相关法将后一帧图像与背景图像配准，接着将配准后的2帧图像差分得到帧间差分图像,即帧差图像,再用数学形态学的开运算去掉帧差图像中的一些细小噪声，最后将连续两帧去噪后的帧差图像逻辑与运算。优选的，所述S6中通过在高精度的网格中将配准完成后的一组短视频内的各帧图像进行配准，并对配准数据进行加权求和得到高分辨率图像，且权值为S5中位移的倒数。本专利技术的有益效果是：1、本专利技术，通过在对视频帧重建之前，使用最大后验概率估计方法对原始视频进行重构，使得原始视频的质量可以进行初步提高，使得最后在进行帧重建的过程中，其使用的视频的质量较好，使得最后的视频帧的重建效果好。2、本专利技术，通过使用鲁棒自适应背景模型、Hog特征和轮廓特征融合的特征提取方法对视频进行处理，可以有效的消除视频中的噪音，使得最后的结果误差小。3、本专利技术，通过采用关键帧提取，将视频分为多个短视频，并对，且可以使用多个服务器对短视频进行分析，处理，可以明显提高视频帧重建的速度。4、本专利技术，通过傅里叶变换位移的特性和加权求和的特性，可以得到具有高分辨率的图像，可以获得高质量的视频帧。附图说明为了更清楚地说明本专利技术实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本专利技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。图1为本专利技术提出的一种视频帧重建方法的流程示意图。具体实施方式下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。实施例：参照图1，一种视频帧重建方法，包括以下步骤：S1、输入原始视频A1，通过最大后验概率估计方法，将原始视频A1重构为较高分辨率的处理视频A2；S2、处理视频A2中噪音的消除：建立复杂环境下鲁棒自适应背景模型，并对处理视频A2中的图像进行分割，采用Hog特征和轮廓特征融合的特征提取方法，将处理视频A2中的有效特征进行提取，并将提取后的有效特征利用多帧图像重建方法，得到消除噪音后的处理视频A3；S3、短视频边界的检测和分割：使用直方图法来计算相邻两个帧之间的差值，直方图法的公式为：Dk,k+1＝∑|H(i)-H(i)|，HK(i)表示第K帧的直方图，i表示K个颜色子区间的灰度级，Dk,k+1表示第k帧和第k+1帧的帧间差，假设T为短视频分割点的阈值，如果Dk,k+1大于T，则第k帧和第k+1帧为两个短视频的分割点，通过直方图法来将处理视频A3分为多个短视频；S4、短视频的去模糊处理：对视频进行傅里叶变化到频域，并对短视频的频谱进行滤波修正，将修正后的短视频傅里叶变化到空域，从而增强短视频的画质，以此达到短视频的去模糊处理；S5、帧间配准：使用傅里叶变换位移的特性，测定同一短视频图像中两个相邻帧之间的频域变化和滤波值，将滤波值的中值滤波后的连续两帧图像配准,配准时先在前一帧图像中选取背景,即背景图像,用区域相关法将后一帧图像与背景图像配准，接着将配准后的2帧图像差分得到帧间差分图像,即帧差图像,再用数学形态学的开运算去掉帧差图像中的一些细小噪声，最后将连续两帧去噪后的帧差图像逻辑与运算，并根据频域变化计算出其空域的位移变化，位移变化就是相邻帧之间的位移信息(位移变化的计算公式为：f2(x，y)＝f1(x-△x,y-△y),其中：x＝[X1X2]，△x＝[△X1△X2]，y＝[y1y2]，△y＝[△y1△y2]，对f2(x)求傅里叶变化得F2(u)＝f2(x,y)×e-j2Tπd(x，y)，F2(u)＝ej2TπF1(u))；S6、数据融合：当得到相邻帧的位移信息后，可以对多帧图像进本文档来自技高网...

【技术保护点】
1.一种视频帧重建方法，其特征在于，包括以下步骤：/nS1、输入原始视频A1，通过最大后验概率估计方法，将原始视频A1重构为较高分辨率的处理视频A2；/nS2、处理视频A2中噪音的消除：建立复杂环境下鲁棒自适应背景模型，并对处理视频A2中的图像进行分割，采用Hog特征和轮廓特征融合的特征提取方法，将处理视频A2中的有效特征进行提取，并将提取后的有效特征利用多帧图像重建方法，得到消除噪音后的处理视频A3；/nS3、短视频边界的检测和分割：使用直方图法来计算相邻两个帧之间的差值，若差值大于预设的阈值时，则两个相邻帧为两个短视频的边界，通过直方图法来将处理视频A3分为多个短视频；/nS4、短视频的去模糊处理：将每个短视频中的频域中对视频的变换值进行操作；/nS5、帧间配准：使用傅里叶变换位移的特性，测定同一短视频图像中两个相邻帧之间的频域变化和滤波值，并根据频域变化计算出其空域的位移变化，位移变化就是相邻帧之间的位移信息；/nS6、数据融合：当得到相邻帧的位移信息后，可以对多帧图像进行数据融合，从而达到视频帧重建的目的。/n

【技术特征摘要】
1.一种视频帧重建方法，其特征在于，包括以下步骤：
S1、输入原始视频A1，通过最大后验概率估计方法，将原始视频A1重构为较高分辨率的处理视频A2；
S2、处理视频A2中噪音的消除：建立复杂环境下鲁棒自适应背景模型，并对处理视频A2中的图像进行分割，采用Hog特征和轮廓特征融合的特征提取方法，将处理视频A2中的有效特征进行提取，并将提取后的有效特征利用多帧图像重建方法，得到消除噪音后的处理视频A3；
S3、短视频边界的检测和分割：使用直方图法来计算相邻两个帧之间的差值，若差值大于预设的阈值时，则两个相邻帧为两个短视频的边界，通过直方图法来将处理视频A3分为多个短视频；
S4、短视频的去模糊处理：将每个短视频中的频域中对视频的变换值进行操作；
S5、帧间配准：使用傅里叶变换位移的特性，测定同一短视频图像中两个相邻帧之间的频域变化和滤波值，并根据频域变化计算出其空域的位移变化，位移变化就是相邻帧之间的位移信息；
S6、数据融合：当得到相邻帧的位移信息后，可以对多帧图像进行数据融合，从而达到视频帧重建的目的。


2.根据权利要求1所述的一种视频帧重建方法，其特征在于，所述S3中直方图法的公式为：Dk,k+1＝∑|H(i)-H(i)|，HK(i)表示第K帧的直方图，i表示K个颜色子区间的灰度级，Dk,k+1表示第k帧和第k+1帧的帧间差，假设T为短视频分割点的阈值，如果Dk,k+1大于T，...

【专利技术属性】
技术研发人员：张冲，叶荣华，刘松，韦梁，
申请(专利权)人：广州灵派科技有限公司，
类型：发明
国别省市：广东;44