本发明专利技术提供了一种基于数据驱动子空间集的压缩视频采集与重构系统,包括:子空间集构造模块、稀疏基矩阵构造模块、视频信号传感模块和重构处理模块,其中:子空间集构造模块利用聚类方法生成子空间集,稀疏基矩阵构造模块利用线性子空间学习方法生成子空间集对应的稀疏基,传感模块对视频信号以块的形式进行投影,所得的数据最后在重构处理模块中被解码重构。本发明专利技术提供压缩采样的同时还契合了视频采样过程的分布式渐进式的结构,对稀疏基矩阵的特殊构造也提升了重构的精确度和效率,本发明专利技术大大提高了视频信号的采样效率,在不同的采样压缩率下相比其他方法取得了重构增益,同时也具备良好的可扩展性。
【技术实现步骤摘要】
基于数据驱动子空间集的压缩视频采集与重构系统
本专利技术涉及一种视频信号获取方案,具体是一种基于数据驱动子空间集的压缩视频采集与重构系统。
技术介绍
视频信号的采集和编码(压缩)对于视频的存储和传输等应用至关重要。传统的信号处理系统采用先采样再压缩的模式:为了完整地保存信号所有信息,应以不小于信号带宽的两倍采样频率对视频进行采样;采集到的原始信号通过一系列编码技术后达到去除冗余的目的,相关技术的瓶颈在于花费了大量的传感器以及计算资源就为了获得处理后的少量信号压缩数据,对采样端的资源需求过高。为了进一步提高视频信号的采集效率,在采样的同时加入了一些信号处理技术,其中一种方案则是将采样与压缩同时进行,然后通过后端的一些算法对压缩后的数据进行重构。经过对现有技术的文献检索发现,YingLiu,MingLi和DimitrisA.Pados在2013年的《IEEETransactionsonCircuitsandSystemsforVideoTechnology》(TCSVT)期刊上发表的“Motion-AwareDecodingofCompressed-SensedVideo”一文中提出了基于Karhunen-Loèvetransform(KLT)基的重构将压缩传感应用到视频采样上来,该方法在采样编码端直接对视频块采用传感矩阵进行压缩采样,在解码端使用KLT基作为稀疏基对信号进行重构,这种方法可以有效地提高视频采样的效率,并且保证重构获得的视频的主观质量,但这种方法所使用的KLT基是在局部搜索窗中产生的,对于具有复杂纹理或者剧烈运动的视频场景,该方法所使用的KLT基就不能准确有效的对视频帧块进行稀疏表示,进而导致效果降低。这些不足促使我们在其基础上去寻找一种更加有效地重构方法,充分利用视频信号块的特殊结构来提高重构结果的主客观质量。YueM.Lu与MinhN.Do在2008年的《IEEETransactionsonSignalProcessing》(TSP)期刊上发表的“ATheoryforSamplingSignalsFromaUnionofSubspaces”一文中提出了基于子空间集的信号采样理论,该理论给出了对于处在子空间集的信号的采样所要满足的唯一性和稳定性的条件,但是该理论所假设的子空间集是由固定基张成的,不能提供更加有效的稀疏性和适应性。
技术实现思路
本专利技术针对现有技术的不足,提供了一种基于数据驱动子空间集的压缩视频采集与重构系统,可以有效提高视频信号采集效率以及重构系统的主客观质量,并可作为一种通用的视频采集工具。本专利技术是通过以下技术方案实现的:本专利技术所述的基于数据驱动子空间集的压缩视频采集与重构系统,包括:子空间集构造模块、稀疏基矩阵构造模块、视频信号传感模块和重构处理模块,其中:所述子空间集构造模块对视频信号关键帧块,利用聚类方法生成子空间集,并将该子空间集输出到稀疏基矩阵构造模块的输入端;所述稀疏基矩阵构造模块接收子空间集,利用线性子空间学习方法生成子空间集对应的稀疏基矩阵,并将该稀疏基矩阵输出到重构处理模块的输入端;所述视频信号传感模块对视频信号的非关键帧块以块的形式进行投影,得到观测值,并将该观测值输出到重构处理模块的输入端;所述重构处理模块接收所述稀疏基矩阵构造模块输出的基矩阵与所述视频信号传感模块输出的测量值,对信号进行重构。所述的子空间集构造模块,实现由在重建的关键帧上进行块聚类生成不同类别的块组。每类块组对应于一个子空间,聚类得到的块组作为训练集用于生成子空间集的稀疏基矩阵。基于块聚类的子空间构造可以通过稀疏子空间聚类方法和块匹配方法对整个重构关键帧进行操作来实现。所述的稀疏基矩阵构造模块实现由线性子空间学习方法生成的一种标准正交基,线性子空间学习方法分别单独作用于不同的块组得到不同的基,进而组成稀疏基矩阵。它能够适应性的表示出高维信号的内在结构,相对于固定基能更有效地稀疏表示视频信号,并且信号在此稀疏基矩阵上的稀疏表示是具有块结构的。所述的传感模块是一种一阶的数字微镜设备(DMD),它模拟了对视频信号的压缩传感。所述的重构处理模块是通过一种凸松弛算法模型实现的。本专利技术中采用的基于数据驱动子空间集的压缩传感技术为视频信号的采集提供了通用的解决方案,尤其是针对具有复杂纹理和剧烈运动的视频信号。本专利技术所使用的子空间集是通过在重构的关键帧中采用稀疏子空间聚类和块匹配方法聚类得到的,充分利用了视频帧块的独特结构,以及帧内帧间的空间时间冗余,提高了采样的效率与性能。另一方面,鉴于稀疏基矩阵在压缩传感的重构过程中发挥的重要作用,本专利技术通过线性子空间学习的方法对每个子空间单独进行学习得到相应的基进而组成子空间集的稀疏基矩阵,这样能够使得帧块信号具有适应性稀疏表示,并且该稀疏表示具有结构性,进而提高采样效率(降低精确重构所需的必要采样数),还能加速凸松弛重构算法的收敛及稳定性,有助于本专利技术数据驱动子空间集压缩传感的性能及实用性的提升。与现有技术相比,本专利技术具有如下的有益效果:本专利技术大大提高了重构性能,与传统的使用固定基或者KLT基进行重构的视频压缩传感系统相比,由于本专利技术的重构采用的是适应性的全局最优的基因此在重构效果上均能够得到增强;对于其它高维信号,本专利技术通过适当的修改也可使用,具有较强的适应性;在重建时由于子空间集和稀疏基矩阵的特殊构造,使得信号具有结构性的稀疏表示,因此本专利技术在不降低视频的主观效果的情况下可以进一步提高采样效率,同时加快凸松弛重构算法的收敛速度,在不同的采样压缩率下相比其他方法取得了重构增益,同时也具备良好的可扩展性。附图说明通过阅读参照以下附图对非限制性实施例所作的详细描述,本专利技术的其它特征、目的和优点将会变得更明显:图1为本专利技术系统一实施例的结构框图;图2为子空间集构造模块工作原理图;图3为稀疏基矩阵构造模块对视频帧块信号产生的结构性稀疏表示示意图。具体实施方式下面结合具体实施例对本专利技术进行详细说明。以下实施例将有助于本领域的技术人员进一步理解本专利技术,但不以任何形式限制本专利技术。应当指出的是,对本领域的普通技术人员来说,在不脱离本专利技术构思的前提下,还可以做出若干变形和改进。这些都属于本专利技术的保护范围。如图1所示,本专利技术一实施例的结构框图,包括:子空间集构造模块、稀疏基矩阵构造模块、视频信号传感模块和重构处理模块,其中:子空间集构造模块利用聚类方法生成子空间集,稀疏基矩阵构造模块利用线性子空间学习方法生成子空间集对应的稀疏基,传感模块对视频信号以块的形式进行压缩投影,所得的观测值最后在重构处理模块中被解码重构。在编码端中,视频信号传感模块对视频信号进行采样产生测量值;在解码端中,稀疏基矩阵构造模块产生基矩阵;所述稀疏基矩阵构造模块输出的的基矩阵与所述视频信号传感模块输出的测量值一起进入重构处理模块,在重构处理模块中信号被重构。本实施例中,所述的子空间集构造模块如图2所示,在整幅重建的关键帧中做块聚类,其中:关键帧中的块集合X={x1,x2,…,xK},利用稀疏子空间聚类方法或块匹配方法把X分割成t个聚类X1,X2,…,Xt,每个聚类中的块都是相似的且同属于一个子空间。X1,X2,…,Xt对应于t个子空间S1,S2,…,St,那么任一视频帧本文档来自技高网...

【技术保护点】
一种基于数据驱动子空间集的压缩视频采集与重构系统,其特征在于,包括:子空间集构造模块、稀疏基矩阵构造模块、视频信号传感模块和重构处理模块,其中:所述子空间集构造模块对视频信号关键帧块,利用聚类方法生成子空间集,并将该子空间集输出到稀疏基矩阵构造模块的输入端;所述稀疏基矩阵构造模块接收子空间集,利用线性子空间学习方法生成子空间集对应的稀疏基矩阵,并将该稀疏基矩阵输出到重构处理模块的输入端;所述视频信号传感模块对视频信号的非关键帧块以块的形式进行投影,得到观测值,并将该观测值输出到重构处理模块的输入端;所述重构处理模块接收所述稀疏基矩阵构造模块输出的基矩阵与所述视频信号传感模块输出的测量值,对信号进行重构。
【技术特征摘要】
1.一种基于数据驱动子空间集的压缩视频采集与重构系统,其特征在于,包括:子空间集构造模块、稀疏基矩阵构造模块、视频信号传感模块和重构处理模块,其中:所述子空间集构造模块对视频信号关键帧块,利用聚类方法生成子空间集,并将该子空间集输出到稀疏基矩阵构造模块的输入端;所述稀疏基矩阵构造模块接收子空间集,利用线性子空间学习方法生成子空间集对应的稀疏基矩阵,并将该稀疏基矩阵输出到重构处理模块的输入端;所述的稀疏基矩阵构造模块实现由线性子空间学习方法生成的一种标准正交基,它能够适应性的表示出高维信号的内在结构,相对于固定基能更有效地稀疏表示视频信号,这种在稀疏基矩阵上的稀疏表示是具有块结构的;所述视频信号传感模块对视频信号的非关键帧块以块的形式进行投影,得到观测值,并将该观测值输出到重构处理模块的输入端;所述重构处理模块接收所述稀疏基矩阵构造模块输出的基矩阵与所述视频信号传感模块输出的观测值,对信号进行重构。2.根据权利要求1所述的基于数据驱动子空间集的压缩视频采...
【专利技术属性】
技术研发人员:熊红凯,李勇,
申请(专利权)人:上海交通大学,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。