用于生成视频摘要的系统及方法技术方案

技术编号:10040237 阅读:182 留言:0更新日期:2014-05-14 10:50
本发明专利技术提供了一种用于生成视频摘要的系统,包括轨迹提取单元、轨迹重排单元以及摘要创建单元,其中:所述轨迹提取单元,用于根据原始视频中前后图像帧的帧间梯度信息提取图像帧中的前景目标,并保存前景目标的运动轨迹及对应的时间;所述轨迹重排单元,用于将所有前景目标的运动轨迹进行时域和空域重排;所述摘要创建单元,用于根据重排顺序,将所有前景目标的运动轨迹通过无缝拼接生成视频摘要。本发明专利技术还提供一种对应的方法。本发明专利技术通过将前景目标的运行轨迹在空域和时域上重排,可大大提高视频摘要中的信息量,从而大大删减原始视频中的冗余信息。

【技术实现步骤摘要】

本专利技术涉及视频处理领域,更具体地说,涉及一种用于生成视频摘要的系统及方法
技术介绍
随着多媒体技术、视频采集技术、互联网应用的不断加深,以及图像压缩编码与流媒体技术的逐步发展,使得视频图像业务在日常生活中的应用越来越广泛,例如安防视频监控等。然而,在一些视频中(例如安防监控视频等),往往只有很少一部分信息有用,而在该段视频里寻找出有用的信息需要花费大量的时间。为了有效提升视频查看的效率,出现了视频摘要技术。视频摘要,即以自动或半自动的方式对视频的结构和内容进行分析,从原视频中提取出感兴趣的部分,并将它们重新组合,以简洁的摘要方式呈现出来。比如:在安防场景中,通过视频摘要技术,将几小时甚至几十小时的录像内容放置到几分钟的视频中,从而大大节省了查看视频的时间。目前的视频摘要技术主要有两大类方法:基于关键帧(静态)的方法和基于对象(动态)的方法。这两类方法都是缩短视频长度的有效方法,其中基于关键帧的方法通过选择一系列的关键帧组成相应的语义单元来表现视频;而基于对象的方法则是由能够表达原始视频内容的许多重要的小片段组成。基于对象的方法在对视频中感兴趣对象的检测、分割的基础上,选择合适的算法,通过最大限度的减少时间-空间冗余来进行摘要浓缩,因而生成视频的动态表现力要远强于基于关键帧的方法。
技术实现思路
本专利技术要解决的技术问题在于,针对上述视频摘要中冗余信息较多的问题,提供一种用于生成视频摘要的系统及方法。本专利技术解决上述技术问题的技术方案是,提供一种用于生成视频摘要的系统,包括轨迹提取单元、轨迹重排单元以及摘要创建单元,其中:所述轨迹提取单元,用于根据原始视频中前后图像帧的帧间梯度信息提取图像帧中的前景目标,并保存由多个图像帧中的前景目标构成的所述前景目标的运动轨迹及对应的时间;所述轨迹重排单元,用于将所有前景目标的运动轨迹进行时域和空域重排,其中至少一个前景目标的运行轨迹重排到第一区域、至少一个前景目标的运行轨迹重排到第二区域,在所述原始视频中所有的前景目标位于所述第一区域;所述摘要创建单元,用于根据重排顺序,将所有前景目标的运动轨迹通过无缝拼接生成视频摘要。在本专利技术所述的用于生成视频摘要的系统中,所述轨迹重排单元包括区域识别子单元、第一重排子单元和第二重排子单元,其中:所述区域识别子单元,用于识别原始视频中的第一区域及第二区域,在所述原始视频中所有的前景目标位于所述第一区域、且在所述原始视频中第二区域中无前景目标;所述第一重排子单元用于在所有运动轨迹中选择第一组前景目标的运动轨迹,并将该组前景目标的运动轨迹重排到第一区域,所述第一组前景目标中包括至少一个前景目标的运行轨迹;所述第二重排子单元用于在剩余的前景目标的运行轨迹中选择第二组前景目标的运行轨迹,并将该组前景目标的运行轨迹重排到第二区域。在本专利技术所述的用于生成视频摘要的系统中,所述区域识别子单元将原始视频的所有图像帧中都无前景目标的区域识别为背景区域,并使所述第二区域位于该背景区域内、使所述第一区域位于该背景区域外或部分位于该背景区域内,且所述第一区域和第二区域的范围动态变化。在本专利技术所述的用于生成视频摘要的系统中,所述摘要创建单元在创建视频摘要时使用原始视频中该第一区域的背景作为视频摘要中的第一区域的背景,并使用原第一区域或第一区域的一部分的背景替换第二区域的背景使用。在本专利技术所述的用于生成视频摘要的系统中,所述摘要创建单元在创建视频摘要时,使所述视频摘要中的第二区域的背景及前景目标的显示比例小于1:1,并使所述第二区域的背景及前景目标的轨迹相对原始视频旋转-45度~+45度。本专利技术还提供一种用于生成视频摘要的方法,包括以下步骤:(a)根据原始视频中前后图像帧的帧间梯度信息提取图像帧中的前景目标,并保存由多个图像帧中的前景目标构成的所述前景目标的运动轨迹及对应的时间;(b)将所有前景目标的运动轨迹进行时间和空域重排,其中至少一个前景目标的运行轨迹重排到第一区域、至少一个前景目标的运行轨迹重排到第二区域,在所述原始视频中所有的前景目标位于所述第一区域;(c)根据重排顺序,将所有前景目标的运动轨迹通过无缝拼接生成视频摘要。在本专利技术所述的用于生成视频摘要的方法中,所述步骤(b)包括:(b1)识别原始视频中的第一区域及第二区域,在所述原始视频中所有的前景目标位于所述第一区域、且在所述原始视频中第二区域中无前景目标;(b2)在所有运动轨迹中选择第一组前景目标的运动轨迹,并将该组前景目标的运动轨迹重排到第一区域,所述第一组前景目标中包括至少一个前景目标的运行轨迹;(b3)在剩余的前景目标的运行轨迹中选择第二组前景目标的运行轨迹,并将该组前景目标的运行轨迹重排到第二区域。在本专利技术所述的用于生成视频摘要的方法中,所述步骤(b1)中包括:将原始视频的所有图像帧中都无前景目标的区域识别为背景区域,并使所述第二区域位于该背景区域内、使所述第一区域位于该背景区域外或部分位于该背景区域内,且所述第一区域和第二区域的范围动态变化。在本专利技术所述的用于生成视频摘要的方法中,所述步骤(c)中的视频摘要中,所述第一区域的背景使用原始视频中该第一区域的背景,第二区域的背景使用原第一区域或第一区域的一部分的背景替换。在本专利技术所述的用于生成视频摘要的方法中,所述步骤视频摘要中的第二区域的背景及前景目标的显示比例小于或等于1:1,且所述第二区域的背景及前景目标的轨迹相对原始视频旋转-45度~+45度。本专利技术的用于生成视频摘要的系统及方法,通过将前景目标的运行轨迹在空域和时域上重排,可大大提高视频摘要中的信息量,从而大大删减原始视频中的冗余信息。附图说明图1是本专利技术用于生成视频摘要的方法实施例的示意图。图2是图1中的用于生成视频摘要的方法空域重排的示意图。图3是图1中的用于生成视频摘要的方法另一空域重排的示意图。图4是图1中的用于生成视频摘要的方法又一空域重排的示意图。图5是图1中的用于生成视频摘要的方法时域重排的示意图。图6是本专利技术用于生成视频摘要的系统实施例的示意图。具体实施方式为了使本专利技术的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本专利技术进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本专利技术,并不用于限定本专利技术。如图1所示,是本专利技术用于生成视频摘要的方法实施例的示意图,该方法用于将播本文档来自技高网...
用于生成视频摘要的系统及方法

【技术保护点】
一种用于生成视频摘要的系统,其特征在于:包括轨迹提取单元、轨迹重排单元以及摘要创建单元,其中:所述轨迹提取单元,用于根据原始视频中前后图像帧的帧间梯度信息提取图像帧中的前景目标,并保存由多个图像帧中的前景目标构成的所述前景目标的运动轨迹及对应的时间;所述轨迹重排单元,用于将所有前景目标的运动轨迹进行时域和空域重排,其中至少一个前景目标的运行轨迹重排到第一区域、至少一个前景目标的运行轨迹重排到第二区域,在所述原始视频中所有的前景目标位于所述第一区域;所述摘要创建单元,用于根据重排顺序,将所有前景目标的运动轨迹通过无缝拼接生成视频摘要。

【技术特征摘要】
1.一种用于生成视频摘要的系统,其特征在于:包括轨迹提取单元、轨
迹重排单元以及摘要创建单元,其中:所述轨迹提取单元,用于根据原始视频
中前后图像帧的帧间梯度信息提取图像帧中的前景目标,并保存由多个图像帧
中的前景目标构成的所述前景目标的运动轨迹及对应的时间;所述轨迹重排单
元,用于将所有前景目标的运动轨迹进行时域和空域重排,其中至少一个前景
目标的运行轨迹重排到第一区域、至少一个前景目标的运行轨迹重排到第二区
域,在所述原始视频中所有的前景目标位于所述第一区域;所述摘要创建单元,
用于根据重排顺序,将所有前景目标的运动轨迹通过无缝拼接生成视频摘要。
2.根据权利要求1所述的用于生成视频摘要的系统,其特征在于:所述
轨迹重排单元包括区域识别子单元、第一重排子单元和第二重排子单元,其中:
所述区域识别子单元,用于识别原始视频中的第一区域及第二区域,在所述原
始视频中所有的前景目标位于所述第一区域、且在所述原始视频中第二区域中
无前景目标;所述第一重排子单元用于在所有运动轨迹中选择第一组前景目标
的运动轨迹,并将该组前景目标的运动轨迹重排到第一区域,所述第一组前景
目标中包括至少一个前景目标的运行轨迹;所述第二重排子单元用于在剩余的
前景目标的运行轨迹中选择第二组前景目标的运行轨迹,并将该组前景目标的
运行轨迹重排到第二区域。
3.根据权利要求2所述的用于生成视频摘要的系统,其特征在于:所述区
域识别子单元将原始视频的所有图像帧中都无前景目标的区域识别为背景区
域,并使所述第二区域位于该背景区域内、使所述第一区域位于该背景区域外
或部分位于该背景区域内,且所述第一区域和第二区域的范围动态变化。
4.根据权利要求1所述的用于生成视频摘要的系统,其特征在于:所述摘
要创建单元在创建视频摘要时使用原始视频中该第一区域的背景作为视频摘
要中的第一区域的背景,并使用原第一区域或第一区域的一部分的背景替换第
二区域的背景使用。
5.根据权利要求4所述的用于生成视频摘要的系统,其特征在于:所述摘

\t要创建单元在创建视频摘要时,使所述视频摘要中的第二区域的背景及前景目<...

【专利技术属性】
技术研发人员:史方胡韦伟金明
申请(专利权)人:同观科技深圳有限公司
类型:发明
国别省市:广东;44

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1