一种视频摘要生成方法和装置制造方法及图纸

本发明专利技术提出了一种视频摘要生成方法，包括步骤：获取用户指定的意向区域的位置信息，确定意向区域；对所述意向区域的图像进行前景检测；对检测到的目标进行跟踪，提取目标的运动轨迹；将目标的运动轨迹的各帧图像分别叠加到对应的背景上，生成视频摘要。本发明专利技术还提供一种视频摘要生成装置，包括用户交互模块、前景检测模块、跟踪模块和生成模块。用户交互模块，用于获取用户指定的意向区域的位置信息；前景检测模块，用于对意向区域的图像进行前景检测；跟踪模块，用于对检测到的目标进行跟踪，提取目标的轨迹；生成模块，用于将目标的运动轨迹的各帧图像分别叠加到对应的背景上，生成视频摘要。该方法和装置，有效地提高了视频摘要的生成速度。

【技术实现步骤摘要】

本专利技术涉及图像处理
，尤其是涉及一种视频摘要生成方法和装置。
技术介绍
在社会公共安全领域，视频监控系统成为维护社会治安、加强社会管理的一个重要组成部分。然而视频录像存在存储数据量大、存储时间长等特点，通过录像寻找线索，获取证据，依照传统的做法逐一浏览相关视频，是要耗费大量人力、物力以及时间的，效率极其低下，以至于错过最佳破案时机。因此在视频监控系统中，对原始视频进行浓缩，可以快速浏览，锁定检索对象，对于公安加快破案速度，提高大案、要案的破案效率具有重要指导意义。而现有技术中，对视频浓缩所采用的方式为以自动或半自动的方式，先通过运动目标分析，提取运动目标，然后对各个目标的运动轨迹进行分析，将不同的目标拼接到一个共同的背景场景中，并将它们以某种方式进行组合形成视频摘要。而很多情况下，公安机关所关注的仅为提取出的多个目标中的一个，其他目标的出现则会分散公安机关工作人员的注意力，造成干扰。综上所述，现有技术中的视频浓缩技术，存在无关目标干扰视频浏览的技术问题。
技术实现思路
本专利技术提出了一种视频摘要生成方法和装置，通过获取用户的意向区域，只对意向区域内的图像进行前景检测，防止了该区域外的其他无关目标的干扰。为了达到上述目的，本专利技术的技术方案是这样实现的:本专利技术提供一种视频摘要生成方法，包括步骤:步骤A，获取用户指定的意向区域的位置信息，确定意向区域；步骤B，对所述意向区域的图像进行前景检测；步骤C，对检测到的目标进行跟踪，提取目标的运动轨迹；步骤D，将目标的运动轨迹的各帧图像分别叠加到对应的背景上，生成视频摘要。其中，所述步骤B中进行前景检测包括步骤:利用混合高斯函数对图像进行背景建模，提取运动的目标。其中，所述步骤利用混合高斯函数对图像进行背景建模，提取运动的目标还包括对光照和阴影进行处理，包括步骤:当拍摄环境中的单位时间内光照变化幅度超过预设阈值时，将判定为背景点的像素的取值范围缩小为原来的0.4-0.6倍；用大于阴影区域的像素的阈值将图像二值化，去除阴影。其中，所述步骤C中对检测到的目标进行跟踪包括步骤:遍历当前帧检测到的所有目标，和上一帧图像所检测到的目标进行比较，若满足如下条件:Scross>min (Spre, Stemp) X RScross=W i dthcross X He i ghtcrossWidthcross=min (rightpre, righttemp)-max (Ieftpre, Iefttemp)Heightcross=min (Bottompre, Bottomtemp) -max (Toppre, Toptemp)其中，Scross为前后两帧的交叉面积，Widthcross为投影到水平方向上的交叉部分的长度^eightcmss为投影到垂直方向上的交叉部分的长度；rightpM为前一帧轮廓的右边界的值；righttemp为当前帧轮廓的右边界的值；leftp,e为前一帧轮廓的左边界的值；lefttemp为当前帧轮廓的左边界的值Jottonw为前一帧轮廓的下边界的值；Bottomtenip为当前帧轮廓的下边界的值Joplffe为前一帧轮廓的上边界的值Joptenip为当前帧轮廓的上边界的值；所述R为交叉比例；则判定当前帧的目标与上一帧关联，更新轨迹；若不满足该条件，则判定不关联，产生新的轨迹，若上一帧图像存在没有和当前帧检测的目标关联上的轨迹，则终止该轨迹的跟踪，并将该轨迹存储。其中，所述步骤A还包括步骤:获取用户指定的排除区域的位置信息；所述步骤B还包括步骤: 对所述排除区域外的图像进行前景检测。其中，所述步骤B还包括步骤:更新背景；根据提取到的目标的数目，按照目标数目越多则前景检测的频率越高、背景更新频率越低的原则，调整前景检测的频率和背景更新的频率。其中，所述步骤调整前景检测的频率和背景更新的频率包括步骤:当提取到的目标数目为零时，隔3-6帧进行一次前景检测，背景每一帧更新一次；当提取到的目标数目为1-3个时，隔2帧进行一次前景检测，背景每两帧更新一次；当提取到的目标数目为3个以上时，每帧都进行前景检测，背景每三帧更新一次。其中，所述步骤A中确定意向区域包括步骤:当用户指定一条直线时，则以该直线为对称轴的矩形区域作为意向区域；当用户指定一个点时，则以该点为中心将周围预设距离内的区域作为意向区域；当用户指定一个多边形或者不规则形状时，则该多边形或者不规则形内的区域作为意向区域。本专利技术还提供一种视频摘要生成装置，包括用户交互模块、前景检测模块、跟踪模块和生成模块；所述用户交互模块，用于获取用户指定的意向区域的位置信息，确定意向区域；所述前景检测模块，用于对所述意向区域的图像进行前景检测；所述跟踪模块，用于对检测到的目标进行跟踪，提取目标的轨迹；所述生成模块，用于将目标的运动轨迹的各帧图像分别叠加到对应的背景上，生成视频摘要。其中，所述用户交互模块，还用于获取用户指定的排除区域的位置信息。可见，本专利技术至少具有如下的有益效果:本专利技术的一种视频摘要生成方法和装置，通过获取用户指定的意向区域的位置信息，确定意向区域，并对意向区域的图像进行前景检测，对检测到的目标进行跟踪，提取目标的轨迹，将轨迹分别叠加到对应的背景上，生成视频摘要，这样，进行前景检测以及跟踪等算法步骤，都只针对意向区域内的图像，从而提取出的目标也都只是意向区域内的目标，而对用户没有意义的其他运动目标则不会出现在视频摘要中，从而防止了无关目标对用户的干扰；另外，只对意向区域内的图像进行前景检测、轨迹提取等操作，无需对整帧图像都进行运算，从而减少了运算量，也就加快了运算的速度，进而提高了视频摘要生成的速度，而摘要的快速生成，为公安机关抓住时机尽快破案提供了有利条件；进一步地，采用混合高斯函数进行前景检测，保证了前景检测的精度，同时，对光照和阴影分别处理，防止了由于光照的变化较大而对视频的前景提取造成不利影响，而阴影的处理，也使得视频更加清晰，更易观察；进一步地，还可由用户指定排除区域，这样，用户在比较确定不需要观察某些区域时，可以将这些区域指定为排除区域，同样可以减少了无关目标的干扰，提高运算速度；进一步地，还对前景检测和背景更新的频率进行调整，这样，根据不同的情况进行区别处理，在保证准确度的前提下，尽量减少运算量，从而进一步加快了视频摘要的生成速度。附图说明为了更清楚地说明本专利技术实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本专利技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。图1为本专利技术的视频摘要生成方法的实施例一的流程图；图2为本专利技术的视频摘要生成方法的实施例二的流程图。具体实施例方式为使本专利技术实施例的目的、技术方案和优点更加清楚，下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。实施例一本专利技术实施例一提供一种视频摘要生成方法，参见图1所示，包括步骤:步骤SI本文档来自技高网...

【技术保护点】
一种视频摘要生成方法，其特征在于，包括步骤：步骤A，获取用户指定的意向区域的位置信息，确定意向区域；步骤B，对所述意向区域的图像进行前景检测；步骤C，对检测到的目标进行跟踪，提取目标的运动轨迹；步骤D，将目标的运动轨迹的各帧图像分别叠加到对应的背景上，生成视频摘要。

【技术特征摘要】
1.种视频摘要生成方法，其特征在于，包括步骤: 步骤A，获取用户指定的意向区域的位置信息，确定意向区域； 步骤B，对所述意向区域的图像进行前景检测； 步骤C，对检测到的目标进行跟踪，提取目标的运动轨迹； 步骤D，将目标的运动轨迹的各帧图像分别叠加到对应的背景上，生成视频摘要。2.据权利要求1所述的方法，其特征在于，所述步骤B中进行前景检测包括步骤: 利用混合高斯函数对图像进行背景建模，提取运动的目标。3.据权利要求3所述的方法，其特征在于，所述步骤利用混合高斯函数对图像进行背景建模，提取运动的目标还包括对光照和阴影进行处理，包括步骤: 当拍摄环境中的单位时间内光照变化幅度超过预设阈值时，将判定为背景点的像素的取值范围缩小为原来的0.4-0.6倍； 用大于阴影区域的像素的阈值将图像二值化，去除阴影。4.据权利要求1所述的视频摘要生成方法，其特征在于，所述步骤C中对检测到的目标进行跟踪包括步骤: 遍历当前帧检测到的所有目标，和上一帧图像所检测到的目标进行比较，若满足如下条件: Scross〉min (Spre，Stemp) X R Scross=W i dthcross X He i ghtcross ffidthcross=min (rightpre, righttemp) -max (Ieftpre, Iefttemp) Heightcross=min (Bottompre, Bottomtemp) -max (Toppre, Toptemp) 其中，Scmss为前后两帧的交叉面积，Widtheross为投影到水平方向上的交叉部分的长度；Heightcross为投影到垂直方向上的交叉部分的长度；rightpM为前一帧轮廓的右边界的值；rIghttemp为当前帧轮廓的右边界的值；leftp,e为前一帧轮廓的左边界的值；lefttemp为当前帧轮廓的左边界的值；Bottoive为前一帧轮廓的下边界的值；Bottomtenip为当前帧轮廓的下边界的值；ΤορρΜ为前一帧轮廓的上边界的值Jopteni...

【专利技术属性】
技术研发人员：王海峰，
申请(专利权)人：信帧电子技术北京有限公司，
类型：发明
国别省市：