一种视频摘要生成方法及装置制造方法及图纸

本发明专利技术实施例公开了一种视频摘要生成方法及装置，所述方法包括：建立保存视频摘要整个状态的摘要句柄，采用抽帧的方法获取抽取帧视频识别分析的输出结果、目标区域特征信息和区域特征信息数量；判断所述输出结果是否为真；当输出结果为真时，根据目标区域特征信息噪音阈值，对目标区域特征信息进行过滤，更新所述输出结果，并根据各目标是否出现的鲁棒性阈值对所述输出结果进行过滤；判断所述摘要句柄中的历史结果和所述输出结果是否为真；根据判断结果对所述目标区域特征信息、区域特征信息数量和摘要句柄进行更新处理，生成函数返回值；当所述函数返回值为真时，将所抽取的帧作为视频摘要进行编码。

A method and device for generating video summarization

The embodiment of the invention discloses a device and a method for generating video abstraction, the method includes: the establishment of the state of the handle to save the video, using the method of drawing frames to obtain output results, analysis of selected frames of the video recognition target region feature information and regional feature information quantity; judging whether the output is true; when the output is true, according to the target feature information of noise threshold, filtering on the regional characteristics of the target information, update the output results, according to the robustness of the threshold value of the target is to appear in the output results of filtration; judging whether the handle in the history of the abstract and the output results are really; according to the judgment result update processing to the target area characteristic information, regional characteristic information quantity and the handle, generating function return value When the return value of the function is true, the extracted frame is encoded as a video summary.

【技术实现步骤摘要】
一种视频摘要生成方法及装置
本专利技术涉及视频识别
，尤其涉及一种视频摘要生成方法及装置。
技术介绍
随着人们对安全的需求越来越高，视频监控作为安全防范领域的有效解决方案，应用范围越来越广，需求在不断提高。但视频监控产生了海量信息，导致存储的数据量越来越大，冗余的视频信息量越来越多，获取视频有效的信息花费时间越来越长。视频识别技术能够对感兴趣物体进行结构化分析，但是并未对结构化分析的结果进行很好的挖掘和利用。视频摘要作为一种降低视频信息冗余、快速获取有价值信息、减少存储空间的新技术方案运用而生。视频摘要的目的是降低码流和存储空间，用尽可能短的时间获取尽可能多的用户感兴趣的信息。视频摘要是通过对视频结构和内容分析，从原始视频中提取有意义的部分，并将它们以某种方式进行组合而成的紧凑的、能充分表达视频语义的内容，它是对视频的简单概括，观众可以通过观看视频摘要而准确的获取视频内容。视频摘要可分为静态视频摘要和动态视频摘要两类，静态视频摘要一般是提取关键帧序列，通过多个关键帧组合成视频得到视频摘要。动态视频摘要也称为缩略视频，相比关键帧序列，它由原始视频中提取运动信息组成视频，从而在语义方面增加视频的表达力。在实现本专利技术的过程中，专利技术人发现现有技术中至少存在如下技术问题：通过提取关键帧序列获取静态视频摘要，并不能覆盖尽可能多的镜头从而得到最完备的视频摘要，会因此造成大量信息的丢失，无法充分满足用户获取全面信息的需求；动态视频摘要基本都是以单一的视频分析信息组成视频，无法满足用户想同时获取多个感兴趣方面的需求。现有的视频摘要生成方法无法根据多样性的用户需求完整准确地生成令人满意的视频摘要。
技术实现思路
本专利技术提供的视频摘要生成方法及装置，能够根据多样性的用户需求完整准确地生成令人满意的视频摘要。一方面，本专利技术提供一种视频摘要生成方法，包括：建立保存整个视频摘要状态的摘要句柄，采用抽帧的方法获取抽取帧视频识别分析的输出结果、目标区域特征信息和区域特征信息数量；判断所述输出结果是否为真；当输出结果为真时，根据目标区域特征信息噪音阈值，对目标区域特征信息进行过滤，更新所述输出结果，并根据各目标是否出现的鲁棒性阈值对所述输出结果进行过滤；判断所述摘要句柄中的历史结果和所述输出结果是否为真；根据判断结果对所述目标区域特征信息、区域特征信息数量和摘要句柄进行更新处理，生成函数返回值；当所述函数返回值为真时，对所抽取的帧作为视频摘要进行编码。另一方面，本专利技术提供一种视频摘要生成装置，包括：获取单元，用于用于建立保存整个视频摘要状态的摘要句柄，采用抽帧的方法获取抽取帧视频识别分析的输出结果、目标区域特征信息和区域特征信息数量；第一判断单元，用于判断所述输出结果是否为真；第一过滤单元，用于当输出结果为真时，根据目标区域特征信息噪音阈值，对目标区域特征信息进行过滤，更新所述输出结果；第二过滤单元，用于根据各目标是否出现的鲁棒性阈值对所述输出结果进行过滤；第二判断单元，用于判断所述摘要句柄中的历史结果和所述输出结果是否为真；生成单元，用于根据判断结果对所述目标区域特征信息、区域特征信息数量和摘要句柄进行更新处理，生成函数返回值；编码单元，用于当所述函数返回值为真时，对所抽取的帧作为视频摘要进行编码。本专利技术提供的视频摘要生成方法及装置，建立保存整个视频摘要状态的摘要句柄，采用抽帧的方法获取抽取帧视频识别分析的输出结果、目标区域特征信息和区域特征信息数量，当判断所述输出结果为真时，根据目标区域特征信息噪音阈值，对目标区域特征信息进行过滤，更新所述输出结果，并根据各目标是否出现的鲁棒性阈值对所述输出结果进行过滤，根据所述摘要句柄中的历史结果和所述输出结果是否为真的判断结果对所述目标区域特征信息、区域特征信息数量和摘要句柄进行更新处理，生成函数返回值，当所述函数返回值为真时，对所抽取的帧作为视频摘要进行编码。与现有技术相比，本专利技术能够采用抽帧的方法，对抽取帧进行用户感兴趣的视频分析，获得视频分析的区域特征结果，根据时空的关联性，以踪迹为角度，从已获得的视频分析区域特征结果中提取满足符合踪迹的视频帧，并对其进行编码，从而能够根据多样性的用户需求完整准确地生成令人满意的视频摘要。附图说明为了更清楚地说明本专利技术实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本专利技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其它的附图。图1为本专利技术一实施例提供的视频摘要生成方法的流程图；图2为本专利技术另一实施例提供的视频摘要生成方法的流程图；图3为本专利技术实施例提供的拟合扫描的流程图；图4为本专利技术一实施例提供的视频摘要生成装置的结构示意图；图5为图4中生成单元46的结构示意图；图6为图5中第四生成模块464的结构示意图。具体实施方式下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例，都属于本专利技术保护的范围。本专利技术一实施例提供一种视频摘要生成方法，如图1所示，所述视频摘要生成方法包括：S11、建立保存整个视频摘要状态的摘要句柄，采用预先设定的固定间隔均匀抽帧的方法获取抽取帧视频识别分析的输出结果、目标区域特征信息和区域特征信息数量；其中，所述视频摘要状态包括：maxRectCnt：能够处理的从分析一帧获得的最大区域特征数量；boolValThresd：过滤是否从一帧分析出需要的区域特征检测结果的鲁棒性阈值；rectAreaThresd：从一帧分析到的区域特征的面积噪音阈值；posThresd：两相邻抽取帧的区域特征间的位置阈值；sizeThresd：两相邻抽取帧的区域特征间的面积阈值；traceTriggerThresd：路径触发阈值。S12、判断所述输出结果是否为真；其中，所述抽取帧视频识别分析的输出结果包括是否含有目标区域特征信息的逻辑值。S13、当输出结果为真时，根据目标区域特征信息面积噪音阈值，对目标区域特征信息进行过滤，更新所述输出结果，并根据鲁棒性阈值过滤输出结果；具体地，去掉小于面积噪音阈值的区域特征信息，留下大于等于面积噪音阈值的区域特征信息，并根据是否留有区域特征信息，来更新输出结果。S14、判断所述摘要句柄中的历史结果和所述输出结果是否为真；其中，与步骤S12中的输出结果相比，这里的输出结果指的是去掉小于面积噪音阈值的区域特征信息，留下大于等于面积噪音阈值的区域特征信息之后，是否含有目标区域特征信息的逻辑值。S15、根据判断结果对所述目标区域特征信息、区域特征信息数量和摘要句柄进行更新处理，并进行是否存在踪迹的分析，生成函数返回值；具体地，生成的函数返回值即是否存在踪迹。S16、当所述函数返回值为真时，对所抽取的帧作为视频摘要进行编码。本专利技术实施例提供的视频摘要生成方法，建立保存整个视频摘要状态的摘要句柄，采用抽帧的方法获取抽取帧视频识别分析的输出结果、目标区域特征信息和区域特征信息数量，当判断所述输出结果为真时，根据目标区域特征信息噪音阈值，对目标区域特本文档来自技高网...

【技术保护点】
一种视频摘要生成方法，其特征在于，包括：建立保存整个视频摘要状态的摘要句柄，采用抽帧的方法获取抽取帧视频识别分析的输出结果、目标区域特征信息和区域特征信息数量；判断所述输出结果是否为真；当所述输出结果为真时，根据目标区域特征信息噪音阈值，对目标区域特征信息进行过滤，更新所述输出结果，并根据各目标是否出现的鲁棒性阈值对所述输出结果进行过滤；判断所述摘要句柄中的历史结果和所述输出结果是否为真；根据判断结果对所述目标区域特征信息、区域特征信息数量和摘要句柄进行更新处理，生成函数返回值；当所述函数返回值为真时，对所抽取的帧作为视频摘要进行编码。

【技术特征摘要】
1.一种视频摘要生成方法，其特征在于，包括：建立保存整个视频摘要状态的摘要句柄，采用抽帧的方法获取抽取帧视频识别分析的输出结果、目标区域特征信息和区域特征信息数量；判断所述输出结果是否为真；当所述输出结果为真时，根据目标区域特征信息噪音阈值，对目标区域特征信息进行过滤，更新所述输出结果，并根据各目标是否出现的鲁棒性阈值对所述输出结果进行过滤；判断所述摘要句柄中的历史结果和所述输出结果是否为真；根据判断结果对所述目标区域特征信息、区域特征信息数量和摘要句柄进行更新处理，生成函数返回值；当所述函数返回值为真时，对所抽取的帧作为视频摘要进行编码。2.根据权利要求1所述的方法，其特征在于，所述根据目标区域特征信息噪音阈值，对目标区域特征信息进行过滤，更新所述输出结果包括：若目标区域特征信息全为噪音，则将所述输出结果置为假，否则，保持所述输出结果为真，并过滤掉噪音区域特征信息。3.根据权利要求2所述的方法，其特征在于，根据所述判断结果对所述目标区域特征信息、区域特征信息数量和摘要句柄进行更新处理，生成函数返回值包括：若所述历史结果和所述输出结果分别为假和真，则将所述目标区域特征信息和区域特征信息数量填充到所述摘要句柄中，并将所述摘要句柄中的历史结果置为真，生成函数返回值为假；若所述历史结果和所述输出结果分别为真和假，则将所述摘要句柄中的历史区域特征信息数量置为0，历史结果置为假，生成函数返回值为假；若所述历史结果和所述输出结果分别为假和假，则生成函数返回值为假；若所述历史结果和所述输出结果分别为真和真，则将目标区域特征信息和摘要句柄中的历史区域特征信息进行拟合扫描，所述历史结果保持为真，若拟合扫描结果为真，则生成函数返回值为真，否则生成函数返回值为假。4.根据权利要求3所述的方法，其特征在于，所述将目标区域特征信息和摘要句柄中的历史区域特征信息进行拟合扫描包括：扫描当前目标区域特征信息和历史目标区域特征信息，对每一次扫描输入为：无效拟合历史矩阵特征信息、无效拟合当前矩阵特征信息、位置阈值、大小阈值；对历史区域特征信息和当前区域特征信息从位置角度对目标区域进行判定，分别得出抖动、变化、无效三个中的一个结果；对历史区域特征信息和当前区域特征信息从大小角度对目标区域进行拟合判定，分别得出抖动、变化、无效三个中的一个结果；以位置判定结果和大小判定结果组合判断是否为踪迹；当没有未扫描的历史目标区域特征信息或当前目标区域特征信息时，若判断结果为有踪迹，则扫描结果为真，否则判断结果为无踪迹，则扫描结果为假。5.根据权利要求4所述的方法，其特征在于，所述对历史区域特征信息和当前区域特征信息从位置角度对目标区域进行判定，包括：计算当前目标区域特征信息与历史目标区域特征信息的中心位置移动距离，当中心位置移动距离小于位置抖动阈值时，判定为抖动；否则当中心位置移动距离小于位置变化阈值时判定为变化，否则，判定为无效。6.根据权利要求4所述的方法，其特征在于，所述对历史区域特征信息和当前区域特征信息从大小角度对目标区域进行拟合判定包括：计算当前目标区域特征信息与历史目标区域特征信息的面积大小差异值，当面积大小差异值小于面积抖动阈值时，判定为抖动；否则当面积大小差异值小于面积变化阈值时判定为变化，否则...

【专利技术属性】
技术研发人员：康鹏涛，
申请(专利权)人：合肥君正科技有限公司，
类型：发明
国别省市：安徽,34