一种视频摘要方法、终端及计算机可读存储介质技术

本发明专利技术提供了一种视频摘要方法、终端和计算机可读存储介质，确定在原视频中各运动目标的运动轨迹，根据各运动轨迹在原视频中的相对位置关系，确定各运动轨迹在摘要视频中的相对位置；然后，根据确定的起始运动轨迹和各运动轨迹之间的相对位置，将各个运动轨迹进行合成，形成摘要视频。通过本发明专利技术的实施，以运动目标为参照对原视频进行剪切摘选，从而可以保证压缩率，而且又保留了视频主体，即运动目标，最大限度的保证了内容的丰富性，改善了视频摘要的效果。

A Video Abstraction Method, Terminal and Computer Readable Storage Media

The invention provides a video summarization method, a terminal and a computer readable storage medium, which determines the motion trajectories of each moving object in the original video, determines the relative positions of each moving trajectory in the summary video according to the relative position relationship of each moving trajectory in the original video, and then, according to the determined initial motion trajectory and the relative positions between each moving trajectory, divides each trajectory into two parts. Motion trajectories are synthesized to form summary video. Through the implementation of the present invention, the original video is cut and picked with the moving object as the reference, thus ensuring the compression rate, and retaining the main body of the video, i.e. the moving object, maximizing the richness of the content and improving the effect of video summarization.

【技术实现步骤摘要】
一种视频摘要方法、终端及计算机可读存储介质
本专利技术涉及多媒体
，尤其涉及一种视频摘要方法、终端和计算可读存储介质。
技术介绍
视频摘要技术，或者叫视频压缩或者视频总结技术，是近年来新兴的一种视频媒体处理技术，发展前景十分广阔。它可将一端很长的视频，在保持原有的信息量和关键事件的同时浓缩到几分钟甚至是几秒钟以内，因此称为视频“摘要”。目前主流的视频摘要算法，可以归纳为：关键帧(keyframe)法、视频跳读(videoskim)法和动态视频摘要(dynamicvideosynopsis)。关键帧法是一种静态的视频摘要方法，往往是通过比较不同帧的重要性来决定用哪些帧作为关键帧，其结果是通过一张或多张关键帧的静态图片来呈现的。关键帧方法会丢失目标的动态信息，不能保留完整动态过程，具有较大的局限性。视频跳读则是有选择地浏览视频片段，用关键片段的组合来代表整个视频的信息，一个典型的做法就是当视频中无运动目标时，则快速播放，当有关键事件发生时，则正常播放，这种方法保留了行为的部分动态信息，但压缩比较低。然而，在目前的视频摘要算法中，要么压缩的程度大，但是丢失的内容多，如关键帧法，要么保留的内容多，但是压缩的程度小，如视频跳读法，就是难以同时兼顾压缩率和内容。
技术实现思路
本专利技术实施例提供了一种视频摘要方法、终端及计算机可读存储介质，旨在解决现有技术中视频摘要无法同时兼顾压缩率和内容，摘要效果差的问题。为了解决上述技术问题，本专利技术实施例提供了一种视频摘要方法，包括：确定在原视频中各运动目标的运动轨迹；所述运动轨迹包括：所述运动目标在原视频中的原始帧的集合；根据各运动轨迹在原视频中的相对位置关系，确定各运动轨迹在摘要视频中的相对位置；根据所述摘要视频中已确定的起始运动轨迹，以及各运动轨迹在摘要视频中的相对位置，将各个所述运动轨迹进行合成，形成所述摘要视频。此外，本专利技术实施例还提供一种视频摘要装置，包括：目标检测模块，用于确定在原视频中各运动目标的运动轨迹；所述运动轨迹包括：所述运动目标在原视频中的原始帧的集合；轨迹确定模块，用于根据各运动轨迹在原视频中的相对位置关系，确定各运动轨迹在摘要视频中的相对位置；合成模块，根据所述摘要视频中已确定的起始运动轨迹，以及各运动轨迹在摘要视频中的相对位置，将各个所述运动轨迹进行合成，形成所述摘要视频。此外，本专利技术实施例还提供一种终端，包括处理器、存储器和通信总线；所述通信总线用于实现所述处理器和存储器之间的连接通信；所述处理器用于执行所述存储器中存储的视频摘要程序，以实现前述的视频摘要方法的步骤。此外，本专利技术实施例还提供一种计算机可读存储介质，所述计算机可读存储介质存储有一个或者多个计算机程序，所述计算机程序可被一个或者多个处理器执行以实现前述的视频摘要方法的步骤。本专利技术的有益效果是：本专利技术提供了一种视频摘要方法、终端和计算机可读存储介质，确定在原视频中各运动目标的运动轨迹，根据各运动轨迹在原视频中的相对位置关系，确定各运动轨迹在摘要视频中的相对位置；然后，根据确定的起始运动轨迹和各运动轨迹之间的相对位置，将各个运动轨迹进行合成，形成摘要视频。通过本专利技术的实施，以运动目标为参照对原视频进行剪切摘选，从而可以保证压缩率，而且又保留了视频主体，即运动目标，最大限度的保证了内容的丰富性，改善了视频摘要的效果。附图说明图1为本专利技术第一实施例提供的一种视频摘要方法流程图；图2为本专利技术第二实施例提供的一种运动目标的运动轨迹图；图3为本专利技术第三实施例提供的一种摘要视频合成示意图；图4为本专利技术第二实施例提供的一种摘要视频合成示意图；图5为本专利技术第三实施例提供的一种视频摘要方法流程图；图6为本专利技术第三实施例提供的一种视频摘要装置组成示意图；图7为本专利技术第四实施例提供的一种终端组成示意图。具体实施方式第一实施例请参考图1，图1是本专利技术第一实施例提供的一种视频摘要方法流程图，包括：S101、确定在原视频中各运动目标的运动轨迹；运动轨迹包括：运动目标在原视频中的原始帧的集合；S102、根据各运动轨迹在原视频中的相对位置关系，确定各运动轨迹在摘要视频中的相对位置；S103、根据摘要视频中已确定的起始运动轨迹，以及各运动轨迹在摘要视频中的相对位置，将各个运动轨迹进行合成，形成摘要视频。S101中，确定在原视频中各运动目标的运动轨迹。其中，运动目标顾名思义，指的是在视频中为动态的目标。对于运动目标而言，在整个视频之中，肯定是在一定程度上发生了变化，变化的具体表现则一般是发生像素点的位移，或者是从无到有，从有到无的过程。视频文件是由多个帧所组成的，这些帧图片按照一定的时间间隔进行播放就可以形成最终的视频，换言之，每一个运动目标，实际上是视频文件的组成部分，也就是帧的静态画面来呈现的。因此，确定在原视频中各运动目标的运动轨迹可以包括：确定运动目标在原视频中的位置信息；根据运动目标的位置信息确定运动目标的运动轨迹。其中运动目标的位置信息包括运动目标所在的原始帧和在对应的原始帧中的位置。原始帧，表示在原视频中的帧，原始帧号，则表示原始帧的序号，一个视频文件的总帧数是不定的，少的可能有几百帧，而多的，视频内容较长的则可能包括上万帧。一个视频文件总能找到最小分割的以帧为单位，而运动目标就在这些连续的帧中，持续改变着位置，从而形成运动的影像。运动目标的确定，除了运动之外，还可以根据实际需求，在运动的前提下，再进行一定的筛选，选择出更符合要求的运动目标，对于视频的跟踪也主要基于这些认定的运动目标来进行。一个视频文件中的动态部分是很多的，因此，为了准确的判断该目标是否是属于同一运动目标，在本实施例中，确定运动目标在原视频中的位置信息可以包括：根据特征相似度判断各帧中的运动目标是否属于同一运动目标；基于判断结果，确定运动目标的运动轨迹。具体的，根据特征相似度，包括LBP(LocalBinaryPatterns，局部二值模式)，Haar-like(Haar-like是一种图形特征的描述方法，因其类似于Haar小波变换而得名)，直方图等等方式，可以确定在不同帧里面的对象是否是属于同一对象的影像，也就可以进一步确定是否是运动目标。此外，还可以根据交叠面积等其他信息，将当前帧的运动目标与前一帧的运动目标进行关联。关联的直接结果就是得到了运动目标的运动轨迹，包括运动目标的起始点和终止点。其中，起始帧和终止帧的具体确定方式可以包括，当检测到相似度满足预设要求的对象发生了移动，则将其认定为运动目标的同时，回溯其最初未发生移动的帧，或者回溯到其未出现的帧，作为起始帧；而终止帧，则是对于一个运动目标，其已经超过N帧没有发生更新，也就是位置没有发生移动时，则视作该目标已经停止运动，可将该目标在没有发生移动的第一帧作为终止帧。在这种情况下，如果在后续的运动目标检测中，再度发现该以认定为停止的运动目标重新发生了移动，那么还可以将该运动目标再与之前的运动目标进行组合，仍视为一个运动轨迹。相应的，当一个运动目标在已跟踪的运动目标中，根据相似度或者交叠面积等信息，找不到相匹配的，则把这个运动目标视为新的运动目标来进行跟踪。根据运动目标的位置信息确定运动目标的运动轨迹。运动目标的运动轨迹，就是包括该运动目标的原视频的原始帧的集合，对于同一个运动本文档来自技高网...

【技术保护点】
1.一种视频摘要方法，包括：确定在原视频中各运动目标的运动轨迹；所述运动轨迹包括：所述运动目标在原视频中的原始帧的集合；根据各运动轨迹在原视频中的相对位置关系，确定各运动轨迹在摘要视频中的相对位置；根据所述摘要视频中已确定的起始运动轨迹，以及各运动轨迹在摘要视频中的相对位置，将各个所述运动轨迹进行合成，形成所述摘要视频。

【技术特征摘要】
1.一种视频摘要方法，包括：确定在原视频中各运动目标的运动轨迹；所述运动轨迹包括：所述运动目标在原视频中的原始帧的集合；根据各运动轨迹在原视频中的相对位置关系，确定各运动轨迹在摘要视频中的相对位置；根据所述摘要视频中已确定的起始运动轨迹，以及各运动轨迹在摘要视频中的相对位置，将各个所述运动轨迹进行合成，形成所述摘要视频。2.如权利要求1所述的视频摘要方法，其特征在于，所述确定各运动轨迹在摘要视频中的相对位置包括：判断不同的运动目标的运动轨迹中，是否存在相同的原始帧号；当存在相同的原始帧号时，根据所述相同的原始帧号，确定对应的运动轨迹之间的相对位置；其中，具备相同的原始帧号的运动轨迹在所述摘要视频中的相对位置与在所述原视频中的相对位置一致；当不存在相同的原始帧号时，确定不存在相同的原始帧号的运动轨迹之间的轨迹重叠度，并确定在所述轨迹重叠度小于预设阈值时，各运动目标的运动轨迹在摘要视频中的相对位置；其中，在所述轨迹重叠度小于预设阈值时，各运动轨迹之间的相对位置使得所述摘要视频的时长最短。3.如权利要求2所述的视频摘要方法，其特征在于，当存在相同的原始帧号时，所述确定各运动轨迹在摘要视频中的相对位置还包括：当两个运动轨迹之间至少存在两个相同的原始帧号时，根据相同的所述原始帧号中的任意一个在其中一个运动轨迹中的位置，以及所述运动轨迹的初始帧与所述相同的原始帧之间的间隔值，确定所述运动轨迹与另一个运动轨迹之间的相对位置。4.如权利要求2所述的视频摘要方法，其特征在于，若不同的运动目标的图像之间的交叠面积，与其中面积较小的运动目标的图像的面积之比记为碰撞比，则所述...

【专利技术属性】
技术研发人员：范贤友，
申请(专利权)人：中兴通讯股份有限公司，
类型：发明
国别省市：广东,44