视频摘要处理方法、装置、电子设备和存储介质制造方法及图纸

本发明专利技术实施例公开了一种视频摘要处理方法、装置、电子设备和存储介质。该视频摘要处理方法包括：根据接收到的检索指令确定视频摘要中的待检索位置；其中，所述视频摘要为基于原始视频的至少两帧图像生成；确定所述待检索位置到所述视频摘要中各运动对象的候选运动轨迹的距离；根据所述距离确定目标运动轨迹，以根据所述目标运动轨迹关联的目标运动对象在原始视频中定位视频序列。本发明专利技术实施例通过轨迹定位的方法对视频摘要中的数据进行检索，提高了对视频摘要中目标运动对象的检索效率和准确率。准确率。准确率。

【技术实现步骤摘要】
视频摘要处理方法、装置、电子设备和存储介质


[0001]本专利技术实施例涉及视频处理
，尤其涉及一种视频摘要处理方法、装置、电子设备和存储介质。

技术介绍

[0002]随着视频监控高清化时代的到来，海量视频数据的查看和检索成为用户的重点关注。视频摘要是一种视频压缩技术，对视频数据进行处理，提取出用户感兴趣的内容，通过一定的方法重新排列并呈现。以此缩短视频数据的长度，让用户能够快速地找到自己想看的内容。
[0003]在视频摘要检索方面，现有方法大多通过以图搜图等方法进检索，即建立运动目标和待检索目标的关联，进行匹配和搜索，该方法效率较低。并且在运动对象附近有多个干扰目标时，容易导致检索错误。

技术实现思路

[0004]本专利技术实施例提供一种视频摘要处理方法、装置、电子设备和存储介质，以提高视频摘要检索的效率和准确率。
[0005]第一方面，本专利技术实施例提供了一种视频摘要处理方法，包括：
[0006]根据接收到的检索指令确定视频摘要中的待检索位置；其中，所述视频摘要为基于原始视频的至少两帧图像生成；
[0007]确定所述待检索位置到所述视频摘要中各运动对象的候选运动轨迹的距离；
[0008]根据所述距离确定目标运动轨迹，以根据所述目标运动轨迹关联的目标运动对象在原始视频中定位视频序列。
[0009]第二方面，本专利技术实施例还提供了一种视频摘要处理装置，包括：
[0010]待检索位置确定模块，用于根据接收到的检索指令确定视频摘要中的待检索位置；其中，所述视频摘要为基于原始视频的至少两帧图像生成；
[0011]距离确定模块，用于确定所述待检索位置到所述视频摘要中各运动对象的候选运动轨迹的距离；
[0012]运动轨迹确定模块，用于根据所述距离确定目标运动轨迹，以根据所述目标运动轨迹关联的目标运动对象在原始视频中定位视频序列。
[0013]第三方面，本专利技术实施例还提供了一种电子设备，包括：
[0014]一个或多个处理器；
[0015]存储装置，用于存储一个或多个程序，
[0016]当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如本专利技术任一实施例所述的视频摘要处理方法。
[0017]第四方面，本专利技术实施例还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现如本专利技术任一实施例所述的视频摘要处理方法。
[0018]本专利技术实施例基于接收到的检索指令确定视频摘要中的待检索位置，并根据待检索位置和视频摘要中所有运动轨迹之间的距离从所有运动轨迹中确定目标运动轨迹，根据目标运动轨迹在视频摘要中关联的目标运动对象在原始视频中确定该目标运动对象所在的视频序列。本专利技术实施例通过轨迹定位的方法对视频摘要中的数据进行检索，提高了对视频摘要中目标运动对象的检索效率和准确率。
附图说明
[0019]图1是本专利技术实施例一中的视频摘要处理方法的流程图；
[0020]图2是余弦角度确定的示意图；
[0021]图3是待检索位置到候选运动轨迹的距离确定的流程示意图；
[0022]图4是本专利技术实施例二中的视频摘要处理方法的流程图；
[0023]图5是视频摘要生成的流程图；
[0024]图6是本专利技术实施例三中的视频摘要处理装置的结构示意图；
[0025]图7是本专利技术实施例四中的电子设备的结构示意图。
具体实施方式
[0026]下面结合附图和实施例对本专利技术作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释本专利技术，而非对本专利技术的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本专利技术相关的部分而非全部结构。
[0027]实施例一
[0028]图1是本专利技术实施例一中的视频摘要处理方法的流程图，本实施例可适用于根据用户从视频摘要中确定的检索运动对象，在原始视频定位该检索运动对象的情况。该方法可以由视频摘要处理装置来执行，该装置可以采用软件和/或硬件的方式实现，并可配置在电子设备中，例如电子设备可以是后台服务器等具有通信和计算能力的设备。如图1所示，该方法具体包括：
[0029]步骤101、根据接收到的检索指令确定视频摘要中的待检索位置；其中，视频摘要为基于原始视频的至少两帧图像生成。
[0030]其中，检索指令是指用户发出的对感兴趣的运动对象进行标记的指令，具体的，检索指令可以通过用户点击视频摘要中的运动对象进行发出。示例性的，用户在观看视频摘要时，对出现的某运动对象感兴趣，则通过鼠标点击该运动对象所在的位置发出检索指令。视频摘要是指对原始视频中信息的一种概述，保留了感兴趣的运动对象的视频信息，同时剔除原始视频中的冗余内容，实现对一个原始视频中有用信息的筛选。视频摘要是一种视频压缩技术，对原始视频数据进行处理，提取出用户感兴趣的内容，通过一定的方法重新排列并呈现，以此缩短视频数据的长度，让用户能够快速地找到自己想看的内容。原始视频是指通过图像采集装置直接获取到的原始视频数据。具体的，随着视频监控高清化时代的到来，24小时开启的监控相机会采集到海量的视频数据，则由监控相机采集到的未经过处理的视频即为原始视频，对原始视频进行概述得到的压缩视频为视频摘要。
[0031]具体的，接收用户发出的带有对视频摘要中感兴趣的运动对象信息的检索指令，对该检索指令中用户感兴趣的运动对象信息进行确定，得到其在视频摘要中出现的位置，
为待检索位置。示例性的，用户在查看原始视频的视频摘要时，发现感兴趣的对象，对该对象进行点击，获取用户所点击的位置作为待检索位置，对于用户感兴趣的对象不局限于运动对象，也可以是背景图像中的任一位置点，表示用户对出现在背景中该位置点的运动对象感兴趣。
[0032]步骤102、确定待检索位置到视频摘要中各运动对象的候选运动轨迹的距离。
[0033]由于视频摘要中包括了原始视频中所有运动对象的运动轨迹信息，因此通过确定待检索位置到各运动对象的候选运动轨迹之间的距离，即可确定该待检索位置在各候选运动轨迹上的概率。
[0034]具体的，确定待检索位置后，根据在生成视频摘要时预先存储的各运动对象的运动轨迹数据，依次确定待检索位置到各候选运动轨迹的距离。示例性的，确定该待检索位置到各候选运动轨迹的垂直距离作为到各候选运动轨迹的距离。
[0035]在一个可行的实施例中，步骤102，包括：
[0036]基于使用余弦角度作为约束条件的DTW算法，确定待检索位置到视频摘要中各运动对象的候选运动轨迹的距离。
[0037]其中，DTW(Dynamic Time Warping，动态时间归整)算法计算不同长度向量，因此在计算多维向量组间距离表现出一定的优越性。根据DTW算法原理，假设任意两条轨迹S和T，长度分别为M和N个位置点。记两条轨迹的位置坐标点分别为：
[0038][0039]则这两条轨迹的距离为
[0040][0041]按照上述本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种视频摘要处理方法，其特征在于，包括：根据接收到的检索指令确定视频摘要中的待检索位置；其中，所述视频摘要为基于原始视频的至少两帧图像生成；确定所述待检索位置到所述视频摘要中各运动对象的候选运动轨迹的距离；根据所述距离确定目标运动轨迹，以根据所述目标运动轨迹关联的目标运动对象在原始视频中定位视频序列。2.根据权利要求1所述的方法，其特征在于，确定所述待检索位置到所述视频摘要中各运动对象的候选运动轨迹的距离，包括：基于使用余弦角度作为约束条件的DTW算法，确定所述待检索位置到所述视频摘要中各运动对象的候选运动轨迹的距离。3.根据权利要求2所述的方法，其特征在于，所述余弦角度为目标点连线和相邻点连线之间的角度；其中，所述目标点连线为所述待检索位置和候选运动轨迹上目标点的连线，所述相邻点连线为所述目标点和沿所述候选运动轨迹的运动方向上目标点的相邻点的连线。4.根据权利要求3所述的方法，其特征在于，基于使用余弦角度作为约束条件的DTW算法，确定所述待检索位置到所述视频摘要中各运动对象的候选运动轨迹的距离，包括：若所述余弦角度为预设角度，则所述待检索位置和所述目标点之间的距离为所述待检索位置到候选运动轨迹的距离。5.根据权利要求1
‑
4中任一项所述的方法，其特征在于，根据所述距离确定目标运动轨迹，包括：确定所述距离最小的候选运动轨迹为目标运动轨迹。6.根据权利要求1所述的方法，其特征在于，所述方法还包括：对原始视频进行运动对象提取，确定原始视频中各运动对象的原始位置信息，并建立各运动对象和原始位置信息之间的关联关系；其中，所述原始位置信息至少包括各运动对象在原始视频出现中的初始时间和结束时间；相应的，根据所述目标运动轨迹关联的目标运动对象在...

【专利技术属性】
技术研发人员：郭金朋，豆红雷，
申请(专利权)人：浙江宇视科技有限公司，
类型：发明
国别省市：