视频检测方法和装置制造方法及图纸

本申请实施例公开了视频检测方法和装置。所述的视频检测方法的一实施例包括：获取待检测关键帧序列，其中，待检测关键帧序列中的各关键帧与预先获取的参考视频中，其中一个关键帧相匹配；生成待检测关键帧序列的待检测时间戳序列，待检测时间戳序列中的各时间戳为待检测关键帧序列中，其中一个待检测关键帧的时间戳；获取参考时间戳序列，其中，参考时间戳序列为参考视频的关键帧中，与待检测关键帧序列的其中一个待检测关键帧序列相匹配的关键帧的时间戳；基于待检测时间戳序列与所获取的参考时间戳序列之间的对应关系，确定待检测视频和参考视频的关联度。该实现方式实现了自动视频关联检测，避免了人工的方式效率低、自定义规则复杂等问题。

【技术实现步骤摘要】
视频检测方法和装置
本申请实施例涉及图像处理领域，具体涉及计算机视觉领域，尤其涉及视频检测方法和装置。
技术介绍
视频比对技术，即通过分析、理解视频的图像，语音等信息，对两个视频进行相似度比对，从而判断两两视频之间是否包含相同的片段。若包含，还可以进一步给出相同片段的起始时间和结束时间。通过该技术，可以解决视频去重的问题，既能提高人工审核的效率，禁止重复视频入库，节省资源；又能有效防止视频个性化推荐时给出重复的视频，提高用户体验。该问题之前的主要解决方案是人工定义规则，通过规则判断两个视频是否重复。人工查看badcase之后定义出来的一些策略规则，并且这些规则能覆盖大多数的情形。众所周知，定义规则是一件非常复杂且毫无技术含量的工作，需要人为查看大量匹配结果后，总结规律，然后制定一系列的“如果……就……”。当重新出现新的案例的时候，又需要重新加规则。
技术实现思路
本申请实施例提出了视频检测方法和装置。第一方面，本申请实施例提供了一种视频检测方法，包括：获取待检测关键帧序列，其中，待检测关键帧序列中的各关键帧与预先获取的参考视频中，其中一个关键帧相匹配；生成待检测关键帧序列的待检测时间戳序列，待检测时间戳序列中的各时间戳为待检测关键帧序列中，其中一个待检测关键帧的时间戳；获取参考时间戳序列，其中，参考时间戳序列为参考视频的关键帧中，与待检测关键帧序列的其中一个待检测关键帧序列相匹配的关键帧的时间戳；基于待检测时间戳序列与所获取的参考时间戳序列之间的对应关系，确定待检测视频和参考视频的关联度。在一些实施例中，在获取待检测关键帧序列之前，方法还包括：提取待检测视频的关键帧，生成关键帧序列；将关键帧序列与预先获取的参考关键帧序列进行匹配度检测，得到待检测关键帧序列和匹配参考关键帧序列；其中：待检测关键帧序列中的待检测关键帧为关键帧序列中，与参考关键帧序列的其中一个关键帧相匹配的帧；匹配参考关键帧序列中的匹配参考关键帧为参考关键帧序列中，与其中一个待检测关键帧相匹配的帧作为匹配参考关键帧。在一些实施例中，将关键帧序列与预先获取的参考关键帧序列进行匹配度检测，包括：对于关键帧序列中的关键帧，将该关键帧与参考关键帧序列中的参考关键帧输入预先训练的匹配度检测模型，以确定该关键帧与参考关键帧的匹配度。在一些实施例中，基于待检测时间戳序列与所获取的参考时间戳序列之间的对应关系，确定待检测视频和参考视频的关联度，包括：生成待检测时间戳序列与参考时间戳序列的对应关系；将所生成的对应关系输入预先训练的关联度模型中，确定待检测视频和参考视频的关联度。在一些实施例中，关联度模型通过以下方式训练得到：建立初始关联度模型；获取训练样本集，训练样本集中的训练样本包括预先生成的两个视频的对应关系，以及用于标注该两个视频的关联度的关联度标注；将训练样本集输入初始关联度模型中，基于预先设置的损失函数训练初始关联度模型，得到训练后的关联度模型。第二方面，本申请实施例提供了一种视频检测装置，包括：关键帧序列获取单元，被配置成获取待检测关键帧序列，其中，待检测关键帧序列中的各关键帧与预先获取的参考视频中，其中一个关键帧相匹配；时间戳生成单元，被配置成生成待检测关键帧序列的待检测时间戳序列，待检测时间戳序列中的各时间戳为待检测关键帧序列中，其中一个待检测关键帧的时间戳；参考时间戳获取单元，被配置成获取参考时间戳序列，其中，参考时间戳序列为参考视频的关键帧中，与待检测关键帧序列的其中一个待检测关键帧序列相匹配的关键帧的时间戳；确定单元，被配置成基于待检测时间戳序列与所获取的参考时间戳序列之间的对应关系，确定待检测视频和参考视频的关联度。在一些实施例中，装置还包括：提取单元，被配置成提取待检测视频的关键帧，生成关键帧序列；匹配度检测单元，被配置成将关键帧序列与预先获取的参考关键帧序列进行匹配度检测，得到待检测关键帧序列和匹配参考关键帧序列；其中：待检测关键帧序列中的待检测关键帧为关键帧序列中，与参考关键帧序列的其中一个关键帧相匹配的帧；匹配参考关键帧序列中的匹配参考关键帧为参考关键帧序列中，与其中一个待检测关键帧相匹配的帧作为匹配参考关键帧。在一些实施例中，匹配度检测单元进一步被配置成：对于关键帧序列中的关键帧，将该关键帧与参考关键帧序列中的参考关键帧输入预先训练的匹配度检测模型，以确定该关键帧与参考关键帧的匹配度。在一些实施例中，确定单元进一步被配置成：生成待检测时间戳序列与参考时间戳序列的对应关系；将所生成的对应关系输入预先训练的关联度模型中，确定待检测视频和参考视频的关联度。在一些实施例中，关联度模型通过以下方式训练得到：建立初始关联度模型；获取训练样本集，训练样本集中的训练样本包括预先生成的两个视频的对应关系，以及用于标注该两个视频的关联度的关联度标注；将训练样本集输入初始关联度模型中，基于预先设置的损失函数训练初始关联度模型，得到训练后的关联度模型。第三方面，本申请实施例提供了一种电子设备，包括：一个或多个处理器；存储装置，用于存储一个或多个程序，当一个或多个程序被一个或多个处理器执行，使得一个或多个处理器实现如第一方面描述的方法。第四方面，本申请实施例提供了一种计算机可读存储介质，其上存储有计算机程序，其中，程序被处理器执行时实现如第一方面描述的方法。本申请实施例提供的视频检测方法和装置，首先，获取待检测关键帧序列；接着，生成待检测关键帧序列的待检测时间戳序列；接着，获取参考时间戳序列；最后，基于待检测时间戳序列与所获取的参考时间戳序列之间的对应关系，确定待检测视频和参考视频的关联度，实现了自动的视频关联检测，避免了采用人工的方式效率低、自定义规则复杂等问题。附图说明通过阅读参照以下附图所作的对非限制性实施例所作的详细描述，本申请的其它特征、目的和优点将会变得更明显：图1是本申请一个实施例的视频检测方法可以应用于其中的示例性系统架构图；图2是根据本申请的视频检测方法的一个实施例的流程图；图3是根据本申请的视频检测方法的一个应用场景的示意图；图4是根据本申请的视频检测方法的又一个实施例的流程图；图5是根据本申请的视频检测方法的一个实施例中，训练关联度模型的示意性流程图；图6A～图6C是训练关联度模型的样本的示意图；图7是根据本申请的视频检测装置的一个实施例的结构图；图8是适于用来实现本申请实施例的视频检测换方法的电子设备的计算机系统的结构示意图。具体实施方式下面结合附图和实施例对本申请作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释相关专利技术，而非对该专利技术的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与有关专利技术相关的部分。需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本申请。图1示出了可以应用本申请的视频检测方法或视频检测装置的实施例的示例性系统架构100。如图1所示，系统架构100可以包括终端设备101、102、103，网络104和服务器105。网络104用以在终端设备101、102、103和服务器105之间提供通信链路的介质。网络104可以包括各种连接类型，例如有线、无线通信链路或者光纤电缆等等。终端设备101、102、103可以是硬件本文档来自技高网...

【技术保护点】
1.一种视频检测方法，包括：获取待检测关键帧序列，其中，所述待检测关键帧序列中的各关键帧与预先获取的参考视频中，其中一个关键帧相匹配；生成所述待检测关键帧序列的待检测时间戳序列，所述待检测时间戳序列中的各时间戳为所述待检测关键帧序列中，其中一个待检测关键帧的时间戳；获取参考时间戳序列，其中，所述参考时间戳序列为所述参考视频的关键帧中，与所述待检测关键帧序列的其中一个待检测关键帧序列相匹配的关键帧的时间戳；基于所述待检测时间戳序列与所获取的参考时间戳序列之间的对应关系，确定所述待检测视频和所述参考视频的关联度。

【技术特征摘要】
1.一种视频检测方法，包括：获取待检测关键帧序列，其中，所述待检测关键帧序列中的各关键帧与预先获取的参考视频中，其中一个关键帧相匹配；生成所述待检测关键帧序列的待检测时间戳序列，所述待检测时间戳序列中的各时间戳为所述待检测关键帧序列中，其中一个待检测关键帧的时间戳；获取参考时间戳序列，其中，所述参考时间戳序列为所述参考视频的关键帧中，与所述待检测关键帧序列的其中一个待检测关键帧序列相匹配的关键帧的时间戳；基于所述待检测时间戳序列与所获取的参考时间戳序列之间的对应关系，确定所述待检测视频和所述参考视频的关联度。2.根据权利要求1所述的方法，其中，在所述获取待检测关键帧序列之前，所述方法还包括：提取待检测视频的关键帧，生成关键帧序列；将所述关键帧序列与预先获取的参考关键帧序列进行匹配度检测，得到待检测关键帧序列和匹配参考关键帧序列；其中：所述待检测关键帧序列中的待检测关键帧为所述关键帧序列中，与所述参考关键帧序列的其中一个关键帧相匹配的帧；所述匹配参考关键帧序列中的匹配参考关键帧为所述参考关键帧序列中，与其中一个待检测关键帧相匹配的帧作为匹配参考关键帧。3.根据权利要求2所述的方法，其中，所述将所述关键帧序列与预先获取的参考关键帧序列进行匹配度检测，包括：对于关键帧序列中的关键帧，将该关键帧与所述参考关键帧序列中的参考关键帧输入预先训练的匹配度检测模型，以确定该关键帧与参考关键帧的匹配度。4.根据权利要求1-3之一所述的方法，其中，所述基于所述待检测时间戳序列与所获取的参考时间戳序列之间的对应关系，确定所述待检测视频和所述参考视频的关联度，包括：生成所述待检测时间戳序列与所述参考时间戳序列的对应关系；将所生成的对应关系输入预先训练的关联度模型中，确定所述待检测视频和所述参考视频的关联度。5.根据权利要求4所述的方法，其中，所述关联度模型通过以下方式训练得到：建立初始关联度模型；获取训练样本集，所述训练样本集中的训练样本包括预先生成的两个视频的对应关系，以及用于标注该两个视频的关联度的关联度标注；将所述训练样本集输入所述初始关联度模型中，基于预先设置的损失函数训练所述初始关联度模型，得到训练后的关联度模型。6.一种视频检测装置，包括：关键帧序列获取单元，被配置成获取待检测关键帧序列，其中，所述待检测关键帧序列中的各关键帧与预先获取的参考视频中，其中一...

【专利技术属性】
技术研发人员：李甫，孙昊，文石磊，
申请(专利权)人：百度在线网络技术北京有限公司，
类型：发明
国别省市：北京,11