本申请提出一种视频匹配处理方法、装置、计算机设备、存储介质及产品。该方法包括:对从待匹配视频中得到的各个第一视频帧进行全局特征提取处理,得到待匹配视频的全局视频图像特征,以及,对待匹配视频中各个第二视频帧进行局部特征提取处理,得到待匹配视频的局部视频图像特征;基于待匹配视频的全局视频图像特征,确定与待匹配视频相关联的初始召回视频集合;根据待匹配视频的局部视频图像特征,从初始召回视频集合中确定出与待匹配视频相匹配的匹配召回视频。本申请可基于多细粒度的图像特征进行视频匹配处理,提高了视频匹配过程的准确性质。准确性质。准确性质。
【技术实现步骤摘要】
视频匹配处理方法、装置、计算机设备、存储介质及产品
[0001]本申请涉及计算机
,尤其涉及一种视频匹配处理方法、一种视频匹配处理装置、一种计算机设备、一种计算机可读存储介质及一种计算机程序产品。
技术介绍
[0002]随着互联网技术的不断发展,各式各样的视频在各个领域内层出不穷。那么,视频查重技术便成为各个领域内所研究的一个重要话题。
[0003]目前,常用的视频查重方式主要是基于人工匹配的方式,即人工将待匹配视频与视频库中的各个视频进行比对查重,这种人工匹配方式操作繁琐,效率低下。当然现有的也存在通过人工智能模型来智能比对两个或者多个视频的相似度的方案,但是目前的人工智能模型存在一些特征提取偏差的问题,不利于应对线上各式各样的视频内容的比对以及去重操作。
技术实现思路
[0004]本申请实施例提出了一种视频匹配处理方法、装置、计算机设备、存储介质及产品,可提高视频匹配处理的准确性。
[0005]一方面,本申请实施例提供了一种视频匹配处理方法,该方法包括:
[0006]对从待匹配视频中得到的各个第一视频帧进行全局特征提取处理,得到待匹配视频的全局视频图像特征;
[0007]基于待匹配视频的全局视频图像特征,确定与待匹配视频相关联的初始召回视频集合;
[0008]对待匹配视频中各个第二视频帧进行局部特征提取处理,得到待匹配视频的局部视频图像特征;
[0009]根据待匹配视频的局部视频图像特征,从初始召回视频集合中确定出与待匹配视频相匹配的匹配召回视频。
[0010]一方面,本申请实施例提供了一种视频匹配处理装置,该装置包括:
[0011]处理单元,用于对从待匹配视频中得到的各个第一视频帧进行全局特征提取处理,得到待匹配视频的全局视频图像特征;
[0012]确定单元,用于基于待匹配视频的全局视频图像特征,确定与待匹配视频相关联的初始召回视频集合;
[0013]处理单元,还用于对待匹配视频中各个第二视频帧进行局部特征提取处理,得到待匹配视频的局部视频图像特征;
[0014]确定单元,还用于根据待匹配视频的局部视频图像特征,从初始召回视频集合中确定出与待匹配视频相匹配的匹配召回视频。
[0015]在一种可能的实现方式中,处理单元对从待匹配视频中得到的各个第一视频帧进行全局特征提取处理,得到待匹配视频的全局视频图像特征,用于执行以下操作:
[0016]对待匹配视频进行抽帧处理,得到多个初始视频帧;
[0017]对多个初始视频帧进行降采样处理,得到多个第一视频帧;
[0018]对各个第一视频帧进行全局特征提取处理,得到各个第一视频帧的全局视频图像特征,其中各个第一视频帧的全局视频图像特征组成待匹配视频的全局视频图像特征。
[0019]在一种可能的实现方式中,确定单元基于待匹配视频的全局视频图像特征,确定与待匹配视频相关联的初始召回视频集合,用于执行以下操作:
[0020]在视频帧特征库中,对各个第一视频帧的全局视频图像特征进行特征查找处理,确定每个第一视频帧对应的召回列表,召回列表包括n个待召回视频帧的帧标识,以及每个待召回视频帧所属的待召回视频的视频标识,n为正整数;
[0021]根据每个待召回视频帧所属的待召回视频的视频标识,确定与待匹配视频相关联的初始召回视频集合。
[0022]在一种可能的实现方式中,确定单元根据每个待召回视频帧所属的待召回视频的视频标识,确定与待匹配视频相关联的初始召回视频集合,用于执行以下操作:
[0023]遍历每个第一视频帧对应的召回列表中的视频标识,确定待召回视频,待召回视频由具有相同视频标识的多个待召回视频帧构成的集合表示;
[0024]基于间隔查找规则对每个召回列表中的待召回视频帧进行查找处理,得到每个待召回视频对应的等间隔视频序列;
[0025]根据每个待召回视频对应的等间隔视频序列,确定与待匹配视频相关联的初始召回视频集合。
[0026]在一种可能的实现方式中,初始召回视频集合中包括一个或多个初始召回视频;确定单元根据每个待召回视频对应的等间隔视频序列,确定与待匹配视频相关联的初始召回视频集合,用于执行以下操作:
[0027]分别计算待匹配视频和每个待召回视频对应的等间隔视频序列之间的重复度,得到每个待召回视频的重复度;
[0028]将满足重复度阈值的重复度对应的待召回视频,确定为与待匹配视频相关联的初始召回视频,以得到初始召回视频集合。
[0029]在一种可能的实现方式中,确定单元根据待匹配视频的局部视频图像特征,从初始召回视频集合中确定出与待匹配视频相匹配的匹配召回视频,用于执行以下操作:
[0030]获取初始召回视频集合中每个初始召回视频的关联视频特征;
[0031]基于图像匹配算法,对所述待匹配视频的局部视频图像特征、与每个初始召回视频的关联视频特征进行特征匹配处理,确定待匹配视频中目标视频帧与每个初始召回视频中对应的召回视频帧之间的多个特征匹配点;
[0032]根据目标视频帧与每个召回视频帧之间的多个特征匹配点,从初始召回视频集合中确定出与待匹配视频相匹配的匹配召回视频。
[0033]在一种可能的实现方式中,确定单元根据目标视频帧与每个召回视频帧之间的多个特征匹配点,从初始召回视频集合中确定出与待匹配视频相匹配的匹配召回视频,用于执行以下操作:
[0034]根据目标视频帧与任一召回视频帧之间的特征匹配点的数量、以及目标视频帧与任一召回视频帧之间的最少局部特征数量,确定待匹配视频与任一初始召回视频之间的相
似度;
[0035]将初始召回视频集合中达到相似度阈值的初始召回视频,确定为与待匹配视频相匹配的匹配召回视频。
[0036]在一种可能的实现方式中,匹配召回视频的数量为多个;处理单元还用于执行以下操作:
[0037]基于待匹配视频的第一音频信息,得到待匹配视频的第一音频指纹;以及,
[0038]基于任一匹配召回视频的第二音频信息,得到任一匹配召回视频的第二音频指纹;
[0039]根据第一音频指纹和第二音频指纹之间的指纹相似度,从多个匹配召回视频中确定出与待匹配视频相匹配的目标召回视频。
[0040]一方面,本申请实施例提供一种计算机设备,该计算机设备包括存储器和处理器,存储器存储有计算机程序,计算机程序被处理器执行时,使得处理器执行上述的视频匹配处理方法。
[0041]一方面,本申请实施例提供一种计算机可读存储介质,该计算机可读存储介质存储有计算机程序,该计算机程序被计算机设备的处理器读取并执行时,使得计算机设备执行上述的视频匹配处理方法。
[0042]一方面,本申请实施例提供了一种计算机程序产品或计算机程序,该计算机程序产品或计算机程序包括计算机指令,该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令,处理器执行该计算机指令,使本文档来自技高网...
【技术保护点】
【技术特征摘要】
1.一种视频匹配处理方法,其特征在于,包括:对从待匹配视频中得到的各个第一视频帧进行全局特征提取处理,得到所述待匹配视频的全局视频图像特征,以及,对所述待匹配视频中各个第二视频帧进行局部特征提取处理,得到所述待匹配视频的局部视频图像特征;基于所述待匹配视频的全局视频图像特征,确定与所述待匹配视频相关联的初始召回视频集合;根据所述待匹配视频的局部视频图像特征,从所述初始召回视频集合中确定出与所述待匹配视频相匹配的匹配召回视频。2.如权利要求1所述的方法,其特征在于,所述对从待匹配视频中得到的各个第一视频帧进行全局特征提取处理,得到所述待匹配视频的全局视频图像特征,包括:对所述待匹配视频进行抽帧处理,得到多个初始视频帧;对所述多个初始视频帧进行降采样处理,得到多个第一视频帧;对各个所述第一视频帧进行全局特征提取处理,得到各个所述第一视频帧的全局视频图像特征,其中各个所述第一视频帧的全局视频图像特征组成所述待匹配视频的全局视频图像特征。3.如权利要求1所述的方法,其特征在于,所述基于所述待匹配视频的全局视频图像特征,确定与所述待匹配视频相关联的初始召回视频集合,包括:在视频帧特征库中,对各个所述第一视频帧的全局视频图像特征进行特征查找处理,确定每个第一视频帧对应的召回列表,所述召回列表包括n个待召回视频帧的帧标识,以及每个待召回视频帧所属的待召回视频的视频标识,n为正整数;根据所述每个待召回视频帧所属的待召回视频的视频标识,确定与所述待匹配视频相关联的初始召回视频集合。4.如权利要求3所述的方法,其特征在于,所述根据所述每个待召回视频帧所属的待召回视频的视频标识,确定与所述待匹配视频相关联的初始召回视频集合,包括:遍历每个所述第一视频帧对应的召回列表中的视频标识,确定待召回视频,所述待召回视频由具有相同视频标识的多个待召回视频帧构成的集合表示;基于间隔查找规则对每个所述召回列表中的待召回视频帧进行查找处理,得到每个待召回视频对应的等间隔视频序列;根据所述每个待召回视频对应的等间隔视频序列,确定与所述待匹配视频相关联的初始召回视频集合。5.如权利要求4所述的方法,其特征在于,所述根据所述每个待召回视频对应的等间隔视频序列,确定与所述待匹配视频相关联的初始召回视频集合,包括:分别计算所述待匹配视频和所述每个待召回视频对应的等间隔视频序列之间的重复度,得到所述每个待召回视频的重复度;将满足重复度阈值的重复度对应的待召回视频,确定为与所述...
【专利技术属性】
技术研发人员:魏旭东,洪国伟,董治,姜涛,
申请(专利权)人:腾讯音乐娱乐科技深圳有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。