一种建立人脸索引的方法、装置、处理服务器及存储介质制造方法及图纸

本发明专利技术实施例提供一种建立人脸索引的方法、装置、处理服务器及存储介质，该方法包括：获取至少一条视频；分别确定各条视频相应的人脸特征，并确定各人脸特征在相应视频的视频信息；将同一人脸的人脸特征进行聚类处理，得到至少一个第一聚类，其中，一个第一聚类所聚集的人脸特征表示，所述至少一条视频中同一人脸的人脸特征；针对各第一聚类所聚集的各人脸特征，关联人脸特征在相应视频的视频信息，得到所述至少一条视频的人脸索引。本发明专利技术实施例可在无人脸信息标记的情况下，高效的建立人脸索引。

A method, device, processing server and storage medium for building face index

The embodiment of the invention provides a method, device, processing server and storage medium for establishing a face index, the method includes: obtaining at least one video; determining the corresponding face features of each video respectively, and determining the video information of each face feature in the corresponding video; clustering the face features of the same face to obtain at least one first cluster, wherein, one The face features gathered by the first clustering represent the face features of the same face in the at least one video; for each face feature gathered by the first clustering, the video information of the face features in the corresponding video is associated to obtain the face index of the at least one video. The embodiment of the invention can efficiently establish a face index without a face information mark.

【技术实现步骤摘要】
一种建立人脸索引的方法、装置、处理服务器及存储介质
本专利技术涉及数据处理
，具体涉及一种建立人脸索引的方法、装置、处理服务器及存储介质。
技术介绍
人脸索引表示的是视频中的人脸特征与视频信息的关联，通过为视频建立人脸索引，可为在视频中查询目标人物等场景时，高效的提供视频中与目标人物关联的视频信息(如视频中目标人物出现的视频时间点、视频进度等)；基于人脸索引的特性，人脸索引在视频点播、安防等领域得到了广泛的应用。目前人脸索引的建立过程一般需要用户提前进行人脸信息的标记；然而，视频中的人物往往众多，基于用户标记人脸信息的方式来建立人脸索引，将存在极为繁琐的用户标记人脸信息的工作，并且标记人脸信息的难度也极大，这无疑导致人脸索引的建立效率极低。
技术实现思路
有鉴于此，本专利技术实施例提供一种建立人脸索引的方法、装置、处理服务器及存储介质，以在无人脸信息标记的情况下，高效的建立人脸索引。为实现上述目的，本专利技术实施例提供如下技术方案：一种建立人脸索引的方法，包括：获取至少一条视频；分别确定各条视频相应的人脸特征，并确定各人脸特征在相应视频的视频信息；将同一人脸的人脸特征进行聚类处理，得到至少一个第一聚类；其中，一个第一聚类所聚集的人脸特征表示，所述至少一条视频中同一人脸的人脸特征；针对各第一聚类所聚集的各人脸特征，关联人脸特征在相应视频的视频信息，得到所述至少一条视频的人脸索引。本专利技术实施例还提供一种建立人脸索引的装置，包括：视频获取模块，用于获取至少一条视频；人脸特征及视频信息确定模块，用于分别确定各条视频相应的人脸特征，并确定各人脸特征在相应视频的视频信息；第一聚类得到模块，用于将同一人脸的人脸特征进行聚类处理，得到至少一个第一聚类；其中，一个第一聚类所聚集的人脸特征表示，所述至少一条视频中同一人脸的人脸特征；人脸索引建立模块，用于针对各第一聚类所聚集的各人脸特征，关联人脸特征在相应视频的视频信息，得到所述至少一条视频的人脸索引。本专利技术实施例还提供一种处理服务器，包括：至少一个存储器和至少一个处理芯片，所述存储器存储有程序，所述处理芯片调用所述程序，以实现上述所述的建立人脸索引的方法的步骤。本专利技术实施例还提供一种存储介质，所述存储介质存储有适于处理芯片执行的程序，以实现上述所述的建立人脸索引的方法的步骤。基于上述技术方案，本专利技术实施例提供的建立人脸索引的方法，可以对至少一条视频，进行同一人脸的人脸特征的聚类处理，得到适于所述至少一条视频相应的第一聚类；进而将各第一聚类所聚集的各人脸特征，进行人脸特征在相应视频的视频信息的关联，可在无人脸信息标记的情况下，实现高效的建立适于所述至少一条视频的人脸索引。进一步，通过将所述至少一条视频中，同一人脸的人脸特征进行聚类，可以认为一个第一聚类中聚集的人脸特征表示的是同一人脸，可以减少人脸索引库中的人脸数量，可极大的减小人脸索引的数据冗余。附图说明为了更清楚地说明本专利技术实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本专利技术的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。图1为传统的基于用户标记人脸信息，来建立人脸索引的示意图；图2为本专利技术实施例提供的建立人脸索引的系统的架构示意图；图3为本专利技术实施例提供的建立人脸索引的方法的信令流程图；图4为多条视频情况下，建立人脸索引的处理示例图；图5为本专利技术实施例提供的建立人脸索引的方法的另一信令流程图；图6为一条视频情况下，建立人脸索引的处理示例图；图7为本专利技术实施例提供的将同一人脸的人脸特征进行聚类处理的方法流程图；图8为本专利技术实施例提供的将同一人脸的人脸特征进行聚类处理的另一方法流程图；图9为将人脸特征加入到聚类的示意图；图10为删除次要人脸的人脸特征的聚类的示意图；图11为本专利技术实施例提供的应用示例图；图12为本专利技术实施例提供的建立人脸索引的装置的结构框图；图13为本专利技术实施例提供的处理服务器的结构框图。具体实施方式图1为传统的基于用户标记人脸信息，来建立人脸索引的示意图，如图1所示，在建立人脸索引时，用户需要标记人物的基础信息(如人物名称、性别等)、人脸图像(如人物的正脸图像、侧脸图像等)等人脸信息，从而服务器将标记的人脸信息作为注册的输入，通过注册处理，确定出视频中与该人脸图像的人脸特征相应的视频信息，并关联该视频信息与该人物的基础信息和人脸特征，建立出该人物的人脸索引；可以看出，传统建立人脸索引的方式，在视频(特别对于大规模视频数据)中的人物较多时，将存在极为繁琐的用户标记人脸信息的工作，并且标记人脸信息的难度也极大，存在人脸索引的建立效率极低的问题；进一步，对于没有标记人脸信息但存在于视频中的人物，传统的建立人脸索引的方式是，将视频中没有标记人脸信息的人脸图像作为独立的输入来进行注册处理，这使得人脸索引的数据极为冗余。为解决上述缺陷，本专利技术实施例提供一种在无人脸信息标记的情况下，进行高效的人脸索引建立的方案；下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。图2为本专利技术实施例提供的建立人脸索引的系统的一种可选架构示意图，如图2所示，该系统可以包括：视频源10，处理服务器20，人脸索引库30。其中，视频源10可以认为是视频的源头，视本专利技术实施例应用场景而定，可选的，视频可以是以流式数据表示，如视频流；作为一种示例说明，对于直播场景而言，视频源可以是视频直播服务器，本专利技术实施例可对视频直播服务器输出的直播视频进行人脸索引建立；对于点播场景而言，视频源可以是点播视频库(点播库中记录有多个视频)，点播视频库可以在用户点播视频时，提供用户所点播的视频，而在本专利技术实施例中，也可对点播视频库中记录的视频进行人脸索引的建立；当然，视频源还可以是电影视频库、电视视频库等，具体不再一一说明；显然，视频源可以是上述描述的视频源形式的至少一个(一个或多个)。处理服务器20为对视频源10提供的视频建立人脸索引的服务设备，是本专利技术实施例建立人脸索引的主要处理设备；处理服务器可以由单一服务器实现，也可以由多台服务器组成的服务器群组实现。人脸索引库30为记录本专利技术实施例建立的人脸索引的数据库。作为一种系统结构变形，人脸索引库也可以由处理服务器中的存储单元实现，如可由处理服务器中具备数据存储能力的存储设备，记录本专利技术实施例所建立的人脸索引。为实现在无人脸信息标记的情况下，高效的建立人脸索引，本文档来自技高网...

【技术保护点】
1.一种建立人脸索引的方法，其特征在于，包括：/n获取至少一条视频；/n分别确定各条视频相应的人脸特征，并确定各人脸特征在相应视频的视频信息；/n将同一人脸的人脸特征进行聚类处理，得到至少一个第一聚类；其中，一个第一聚类所聚集的人脸特征表示，所述至少一条视频中同一人脸的人脸特征；/n针对各第一聚类所聚集的各人脸特征，关联人脸特征在相应视频的视频信息，得到所述至少一条视频的人脸索引。/n

【技术特征摘要】
1.一种建立人脸索引的方法，其特征在于，包括：
获取至少一条视频；
分别确定各条视频相应的人脸特征，并确定各人脸特征在相应视频的视频信息；
将同一人脸的人脸特征进行聚类处理，得到至少一个第一聚类；其中，一个第一聚类所聚集的人脸特征表示，所述至少一条视频中同一人脸的人脸特征；
针对各第一聚类所聚集的各人脸特征，关联人脸特征在相应视频的视频信息，得到所述至少一条视频的人脸索引。


2.根据权利要求1所述的建立人脸索引的方法，其特征在于，所述至少一条视频为多条视频；所述将同一人脸的人脸特征进行聚类处理，得到至少一个第一聚类包括：
获取各条视频的聚类结果，其中，一条视频的聚类结果至少包括：聚集该视频中同一人脸的人脸特征的至少一个第二聚类，及各第二聚类所聚集的各人脸特征在该视频的视频信息；
针对各条视频的聚类结果，将同一人脸的人脸特征进行聚类处理，得到所述多条视频相应的至少一个第一聚类。


3.根据权利要求2所述的建立人脸索引的方法，其特征在于，所述获取各条视频的聚类结果包括：
分别针对各条视频相应的人脸特征，将同一人脸的人脸特征进行聚类处理，以分别得到各条视频相应的至少一个第二聚类；
分别针对各条视频相应的各第二聚类所聚集的人脸特征，关联人脸特征在相应视频的视频信息，得到各条视频的聚类结果。


4.根据权利要求3所述的建立人脸索引的方法，其特征在于，所述分别得到各条视频相应的至少一个第二聚类包括：
对于任一条视频，在得到该视频中同一人脸的人脸特征的至少一个聚类后，将该至少一个聚类中人脸特征出现次数小于次数阈值的聚类进行删除，得到该视频相应的至少一个第二聚类。


5.根据权利要求3所述的建立人脸索引的方法，其特征在于，所述分别针对各条视频相应的人脸特征，将同一人脸的人脸特征进行聚类处理包括：
若获取的任一条视频存在视频索引链，对于从该视频中提取的人脸特征，确定该人脸特征在该视频的视频索引链中相应的第二聚类；其中，一个视频索引链记录该视频中聚集的不同人脸的人脸特征的各第二聚类；
若获取的任一条视频不存在视频索引链，创建该视频相应的视频索引链，对于从该视频中提取的人脸特征，确定提取的人脸特征在所创建的该视频的视频索引链中相应的第二聚类。


6.根据权利要求1-5任一项所述的建立人脸索引的方法，其特征在于，对于任一待聚类人脸特征，执行所述将同一人脸的人脸特征进行聚类处理的过程包括：
检测已得到的聚类中，是否存在与所述待聚类人脸特征的相似度符合预定相似度要求的目标聚类；
若存在所述目标聚类，将所述待聚类人脸特征聚集到所述目标聚类；
若不存在所述目标聚类，设置新的聚类，将所述待聚类人脸特征聚集到该新的聚类。


7.根据权利要求6所述的建立人脸索引的方法，其特征在于，所述检测已得到的聚类中，是否存在与所述待聚类人脸特征的相似度符合预定相似度要求的目标聚类包括：
检测在所述待聚类人脸特征的人脸特征向量的预定向量距离内，是否存在已得到的...

【专利技术属性】
技术研发人员：杨宇，谢金运，伍倡辉，
申请(专利权)人：腾讯科技深圳有限公司，
类型：发明
国别省市：广东;44