视频人物识别方法、装置、电子设备及存储介质制造方法及图纸

技术编号:38143533 阅读:17 留言:0更新日期:2023-07-08 09:59
本发明专利技术提供一种视频人物识别方法、装置、电子设备及存储介质,其中视频人物识别方法,包括:获取待识别视频中各图像帧的人脸特征向量;针对各人脸特征向量,将人脸特征向量添加至相似人脸特征向量矩阵中,确定目标相似人脸特征向量矩阵,相似人脸特征向量矩阵为相似人脸特征向量矩阵集合中与人脸特征向量之间的相似度大于预设阈值的矩阵或新建的矩阵;将目标相似人脸特征向量矩阵中的相似人脸特征向量与预设视频人物库中的预设视频人物进行匹配,识别待识别视频中的目标视频人物。本发明专利技术方法能够避免待识别视频因模糊和退化严重而难以识别视频人物的缺陷,从而大幅提升了从模糊和退化严重的影视视频中识别视频人物的准确率,并且适用范围广。并且适用范围广。并且适用范围广。

【技术实现步骤摘要】
视频人物识别方法、装置、电子设备及存储介质


[0001]本专利技术涉及图像处理
,尤其涉及一种视频人物识别方法、装置、电子设备及存储介质。

技术介绍

[0002]目前,人物识别方法是指能够识别或验证图像中主体身份的技术,并且随着电影、电视剧和综艺节目等影视视频的日益盛行,如何识别影视视频中的视频人物也就显得尤为重要。
[0003]相关技术中,通常是对影视视频中的视频帧进行人脸检测,再针对检测到的人脸图像进行特征提取,后基于提取到的人脸特征信息识别影视视频中的视频人物。
[0004]然而,当影视视频中存在人脸分辨率低、尺度变化范围大、光照和姿态变化剧烈、乔装打扮、遮挡和拍摄角度等问题时均会造成模糊和退化,产生低质量的人脸图像,并且当人脸图像退化过大时,使用现有视频人物识别方法提取特征时不可避免地会丢失重要或关键的人脸特征信息,从而导致从模糊和退化严重的影视视频中识别视频人物的准确率低且适用范围受限。

技术实现思路

[0005]本专利技术提供一种视频人物识别方法、装置、电子设备及存储介质,用以解决现有技术从模糊和退化严重的影视视频中识别视频人物的准确率低且适用范围受限的缺陷,大幅提升了从模糊和退化严重的影视视频中识别视频人物的准确率,并且适用范围广。
[0006]本专利技术提供一种视频人物识别方法,包括:
[0007]获取待识别视频中各图像帧的人脸特征向量;
[0008]针对各人脸特征向量,将所述人脸特征向量添加至相似人脸特征向量矩阵中,确定目标相似人脸特征向量矩阵,所述相似人脸特征向量矩阵为相似人脸特征向量矩阵集合中与所述人脸特征向量之间的相似度大于预设阈值的矩阵或新建的矩阵;
[0009]将所述目标相似人脸特征向量矩阵中的相似人脸特征向量与预设视频人物库中的预设视频人物进行匹配,识别所述待识别视频中的目标视频人物。
[0010]根据本专利技术提供的一种视频人物识别方法,所述将所述人脸特征向量添加至相似人脸特征向量矩阵中,确定目标相似人脸特征向量矩阵,包括:
[0011]在所述相似人脸特征向量矩阵集合为空集的情况下,将所述人脸特征向量添加至新建的相似人脸特征向量矩阵,确定所述目标相似人脸特征向量矩阵;
[0012]在所述相似人脸特征向量矩阵集合为非空集的情况下,根据所述人脸特征向量与所述相似人脸特征向量矩阵集合中每个相似人脸特征向量矩阵之间的目标相似度,将所述人脸特征向量添加至与所述人脸特征向量匹配的相似人脸特征向量矩阵中,或者将所述人脸特征向量添加至新建的相似人脸特征向量矩阵中,确定所述目标相似人脸特征向量矩阵。
[0013]根据本专利技术提供的一种视频人物识别方法,确定所述人脸特征向量与所述相似人脸特征向量矩阵集合中每个相似人脸特征向量矩阵之间的目标相似度,包括:
[0014]针对各相似人脸特征向量矩阵,确定所述人脸特征向量与所述相似人脸特征向量矩阵中各相似人脸特征向量之间的相似度;
[0015]将各所述相似度的均值确定为所述人脸特征向量与所述相似人脸特征向量矩阵之间的相似度;
[0016]将所述人脸特征向量与各所述相似人脸特征向量矩阵之间的相似度中的最大相似度,确定为所述人脸特征向量与所述相似人脸特征向量矩阵集合中每个相似人脸特征向量矩阵之间的目标相似度。
[0017]根据本专利技术提供的一种视频人物识别方法,所述根据所述人脸特征向量与所述相似人脸特征向量矩阵集合中每个相似人脸特征向量矩阵之间的目标相似度,将所述人脸特征向量添加至与所述人脸特征向量匹配的相似人脸特征向量矩阵中,或者将所述人脸特征向量添加至新建的相似人脸特征向量矩阵中,确定所述目标相似人脸特征向量矩阵,确定所述目标相似人脸特征向量矩阵,包括:
[0018]根据所述人脸特征向量与所述相似人脸特征向量矩阵集合中每个相似人脸特征向量矩阵之间的目标相似度,比较所述目标相似度与第一预设阈值的大小关系;
[0019]在所述目标相似度大于等于所述第一预设阈值的情况下,将所述人脸特征向量添加至与所述目标最大相似度对应的相似人脸特征向量矩阵中,确定所述目标相似人脸特征向量矩阵;
[0020]在所述目标相似度小于所述第一预设阈值的情况下,将所述人脸特征向量添加至新建的相似人脸特征向量矩阵中,确定所述目标相似人脸特征向量矩阵。
[0021]根据本专利技术提供的一种视频人物识别方法,所述将所述目标相似人脸特征向量矩阵中的相似人脸特征向量与预设视频人物库中的预设视频人物进行匹配,识别所述待识别视频中的目标视频人物,包括:
[0022]在所述目标相似人脸特征向量矩阵的最大维度大于等于第二预设阈值的情况下,确定所述目标相似人脸特征向量矩阵中每个相似人脸特征向量与所述预设视频人物库中每个预设视频人物之间的人物特征相似度;
[0023]基于多个所述人物特征相似度,确定与所述预设视频人物库中相同预设视频人物的人物特征最相似的所述相似人脸特征向量的个数;
[0024]在所述个数大于第三预设阈值的情况下,识别所述预设视频人物库中所述相同预设视频人物为所述待识别视频中的目标视频人物。
[0025]根据本专利技术提供的一种视频人物识别方法,所述获取待识别视频中各图像帧的人脸特征向量,包括:
[0026]对待识别视频进行按序解码,获取所述待识别视频的多个有序图像帧;
[0027]对每个所述有序图像帧进行人脸信息检测;
[0028]基于每个检测到的人脸信息进行裁剪对齐后提取特征向量,从而获取所述待识别视频中各图像帧的人脸特征向量。
[0029]根据本专利技术提供的一种视频人物识别方法,所述对每个所述有序图像帧进行人脸信息检测,包括:
[0030]将每个所述有序图像帧输入至预设人脸信息检测模型中进行人脸信息检测;所述预设人脸信息检测模型为预先训练至收敛的人脸信息检测模型。
[0031]根据本专利技术提供的一种视频人物识别方法,所述基于每个检测到的人脸信息进行裁剪对齐后提取特征向量,从而获取所述待识别视频中各图像帧的人脸特征向量,包括:
[0032]基于每个检测到的人脸信息进行裁剪对齐后,获取每个裁剪对齐后的人脸信息;
[0033]将所述每个裁剪对齐后的人脸信息输入至预设人脸特征向量提取模型中进行人脸特征向量提取,获取所述待识别视频中各图像帧的人脸特征向量;所述预设人脸特征向量提取模型为预先训练至收敛的人脸特征向量提取模型。
[0034]本专利技术还提供一种视频人物识别装置,包括:
[0035]获取模块,用于获取待识别视频中各图像帧的人脸特征向量;
[0036]确定模块,用于针对各人脸特征向量,将所述人脸特征向量添加至相似人脸特征向量矩阵中,确定目标相似人脸特征向量矩阵,所述相似人脸特征向量矩阵为相似人脸特征向量矩阵集合中与所述人脸特征向量之间的相似度大于预设阈值的矩阵或新建的矩阵;
[0037]识别模块,用于将所述目标相似人脸特征向量矩阵中的相似人脸特征向量与预设视频人物库中的预设视本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种视频人物识别方法,其特征在于,包括:获取待识别视频中各图像帧的人脸特征向量;针对各人脸特征向量,将所述人脸特征向量添加至相似人脸特征向量矩阵中,确定目标相似人脸特征向量矩阵,所述相似人脸特征向量矩阵为相似人脸特征向量矩阵集合中与所述人脸特征向量之间的相似度大于预设阈值的矩阵或新建的矩阵;将所述目标相似人脸特征向量矩阵中的相似人脸特征向量与预设视频人物库中的预设视频人物进行匹配,识别所述待识别视频中的目标视频人物。2.根据权利要求1所述的视频人物识别方法,其特征在于,所述将所述人脸特征向量添加至相似人脸特征向量矩阵中,确定目标相似人脸特征向量矩阵,包括:在所述相似人脸特征向量矩阵集合为空集的情况下,将所述人脸特征向量添加至新建的相似人脸特征向量矩阵中,确定所述目标相似人脸特征向量矩阵;在所述相似人脸特征向量矩阵集合为非空集的情况下,根据所述人脸特征向量与所述相似人脸特征向量矩阵集合中每个相似人脸特征向量矩阵之间的目标相似度,将所述人脸特征向量添加至与所述人脸特征向量匹配的相似人脸特征向量矩阵中,或者将所述人脸特征向量添加至新建的相似人脸特征向量矩阵中,确定所述目标相似人脸特征向量矩阵。3.根据权利要求2所述的视频人物识别方法,其特征在于,确定所述人脸特征向量与所述相似人脸特征向量矩阵集合中每个相似人脸特征向量矩阵之间的目标相似度,包括:针对各相似人脸特征向量矩阵,确定所述人脸特征向量与所述相似人脸特征向量矩阵中各相似人脸特征向量之间的相似度;将各所述相似度的均值确定为所述人脸特征向量与所述相似人脸特征向量矩阵之间的相似度;将所述人脸特征向量与各所述相似人脸特征向量矩阵之间的相似度中的最大相似度,确定为所述人脸特征向量与所述相似人脸特征向量矩阵集合中每个相似人脸特征向量矩阵之间的目标相似度。4.根据权利要求2所述的视频人物识别方法,其特征在于,所述根据所述人脸特征向量与所述相似人脸特征向量矩阵集合中每个相似人脸特征向量矩阵之间的目标相似度,将所述人脸特征向量添加至与所述人脸特征向量匹配的相似人脸特征向量矩阵中,或者将所述人脸特征向量添加至新建的相似人脸特征向量矩阵中,确定所述目标相似人脸特征向量矩阵,确定所述目标相似人脸特征向量矩阵,包括:根据所述人脸特征向量与所述相似人脸特征向量矩阵集合中每个相似人脸特征向量矩阵之间的目标相似度,比较所述目标相似度与第一预设阈值的大小关系;在所述目标相似度大于等于所述第一预设阈值的情况下,将所述人脸特征向量添加至与所述目标最大相似度对应的相似人脸特征向量矩阵中,确定所述目标相似人脸特征向量矩阵;在所述目标相似度小于所述第一预设阈值的情况下,将所述人脸特征向量添加至新建的相似人脸特征向量矩阵中,确定所述目标相似人脸特征向量矩阵。5.根据权利要求1至4任一项所述的视频人物识别方法...

【专利技术属性】
技术研发人员:赵庆华罗秀玲于江涛
申请(专利权)人:银河互联网电视有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1