This application discloses a face recognition method and device based on video multi frame face feature fusion. The method includes: collecting the N frame face image to be identified in the monitored video, n > 1, selecting the M frame face image from the face image of the N frame, extracting the feature of the M frame face image, and generating one by one correspondence with the face image of the M frame. Feature vector {fi}, I = 1, 2,..., m, 1 less than m < n; the M feature vector {fi} is fused into a feature vector r, and the feature vector r is compared with the face features in the database to identify the face identity in the monitored video. The face recognition method provided by this application is used to detect and extract the multi frame face images in the monitored video, and the extracted face features are fused into one person's face feature for recognition, which not only reduces the number of features, but also reduces face angle deflection, motion blur and reverse light to extract face images. The influence of feature is applied to multi dynamic video capture environment, which can effectively improve the accuracy of face recognition.
【技术实现步骤摘要】
一种基于视频多帧人脸特征融合的人脸识别方法及装置
本申请涉及人工智能图像处理
,尤其涉及多动态环境下,一种基于视频多帧人脸特征融合的人脸识别方法及装置。
技术介绍
随着视频监控系统的普及和逐渐增加的发展需求,人脸识别已经取得了长足的发展。现如今,“移动电子眼”的触角正在慢慢深入到城市的各个角落,扮演越来越重要的角色,为我们的“平安城市”保驾护航。平安城市也是衡量一个城市现代化管理水平的重要体现,是实现一个城市乃至整个国家安全和稳定的重要措施。建立合理、有效的城市视频监控管理系统,才能使政府管理部分在第一时间发现问题,提出应对措施及应急预案。视频人脸识别是基于人的面部特征信息,从视频中实时查找人脸,并与人脸数据库进行实时比对,从而实现快速身份识别的一种技术。现有的基于视频的人脸识别方法及装置是采用单帧图像识别,即将视频中的多帧图像逐帧取出,将各帧图像中的人脸分别与人脸数据库进行比对识别,并且当各帧的比对识别结果满足某一预设条件时,认为识别出了人脸。城市视频监控管理系统中的监控装置,例如,摄像头、监控录像等往往采集到的图像比较模糊,现有技术中,通过模糊算法可以对模糊图像进行处理。而对于双动态图像,也就是在双动态环境中采集到的图像,例如,行驶车辆上的摄像头采集路边行人图像,由于高速运动、车辆抖动、距离变化等因素导致采集到的双动态人脸图像出现运动模糊、抖动、遮挡、光线不足以及侧脸等质量问题。采用传统的基于单帧图像的人脸识别方法及装置识别人脸时,容易因图像质量问题造成人脸身份识别错误,或者需要通过多次识别才能正确识别出视频中的人脸身份,甚至无法识别人脸身份,这 ...
【技术保护点】
一种基于视频多帧人脸特征融合的人脸识别方法,其特征在于,所述方法包括:采集监控视频中待识别的n帧人脸图像,n≥1;从n帧所述人脸图像中选取m帧人脸图像,对m帧所述人脸图像进行特征提取,生成与m帧所述人脸图像一一对应的特征向量{fi},i=1,2,....,m,1≤m≤n;将m个所述特征向量{fi}融合成一个特征向量r,将所述特征向量r与数据库中的人脸特征进行比较,以识别监控视频中的人脸身份。
【技术特征摘要】
1.一种基于视频多帧人脸特征融合的人脸识别方法,其特征在于,所述方法包括:采集监控视频中待识别的n帧人脸图像,n≥1;从n帧所述人脸图像中选取m帧人脸图像,对m帧所述人脸图像进行特征提取,生成与m帧所述人脸图像一一对应的特征向量{fi},i=1,2,....,m,1≤m≤n;将m个所述特征向量{fi}融合成一个特征向量r,将所述特征向量r与数据库中的人脸特征进行比较,以识别监控视频中的人脸身份。2.根据权利要求1所述的方法,其特征在于,所述将m个所述特征向量{fi}融合成一个特征向量r,包括:将m个所述特征向量{fi}经过至少一层特征融合,最终融合成一个特征向量r。3.根据权利要求2所述的方法,其特征在于,将m个所述特征向量{fi}经过单层特征融合,最终融合成一个特征向量r,包括:根据所述特征向量{fi}生成与每个特征向量对应的线性权值{ai};通过公式(1)将m个所述特征向量{fi}融合成一个特征向量r;其中,4.根据权利要求3所述的方法,其特征在于,所述根据所述特征向量{fi}生成与每个特征向量对应的线性权值{ai},包括:将所述特征向量{fi}通过公式(2)、(3)生成线性权值{ai};ei=g({fi})(2)其中,i与j相互独立。5.根据权利要求4所述的方法,其特征在于,公式(2)中,g({fi})=qTfi,其中,q为与人脸图像特征相同长度的参数向量。6.根据权利要求5所述的方法,其特征在于,当q取值为fi时,公式g({fi})=qTfi变成g({fi})=fiTfi,计算得到权值7.根据权利要求2所述的方法,其特征在于,将m个所述特征向量{fi}经过k层特征融合,最终...
【专利技术属性】
技术研发人员:史方,邹佳运,王标,杨瑞峰,
申请(专利权)人:成都视观天下科技有限公司,
类型:发明
国别省市:四川,51
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。