声纹图像结合的人脸识别方法、装置、设备及存储介质制造方法及图纸

本发明专利技术涉及生物识别技术，揭露了一种声纹图像结合的人脸识别方法，包括：获取监控视频，并根据预设的人脸识别方法，对所述监控视频进行人脸活体识别，得到人脸识别结果；当所述人脸识别结果通过认证时，获取所述监控视频中的音频信息，并利用预训练的声纹识别网络对所述音频信息进行声纹认证，得到声纹识别结果；当所述声纹识别结果通过认证时，根据所述人脸识别结果，从预构建的人脸数据库中筛选人物，得到所述监控视频中人物的身份信息。本发明专利技术还提出一种声纹图像结合的人脸识别装置、电子设备以及存储介质。本发明专利技术可以降低人脸识别被网络攻击的风险度。攻击的风险度。攻击的风险度。

【技术实现步骤摘要】
声纹图像结合的人脸识别方法、装置、设备及存储介质


[0001]本专利技术涉及生物识别
，尤其涉及一种声纹图像结合的人脸识别方法、装置、电子设备及计算机可读存储介质。

技术介绍

[0002]人脸识别在人工智能领域的应用越来越广泛，例如支付认证、登录认证等，然而随着互联网技术的发展，社会上也出现一些网络攻击行为对人脸识别技术进行攻击，如人物照片等，造成人脸误判，从而对用户造成侵害。目前，网络上，存在3d环境识别、环境光识别、特定行为指令识别等活体检测技术来加强人脸识别的安全性，然而3D打印、真人面具工艺的发展，单一的图像识别逐渐无法识别与时俱进的网络攻击行为。因此，需要具有更加严谨、准确的网络攻击识别方法来降低人脸识别被网络攻击的风险度。

技术实现思路

[0003]本专利技术提供一种声纹图像结合的人脸识别方法、装置及计算机可读存储介质，其主要目的在于降低人脸识别被网络攻击的风险度。
[0004]为实现上述目的，本专利技术提供的一种声纹图像结合的人脸识别方法，包括：
[0005]获取监控视频，并将所述监控视频导入本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种声纹图像结合的人脸识别方法，其特征在于，所述方法包括：获取监控视频，并将所述监控视频导入预训练的图像音频双通道人脸识别模型中进行视频数据划分，得到音频信息及视频图像信息，并对所述视频图像信息进行人脸活体识别，得到活体识别结果及人脸特征结果；当所述活体识别结果通过认证时，利用所述图像音频双通道人脸识别模型中的声纹识别网络对所述音频信息进行声纹识别，得到声纹识别结果；当所述声纹识别结果通过认证时，根据所述人脸特征结果，从预构建的人脸数据库中筛选人物，得到所述监控视频中人物的身份信息。2.如权利要求1所述的声纹图像结合的人脸识别方法，其特征在于，所述利用所述图像音频双通道人脸识别模型中的声纹识别网络对所述音频信息进行声纹识别，得到声纹识别结果，包括：对所述音频信息进行声纹特征识别，得到声纹特征集合；利用所述声纹识别网络中的拼接音频识别激活函数识别所述声纹特征集合，判断所述音频信息是否为拼接音频；当所述音频信息为拼接音频时，生成拼接音频攻击警报；当所述音频信息不是拼接音频时，获取所述人脸识别结果对应的预存声纹信息，并识别所述声纹特征集合与所述预存声纹信息的相似度；根据所述相似度及预设的可信阈值，得到所述音频信息的声纹识别结果。3.如权利要求1所述的声纹图像结合的人脸识别方法，其特征在于，所述对所述视频图像信息进行人脸活体识别，得到活体识别结果及人脸特征结果，包括：对所述监控视频进行灰度化处理，得到灰度视频；根据预设的随机活体识别方法，从所述灰度视频中截取活体认证视频；利用所述图像音频双通道人脸识别模型中的活体识别网络对所述活体认证视频进行动作特征识别，得到认证动作集合；当所述认证动作集合不符合所述随机活体识别方法时，判定所述监控视频中存在活体攻击现象，并发出预设的活体攻击警报；当所述认证动作集合符合所述随机活体识别方法时，判定所述监控视频中的人物为活体，并利用所述图像音频双通道人脸识别模型中的人脸特征提取网络对所述灰度视频进行特征识别，得到人脸特征结果。4.如权利要求3所述的声纹图像结合的人脸识别方法，其特征在于，所述根据预设的随机活体识别方法，从所述灰度视频中截取活体认证视频，包括：从预构建的活体识别方法集合中随机提取一种识别方法；根据所述识别方法，生成人脸截取框，将所述人脸截取框中的人脸视频进行截取，得到活体认证视频。5.如权利要求3所述的声纹图像结合的人脸识别方法，其特征在于，所述利用所述图像音频双通道人脸识别模型中的活体识别网络对所述活体认证视频进行动作特征识别，得到认证动作集合，包括：利用所述活体识别网络对所述活体认证视频进行特征提取操作，得到特征序列集合；对所述特征序列集合进行特征识别操作，...

【专利技术属性】
技术研发人员：张建军，
申请(专利权)人：未鲲上海科技服务有限公司，
类型：发明
国别省市：