防伪检测方法和装置、电子设备、存储介质制造方法及图纸

本公开实施例公开了一种防伪检测方法和装置、电子设备、存储介质，其中，防伪检测方法包括：获取用户阅读指定内容的图像序列，所述图像序列包括多个图像；基于所述图像序列中包括的至少两个目标图像的唇部形态信息，得到所述图像序列的唇语识别结果；基于所述图像序列的唇语识别结果，确定防伪检测结果。本公开实施例基于唇语识别实现了防伪检测。

【技术实现步骤摘要】
防伪检测方法和装置、电子设备、存储介质
本公开涉及人计算机视觉技术，尤其是一种防伪检测方法和装置、电子设备、存储介质。
技术介绍
近年来，人脸识别已成为移动支付、身份验证领域的一项重要应用。在人脸识别支付、视频身份验证开户等应用场合中，有必要对人脸进行活体检测，判定在摄像头前的人脸图像是否来自真实的人，还是照片或录制的视频中的人脸图像。
技术实现思路
本公开实施例提供一种防伪检测的技术方案。根据本公开实施例的第一方面，提供了一种防伪检测方法，包括：获取用户阅读指定内容的图像序列，所述图像序列包括多个图像；基于所述图像序列中包括的至少两个目标图像的唇部形态信息，得到所述图像序列的唇语识别结果；基于所述图像序列的唇语识别结果，确定防伪检测结果。具体地，图像序列包括多个图像，可以获取该多个图像中至少两个目标图像的唇部形态信息，并基于该至少两个目标图像的唇部形态信息，得到图像序列的唇语识别结果。在一些可能的实现方式中，指定内容包括至少一个字符。在一些可能的实现方式中，目标图像可以包括人脸图像。可选地，在第一方面的一些可能的实现方式中，还包括：从所述至少两个目标图像中的每个目标图像中获取唇部区域图像；基于从所述目标图像中获取的唇部区域图像，确定所述目标图像的唇部形态信息。具体地，从目标图像中获取唇语区域图像，并对唇部区域图像进行处理，得到目标图像的唇部形态信息。可选地，在第一方面的一些可能的实现方式中，所述基于从所述目标图像中获取的唇部区域图像，确定所述目标图像的唇部形态信息，包括：对所述唇部区域图像进行特征提取处理，得到所述唇部区域图像的唇部形态特征，其中，所述目标图像的唇部形态信息包括所述唇部区域图像的唇部形态特征。可选地，在第一方面的一些可能的实现方式中，所述从所述至少两个目标图像的每个目标图像中获取唇部区域图像，包括：对所述目标图像进行关键点检测，得到面部关键点的信息，其中，所述面部关键点的信息包括唇部关键点的位置信息；基于所述唇部关键点的位置信息，从所述目标图像中获取唇部区域图像。可选地，在第一方面的一些可能的实现方式中，在所述基于所述唇部关键点的位置信息，从所述目标图像中获取唇部区域图像之前，还包括：对所述目标图像进行转正处理，得到转正处理后的目标图像；基于所述转正处理，确定所述唇部关键点在所述转正处理后的目标图像中的位置信息；所述基于所述唇部关键点的位置信息，从所述目标图像中获取唇部区域图像，包括：基于所述唇部关键点在所述转正处理后的目标图像中的位置信息，从所述转正处理后的目标图像中获取唇部区域图像。可选地，在第一方面的一些可能的实现方式中，还包括：从所述图像序列包括的多个图像中选取所述至少两个目标图像。可选地，在第一方面的一些可能的实现方式中，所述从所述图像序列包括的多个图像中选取所述至少两个目标图像，包括：从所述图像序列包括的多个图像中选取满足预设质量指标的第一图像；将所述第一图像以及与所述第一图像邻近的至少一个第二图像确定为所述目标图像。可选地，在第一方面的一些可能的实现方式中，所述预设质量指标包括以下任意一项或任意多项：图像包括完整的唇部边缘、唇部清晰度达到第一条件、图像的光线亮度达到第二条件。可选地，在第一方面的一些可能的实现方式中，所述至少一个第二图像包括位于所述第一图像之前且与所述第一图像邻近的至少一个图像以及位于所述第一图像之后且与所述第一图像邻近的至少一个图像。可选地，在第一方面的一些可能的实现方式中，所述基于所述图像序列中包括的至少两个目标图像的唇部形态信息，得到所述图像序列的唇语识别结果，包括：利用第一神经网络对所述图像序列中包括的至少两个目标图像的唇部形态信息进行处理，输出所述图像序列的唇语识别结果。可选地，在第一方面的一些可能的实现方式中，所述基于所述图像序列的唇语识别结果，确定防伪检测结果，包括：确定所述图像序列的唇语识别结果与所述用户阅读所述指定内容的音频的语音识别结果是否匹配；基于所述图像序列的唇语识别结果与所述音频的语音识别结果之间的匹配结果，确定防伪检测结果。可选地，在第一方面的一些可能的实现方式中，所述基于图像序列中包括的至少两个目标图像的唇部形态信息，得到所述图像序列的唇语识别结果，包括：从所述图像序列获取至少一个图像子序列，所述图像子序列包括所述图像序列中的至少一个图像；基于所述图像子序列中包括的至少一个目标图像的唇部形态信息，得到所述图像子序列的唇语识别结果；其中，所述图像序列的唇语识别结果包括所述至少一个图像子序列中每个图像子序列的唇语识别结果。可选地，在第一方面的一些可能的实现方式中，所述至少一个图像子序列中的每个图像子序列对应于所述指定内容中的一个字符。可选地，在第一方面的一些可能的实现方式中，所述指定内容中的字符包括以下任意一种或多种：数字、英文字母、英文单词、汉字、符号。可选地，在第一方面的一些可能的实现方式中，所述从所述图像序列中获取至少一个图像子序列，包括：根据用户阅读所述指定内容的音频的分割结果，从所述图像序列中获取所述至少一个图像子序列。可选地，在第一方面的一些可能的实现方式中，所述音频的分割结果包括：所述用户阅读所述指定内容中每个字符的音频片段；所述根据用户阅读所述指定内容的音频的分割结果，从所述图像序列中获取至少一个图像子序列，包括：根据所述用户阅读所述指定内容中字符的音频片段的时间信息，从所述图像序列中获取所述音频片段对应的图像子序列。可选地，在第一方面的一些可能的实现方式中，所述音频片段的时间信息包括以下一项或任意多项：所述音频片段的时长、所述音频片段的起始时刻、所述音频片段的终止时刻。可选地，在第一方面的一些可能的实现方式中，还包括：获取所述用户阅读所述指定内容的音频；对所述音频进行分割，得到至少一个音频片段；其中，所述至少一个音频片段中的每个音频片段对应所述指定内容中的一个字符。可选地，在第一方面的一些可能的实现方式中，所述基于所述图像序列的唇语识别结果，确定防伪检测结果，包括：确定所述图像序列的唇语识别结果与所述用户阅读所述指定内容的音频的语音识别结果是否匹配；基于所述图像序列的唇语识别结果与所述音频的语音识别结果之间的匹配结果，确定防伪检测结果。可选地，在第一方面的一些可能的实现方式中，所述确定所述图像序列的唇语识别结果与所述用户阅读所述指定内容的音频的语音识别结果是否匹配，包括：基于所述用户阅读所述指定内容的音频的语音识别结果，对所述至少一个图像子序列的唇语识别结果进行融合，得到融合识别结果；基于所述融合识别结果和所述音频的语音识别结果，确定所述图像序列的唇语识别结果与所述音频的语音识别结果是否匹配。可选地，在第一方面的一些可能的实现方式中，所述图像子序列的唇语识别结果包括：所述图像子序列被分类为与所述指定内容对应的多个预设字符中每个预设字符的概率。可选地，在第一方面的一些可能的实现方式中，所述基于所述融合识别结果和所述语音识别结果，确定所述唇语识别结果与所述音频的语音识别结果是否匹配，包括：将所述融合识别结果和所述音频的语音识别结果输入到第二神经网络进行处理，得到所述唇语识别结果与所述音频的语音识别结果的匹配概率；基于所述唇语识别结果与所述音频的语音识别结果的匹配概率，确定所述唇语识别结果与所述音频的语音识本文档来自技高网...

【技术保护点】
1.一种防伪检测方法，其特征在于，包括：获取用户阅读指定内容的图像序列，所述图像序列包括多个图像；基于所述图像序列中包括的至少两个目标图像的唇部形态信息，得到所述图像序列的唇语识别结果；基于所述图像序列的唇语识别结果，确定防伪检测结果。

【技术特征摘要】
1.一种防伪检测方法，其特征在于，包括：获取用户阅读指定内容的图像序列，所述图像序列包括多个图像；基于所述图像序列中包括的至少两个目标图像的唇部形态信息，得到所述图像序列的唇语识别结果；基于所述图像序列的唇语识别结果，确定防伪检测结果。2.根据权利要求1所述的方法，其特征在于，还包括：从所述至少两个目标图像中的每个目标图像中获取唇部区域图像；基于从所述目标图像中获取的唇部区域图像，确定所述目标图像的唇部形态信息。3.根据权利要求2所述的方法，其特征在于，所述基于从所述目标图像中获取的唇部区域图像，确定所述目标图像的唇部形态信息，包括：对所述唇部区域图像进行特征提取处理，得到所述唇部区域图像的唇部形态特征，其中，所述目标图像的唇部形态信息包括所述唇部区域图像的唇部形态特征。4.根据权利要求2或3所述的方法，其特征在于，所述从所述至少两个目标图像的每个目标图像中获取唇部区域图像，包括：对所述目标图像进行关键点检测，得到面部关键点的信息，其中，所述面部关键点的信息包括唇部关键点的位置信息；基于所述唇部关键点的位置信息，从所述目标图像中获取唇部区域图像。5.根据权利要求4所述的方法，其特征在于，在所述基于所述唇部关键点的位置信息，从所述目标图像中获取唇部区域图像之前，还包括：对所述目标图像进行转正处理，得到转正处理后的目标图像；基于所述转正处理，确定所述唇部关键点在所述转正处理后的目标图像中的位置信息；所述基于所述唇部关键点的位置信息，从所述目标图像中获取唇部区域图像，...

【专利技术属性】
技术研发人员：吴立威，张瑞，闫俊杰，彭义刚，
申请(专利权)人：北京市商汤科技开发有限公司，
类型：发明
国别省市：北京,11