一种多模态身份识别方法及设备技术

本申请提供了一种多模态身份识别方法及设备，涉及人工智能的身份识别技术领域；在基于一种模态对用户进行身份识别时，主动采集该用户的其他模态的注册信息，完成多模态注册流程；不需要用户对每种模态分别进行单独的注册，简化了多模态注册流程。用户在电子设备上进行一种模态的一次注册，电子设备则可以主动采集其他模态的信息，完成多种模态的注册过程，支持多模态的身份识别。支持多模态的身份识别。支持多模态的身份识别。

【技术实现步骤摘要】
一种多模态身份识别方法及设备


[0001]本申请实施例涉及身份识别
，尤其涉及一种多模态身份识别方法及设备。

技术介绍

[0002]随着指纹识别、人脸识别、声纹识别、虹膜识别等身份识别技术的不断成熟，电子设备已经具备通过指纹、人脸、声纹、虹膜等进行用户身份识别的能力。指纹识别，人脸识别，声纹识别或虹膜识别等识别方式分别称为身份识别的一种模态。利用一种模态进行身份识别称为单模态身份识别；利用多种模态进行身份识别称为多模态身份识别。
[0003]身份识别的每一种模态，通常都分为注册和认证两个过程。比如，电子设备要成功进行指纹识别，需要用户先在该电子设备上进行指纹注册；即用户预先在该电子设备上录入指纹，该预先录入的指纹可以称为注册指纹。电子设备在进行身份认证时，可以将用户进行身份认证的输入指纹与注册指纹进行比对，从而确定输入指纹的用户的身份。
[0004]目前，支持多种模态的电子设备，其各模态的注册过程是独立的，也就是说，同一用户需要分多次分别针对每种模态进行注册，注册的过程比较繁琐。比如，用户1在电子设备上进行一次指纹注册；然后，用户1在电子设备上进行一次声纹注册；之后，用户1在电子设备上进行一次人脸注册；用户1还在电子设备上进行一次虹膜注册；用户1在电子设备上进行了四次注册过程。
[0005]并且，同一用户针对不同模态进行注册后，各个模态的注册信息并不能在电子设备上自动关联至同一用户。比如，用户1在电子设备上进行一次指纹注册，电子设备上保存了注册指纹1；用户1在电子设备上进行一次声纹注册，电子设备上保存了注册声纹1；用户2在电子设备上进行一次指纹注册，电子设备上保存了注册指纹2；电子设备并不能自动将注册指纹1和注册声纹1关联至同一用户。
[0006]对于支持多模态的电子设备，如何简化多模态注册流程，是需要解决的问题。

技术实现思路

[0007]本申请实施例提供一种多模态身份识别方法及设备，可以在基于一种模态对用户进行身份识别过程中，主动获取该用户的其他模态的注册信息，简化多模态注册流程，提升用户身份识别的方便性。
[0008]第一方面，本申请实施例提供一种多模态身份识别方法、装置及电子设备。
[0009]在一种可能的设计中，该方法可以包括：电子设备接收用户在第一模态的注册操作，电子设备还接收该用户在第一模态的认证操作；其中，第一模态为电子设备支持的多种身份识别方式中任意一种；若电子设备基于第一模态对用户认证成功，响应于用户在第一模态的认证操作，电子设备采集用户的一种或多种第二模态的注册信息；并根据用户的一种或多种第二模态的注册信息，完成该用户在一种或多种第二模态的注册过程。
[0010]在该方法中，用户在电子设备上进行一种模态的注册，电子设备则可以主动采集
其他模态的注册信息，完成第二模态的注册过程，支持多模态的身份识别，简化了多模态注册流程。并且，由于电子设备在用户进行一种模态的注册后，主动采集该用户的其他模态的注册信息，电子设备获取的多种模态的注册信息是自动关联至同一用户的，电子设备可以基于多种模态中的一种或多种对用户进行认证。
[0011]在一种可能的设计中，电子设备在预设时长内采集用户的一种或多种第二模态的注册信息。也就是说，采集注册信息的时长可以设定。
[0012]在一种可能的设计中，在电子设备采集用户的一种或多种第二模态的注册信息之前，电子设备接收用户对采集用户的一种或多种第二模态的注册信息的确认操作。也就是说，电子设备确定用户同意电子设备自动采集注册信息，电子设备才执行该方案，避免用户信息泄露。
[0013]在一种可能的设计中，在电子设备接收用户在第一模态的注册操作之后，若确定用户在第一模态注册成功，响应于用户在第一模态的注册操作，电子设备采集用户的一种或多种第二模态的注册信息。在该方法中，还可以在用户主动注册成功后，采集一次第二模态的注册信息。
[0014]在一种可能的设计中，在电子设备根据用户的一种或多种第二模态的注册信息，完成该用户在一种或多种第二模态的注册过程之前，电子设备确定该注册信息达到预设的第一标准。其中，第一标准可以包括获取的样本数量大于第一阈值。
[0015]在一种可能的设计中，电子设备采集到第二模态的注册信息后，还可以对采集到的信息进行筛选。
[0016]在一种可能的设计中，电子设备支持的模态可以包括：指纹识别，人脸识别，声纹识别或虹膜识别。
[0017]在一种可能的设计中，第一模态为指纹识别，电子设备接收用户在电子设备上进行指纹认证的操作；若对用户进行指纹认证成功，响应于用户在电子设备上进行指纹认证的操作，电子设备采集用户的人脸图像。这样，电子设备可以使用采集到的人脸图像完成人脸注册；电子设备就可以采用指纹识别和人脸识别中的至少一种身份识别方式对用户进行身份认证。在一种可能的设计中，响应于用户在电子设备上进行指纹认证的操作，电子设备还采集用户的语音。这样，电子设备可以使用采集到的语音完成用户的声纹注册；电子设备就可以采用指纹识别、人脸识别和声纹识别中的一种或多种身份识别方式对用户进行身份认证。
[0018]在一种可能的设计中，第一模态为声纹识别，电子设备接收用户的输入语音，并根据用户的输入语音对用户进行声纹认证；若对用户进行声纹认证成功，电子设备采集用户的人脸图像。这样，电子设备可以使用采集到的人脸图像完成人脸注册；电子设备就可以采用声纹识别和人脸识别中的至少一种身份识别方式对用户进行身份认证。
[0019]在一种可能的设计中，电子设备可以对采集到的第二模态的注册信息进行筛选。比如，采集到人脸图像，可以对人脸图像进行筛选，去除不完整的人脸图像，去除不清晰的人脸图像。在一种可能的设计中，电子设备可以根据保存的注册信息，对采集到的第二模态的注册信息进行筛选。比如，根据保存的声纹信息，确定用户为男性，则可以去除采集的人脸图像中的女性人脸图像。
[0020]在一种可能的设计中，在电子设备完成一种第二模态的注册过程后，可以显示提
示信息，用于向用户确认启用该第二模态的身份识别方式。
[0021]相应的，本申请还提供了一种多模态身份识别装置，该装置可以实现第一方面所述的多模态身份识别方法。该装置可以通过软件、硬件、或者通过硬件执行相应的软件实现上述方法。
[0022]在一种可能的设计中，该装置可以包括：注册模块、认证模块和输入模块。其中，注册模块，用于接收用户在第一模态的注册操作；其中，第一模态为多模态身份识别装置支持的多种身份识别方式中任意一种；认证模块，用于接收该用户在第一模态的认证操作；输入模块，用于若认证模块基于第一模态对用户认证成功，响应于用户在第一模态的认证操作，采集用户的一种或多种第二模态的注册信息；注册模块，还用于根据用户的一种或多种第二模态的注册信息，完成该用户在一种或多种第二模态的注册过程。
[0023]其中，多模态身份识别装置支持的模态可以包括：指纹识别，人脸识别，声纹识别或虹膜识别。
[0024]在一本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种多模态身份识别方法，其特征在于，包括：电子设备接收用户在第一模态的注册操作，所述第一模态为所述电子设备支持的多种身份识别方式中任意一种；所述电子设备接收所述用户在所述第一模态的认证操作；若所述电子设备基于所述第一模态对所述用户认证成功，响应于所述用户在所述第一模态的认证操作，所述电子设备采集所述用户的一种或多种第二模态的注册信息；所述电子设备根据所述用户的一种或多种第二模态的注册信息，完成所述用户在所述一种或多种第二模态的注册过程。2.根据权利要求1所述的方法，其特征在于，所述电子设备采集所述用户的一种或多种第二模态的注册信息，包括：所述电子设备在预设时长内采集所述用户的一种或多种第二模态的注册信息。3.根据权利要求1或2所述的方法，其特征在于，在所述电子设备采集所述用户的一种或多种第二模态的注册信息之前，所述方法还包括：所述电子设备接收所述用户对采集所述用户的一种或多种第二模态的注册信息的确认操作。4.根据权利要求1-3任意一项所述的方法，其特征在于，在所述电子设备接收用户在第一模态的注册操作之后，所述方法还包括：若确定所述用户在所述第一模态注册成功，响应于所述用户在第一模态的注册操作，所述电子设备采集所述用户的一种或多种第二模态的注册信息。5.根据权利要求1-4任意一项所述的方法，其特征在于，所述模态包括：指纹识别，人脸识别，声纹识别或虹膜识别。6.一种多模态身份识别方法，其特征在于，包括：电子设备接收用户在第一模态的认证操作；所述第一模态为所述电子设备支持的多种身份识别方式中任意一种；若所述电子设备基于所述第一模态对所述用户认证成功，响应于所述用户在所述第一模态的认证操作，所述电子设备采集所述用户的第一模态以及一种或多种第二模态的注册信息；所述电子设备根据所述用户的第一模态的注册信息，对所述第一模态的算法模型进行更新；所述电子设备分别根据每种所述第二模态的注册信息，对每种所述第二模态的算法模型进行更新。7.根据权利要求6所述的方法，其特征在于，所述电子设备采集所述用户的第一模态以及一种或多种第二模态的注册信息，包括：所述电子设备在预设时长内采集所述用户的第一模态以及一种或多种第二模态的注册信息。8.根据权利要求6或7所述的方法，其特征在于，在所述电子设备采集所述用户的第一模态以及一种或多种第二模态的注册信息之前，所述方法还包括：所述电子设备接收所述用户对采集所述用户的第一模态以及一种或多种第二模态的注册信息的确认操作。9.根据权利要求6-8任意一项所述的方法，其特征在于，所述模态包括：指纹识别，人脸
识别，声纹识别或虹膜识别。10.根据权利要求1-9任意一项所述的方法，其特征在于，所述方法还包括：所述电子设备接收用户在所述电子设备上进行指纹认证的操作；若所述电子设备对所述用户进行指纹认证成功，响应于所述用户在所述电子设备上进行指纹认证的操作，所述电子设备采集所述用户的人脸图像。11.根据权利要求1-9任意一项所述的方法，其特征在于，所述方法还包括：所述电子设备接收用户的输入语音；所述电子设备根据所述用户的输入语音，对所述用户进行声纹认证；若所述电子设备对所述用户进行声纹认证成功，所述电子设备采集所述用户的人脸图像。12.一种图形用户界面GUI，所述图形用户界面存储在电子设备中，其特征在于，所述图...

【专利技术属性】
技术研发人员：李伟，王保辉，李晓建，胡伟湘，
申请(专利权)人：华为技术有限公司，
类型：发明
国别省市：