基于AR设备的身份核验方法、装置、设备及存储介质制造方法及图纸

本申请提供了一种基于AR设备的身份核验方法、装置、设备及存储介质，其中，该方法包括：接收预设图像采集设备采集的现场实时视频；通过人脸检测算法对所述现场实时视频进行人脸检测，并对检测出的人脸进行跟踪以获取待核验人脸图像；向服务器发送所述待核验人脸图像，使得所述服务器将所述待核验人脸图像与人脸数据库中存储的标准人脸图像进行匹配得到核验结果；接收所述服务器返回的所述核验结果，并将所述核验结果显示在信息展示窗口。本申请实施例能够满足安保工作人员在进行人员身份核验时的实时性。

Identity verification method, device, device and storage medium based on AR equipment

【技术实现步骤摘要】
基于AR设备的身份核验方法、装置、设备及存储介质
本申请涉及计算机图形处理
，尤其涉及一种基于AR设备的身份核验方法、装置、设备及存储介质。
技术介绍
智慧园区旨在通过物联网技术在传统园区各板块间实现互联，并借助云计算、大数据等技术有效整合，使园区基础设施运行更加智能、管理更加高效、安保更有保障。目前部分园区已实现了一定程度的智能化，但对人力的依赖依然没有降低，在园区安保问题上，仍需要工作人员对区域内不同人员的身份进行核验，例如：安保工作人员需要阻止无关可疑人员进入未被允许进入的区域，前台工作人员需要对来园区的访客进行信息确认和引导等等。工作人员通常是借助手机或其他终端设备进行出入人员身份核验，但是，仍不能满足实时性要求。
技术实现思路
针对上述技术问题，本申请提供了一种基于AR设备的身份核验方法、装置、设备及存储介质，能够满足安保工作人员在进行人员身份核验时的实时性。为实现上述目的，本申请实施例第一方面提供了基于AR设备的身份核验方法，该方法包括：接收预设图像采集设备采集的现场实时视频；通过人脸检测算法对所述现场实时视频进行人脸检测，并对检测出的人脸进行跟踪以获取待核验人脸图像；向服务器发送所述待核验人脸图像，使得所述服务器将所述待核验人脸图像与人脸数据库中存储的标准人脸图像进行匹配得到核验结果；接收所述服务器返回的所述核验结果，并将所述核验结果显示在信息展示窗口。结合第一方面，在一种可能的实施方式中，所述通过人脸检测算法对所述现场实时视频进行人脸检测，包括：将所述现场实时视频的目标图像帧输入预训练的多任务卷积神经网络的第一子网络进行人脸识别，得到第一候选框；利用所述多任务卷积神经网络的第二子网络对所述第一候选框进行过滤，得到第二候选框；利用所述多任务卷积神经网络的第二子网络再次对所述第二候选框进行过滤及人脸关键点定位，得到所述目标图像帧中人脸的人脸检测框。结合第一方面，在一种可能的实施方式中，所述对检测出的人脸进行跟踪以获取待核验人脸图像，包括：以所述人脸检测框的中心为人脸质心，采用金字塔光流算法计算出所述人脸质心在所述目标图像帧的下一帧中的对应点；采用匈牙利算法将所述人脸质心与所述对应点进行匹配以对检测出的人脸进行跟踪；在对检测出的人脸进行跟踪的过程中截取多张人脸图像，并从所述多张人脸图像中确定出所述待核验人脸图像。结合第一方面，在一种可能的实施方式中，在所述接收预设图像采集设备采集的现场实时视频之后，所述方法还包括：将所述现场实时视频存储至预设存储空间，并设置所述现场实时视频的存储时长。本申请实施例第二方面还提供了一种人脸图像上传方法，该方法包括：接收AR设备发送的待核验人脸图像；将所述待核验人脸图像与人脸数据库中存储的标准人脸图像进行匹配得到核验结果；将所述核验结果返回至所述AR设备，使得所述AR设备在信息展示窗口显示所述核验结果。结合第二方面，在一种可能的实施方式中，在所述将所述待核验人脸图像与人脸数据库中存储的标准人脸图像进行匹配得到核验结果之前，所述方法还包括：采用高斯滤波器消除所述待核验人脸图像上的噪点；对去噪后的所述待核验人脸图像进行增强处理提高所述待核验人脸图像的清晰度；利用预训练的多任务卷积神经网络对清晰度增强的所述待核验人脸图像中的人脸进行矫正。结合第二方面，在一种可能的实施方式中，所述将所述待核验人脸图像与人脸数据库中存储的标准人脸图像进行匹配得到核验结果，包括：提取经过人脸矫正的所述待核验人脸图像的第一特征向量；从所述人脸数据库中获取存储的标准人脸图像的第二特征向量，并计算所述第一特征向量与所述第二特征向量之间的余弦相似度；根据所述余弦相似度从大到小的顺序将前N个标准人脸图像对应的用户的身份信息作为所述核验结果。结合第二方面，在一种可能的实施方式中，在所述接收预设图像采集设备采集的现场实时视频之前，所述方法还包括：采集所有用户的标准人脸图像，提取每个用户的标准人脸图像的所述第二特征向量；将每个用户的标准人脸图像、每个用户的标准人脸图像的所述第二特征向量及每个用户的身份信息对应存储至所述人脸数据库。本申请实施例第三方面提供了一种基于AR设备的身份核验装置，该装置包括：视频采集模块，用于接收预设图像采集设备采集的现场实时视频；人脸抓拍模块，用于通过人脸检测算法对所述现场实时视频进行人脸检测，并对检测出的人脸进行跟踪以获取待核验人脸图像；图像发送模块，用于向服务器发送所述待核验人脸图像，使得所述服务器将所述待核验人脸图像与人脸数据库中存储的标准人脸图像进行匹配得到核验结果；信息展示模块，用于接收所述服务器返回的所述核验结果，并将所述核验结果显示在信息展示窗口。本申请实施例第四方面还提供了一种基于AR设备的身份核验装置，该装置包括：图像接收模块，用于接收AR设备发送的待核验人脸图像；人脸比对模块，用于将所述待核验人脸图像与人脸数据库中存储的标准人脸图像进行匹配得到核验结果；结果发送模块，用于将所述核验结果返回至所述AR设备，使得所述AR设备在信息展示窗口显示所述核验结果。本申请实施例第五方面提供了一种电子设备，所述电子设备包括输入设备、输出设备，处理器，适于实现一条或多条指令；以及，计算机存储介质，所述计算机存储介质存储有一条或多条指令，所述一条或多条指令适于由所述处理器加载并执行上述的基于AR设备的身份核验方法。本申请实施例第六方面提供了一种计算机存储介质，所述计算机存储介质存储有一条或多条指令，所述一条或多条指令适于由处理器加载并执行上述的基于AR设备的身份核验方法。本申请的上述方案至少包括以下有益效果：与现有技术相比，本申请实施例通过接收预设图像采集设备采集的现场实时视频；之后再通过人脸检测算法对所述现场实时视频进行人脸检测，并对检测出的人脸进行跟踪以获取待核验人脸图像；向服务器发送所述待核验人脸图像，使得所述服务器将所述待核验人脸图像与人脸数据库中存储的标准人脸图像进行匹配得到核验结果；接收所述服务器返回的所述核验结果，并将所述核验结果显示在信息展示窗口。这样采用AR设备进行视频采集，同时通过AR设备中集成的算法进行人脸检测和人脸跟踪，AR设备与服务器之间的交互基于第五代移动通信技术实现，从而能够满足安保工作人员在进行人员身份核验时的实时性。附图说明为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。图1为本申请实施例提供的一种网络系统架构图；图2为本申请实施例提供的一种基于AR设备的身份核验方法的流程示意图本文档来自技高网...

【技术保护点】
1.一种基于AR设备的身份核验方法，其特征在于，所述方法包括：/n接收预设图像采集设备采集的现场实时视频；/n通过人脸检测算法对所述现场实时视频进行人脸检测，并对检测出的人脸进行跟踪以获取待核验人脸图像；/n向服务器发送所述待核验人脸图像，使得所述服务器将所述待核验人脸图像与人脸数据库中存储的标准人脸图像进行匹配得到核验结果；/n接收所述服务器返回的所述核验结果，并将所述核验结果显示在信息展示窗口。/n

【技术特征摘要】
1.一种基于AR设备的身份核验方法，其特征在于，所述方法包括：
接收预设图像采集设备采集的现场实时视频；
通过人脸检测算法对所述现场实时视频进行人脸检测，并对检测出的人脸进行跟踪以获取待核验人脸图像；
向服务器发送所述待核验人脸图像，使得所述服务器将所述待核验人脸图像与人脸数据库中存储的标准人脸图像进行匹配得到核验结果；
接收所述服务器返回的所述核验结果，并将所述核验结果显示在信息展示窗口。


2.根据权利要求1所述的方法，其特征在于，所述通过人脸检测算法对所述现场实时视频进行人脸检测，包括：
将所述现场实时视频的目标图像帧输入预训练的多任务卷积神经网络的第一子网络进行人脸识别，得到第一候选框；
利用所述多任务卷积神经网络的第二子网络对所述第一候选框进行过滤，得到第二候选框；
利用所述多任务卷积神经网络的第二子网络再次对所述第二候选框进行过滤及人脸关键点定位，得到所述目标图像帧中人脸的人脸检测框。


3.根据权利要求2所述的方法，其特征在于，所述对检测出的人脸进行跟踪以获取待核验人脸图像，包括：
以所述人脸检测框的中心为人脸质心，采用金字塔光流算法计算出所述人脸质心在所述目标图像帧的下一帧中的对应点；
采用匈牙利算法将所述人脸质心与所述对应点进行匹配以对检测出的人脸进行跟踪；
在对检测出的人脸进行跟踪的过程中截取多张人脸图像，并从所述多张人脸图像中确定出所述待核验人脸图像。


4.一种基于AR设备的身份核验方法，其特征在于，所述方法包括：
接收AR设备发送的待核验人脸图像；
将所述待核验人脸图像与人脸数据库中存储的标准人脸图像进行匹配得到核验结果；
将所述核验结果返回至所述AR设备，使得所述AR设备在信息展示窗口显示所述核验结果。


5.根据权利要求4所述的方法，其特征在于，在所述将所述待核验人脸图像与人脸数据库中存储的标准人脸图像进行匹配得到核验结果之前，所述方法还包括：
采用高斯滤波器消除所述待核验人脸图像上的噪点；
对去噪后的所述待核验人脸图像进行增强处理提高所述待核验人脸图像的清...

【专利技术属性】
技术研发人员：陈实，杨谦，
申请(专利权)人：万翼科技有限公司，
类型：发明
国别省市：广东;44