一种融合WiFi数据与人脸识别的课堂点名方法技术

本发明专利技术公开了一种融合WiFi数据与人脸识别的课堂点名方法，当学生手持WiFi终端进入某个教室上课时，WiFi无线路由器能获取该WiFi终端的物理地址及与WiFi终端之间的信号强度；最终根据信号强度确定当前WiFi终端所处的教室编号，并根据获取的物理地址在学生信息原始数据库中找出其对应的学生信息，初步确定该学生处于当前教室编号内；接着通过该教室内的摄像头进行拍摄，获取教室实时图像并采用MTCNN神经网络和深度网络进行人脸识别比对，若比对成功，则最终确定该学生处于当前教室编号内，接着再次进行拍摄及人脸识别，直至比对不成功，获取该学生在当前教室内的停留时间，完成点名过程，从而不仅能快捷完成点名工作，又能监控到代人签到及中途离开的情况。

【技术实现步骤摘要】
一种融合WiFi数据与人脸识别的课堂点名方法
本专利技术涉及一种自动课堂点名方法，具体是一种融合WiFi数据与人脸识别的课堂点名方法。
技术介绍
在大学课堂中，最原始的点名方式是打印一份课堂学生名单，然后老师将名单中所有学生读一遍，从而确认是否来上课。这种方式，可以获得出勤表，但是会耗费人力和宝贵的课堂时间，效率低下，除此之外，还有可能出现代人签到的现象。随着智能手机的普及，目前已经出现了使用手机连接WiFi的签到方式。其工作原理是通过上传签到用户的ID与签到使用的智能手持设备的IMEI号进行签到，但是这种方法的不足是会出现用户A带着用户B的智能手持设备代人签到的现象，无法准确判断签到人员的真实性。另外现在学校在每个学生入学时，均会采集学生的照片，用做档案或毕业等用途。一般都会将这些学生的人脸照片和对应的身份信息(姓名、学号、性别、学院、专业、班级、手机号码、手机的物理地址、电子邮件、即时通讯工具账号)存入数据数据库，称为学生信息原始数据库。如果学生信息发生变更，应第一时间申请更新。因此如何能有效利用学生信息原始数据库实现既能方便的、快捷的点名流程，又能防止代人签到的情况发生，是所需研究的方向。
技术实现思路
针对上述现有技术存在的问题，本专利技术提供一种融合WiFi数据与人脸识别的课堂点名方法，通过利用学生信息原始数据进行WiFi数据与人脸识别双重验证，从而不仅能快捷的实现点名工作，又能监控到代人签到及中途离开情况。为了实现上述目的，本专利技术采用的技术方案是：一种融合WiFi数据与人脸识别的课堂点名方法，具体步骤为：A、确定初始数据：在每个教室中均设有一个WiFi无线路由器和一个摄像头，并将各个WiFi无线路由器通过网络连接存储学生信息原始数据库的服务器；同时对各个WiFi无线路由器进行标记确定其对应的教室编号；同时将学生信息原始数据库中各个学生的人脸照片分别利用深度网络进行处理，从而得到提取特征后的人脸特征距离，这些人脸特征距离构成人脸特征库；B、进行WiFi数据验证：当学生持有WiFi终端进入任意一个教室时，WiFi终端会与当前教室内WiFi无线路由器及周围教室内的WiFi无线路由器进行通信连接，各个WiFi无线路由器均能获取该WiFi终端的物理地址及各自与WiFi终端之间的信号强度；将各个WiFi无线路由器获取的同一WiFi终端的信号强度进行比较，确定信号强度最大的WiFi无线路由器所对应的教室编号为该WiFi终端所处的教室编号；然后通过读取学生信息原始数据库确定该WiFi终端的物理地址对应的学生姓名及该学生在人脸特征库内的人脸特征距离，初步确定该学生处于获取的教室编号内，接着进入步骤C；C、进行人脸识别再验证：通过步骤B获取的教室编号，控制其内部的摄像头进行拍摄，从而获取当前教室内各个学生的人脸图片，通过深度网络将获取的人脸图片与步骤B确定的该学生在人脸特征库内的人脸特征距离进行识别比对，若首次比对成功，则最终确定该学生处于当前教室内，并间隔一定时间后再次通过摄像头拍摄图片进行比对，直至比对不成功，获取该学生在当前教室内的停留时间，完成点名过程；若首次比对不成功，则确定该学生未处于当前教室内，说明存在代替签到，将该情况记录后完成点名过程。进一步，所述WiFi终端与WiFi无线路由器进行通信连接的具体过程为：(1)若WiFi无线路由器工作在被动扫描模式，则当学生持有WiFi终端进入教室时，WiFi终端将周期性发出WiFi无线路由器探寻帧；WiFi无线路由器接收到WiFi终端的探寻帧后，向WiFi终端回应一个响应帧，根据WiFi标准，探寻帧和响应帧均为管理帧，其帧格式中将会携带各自的物理地址，此时WiFi无线路由器接收到WiFi终端的探寻帧后，能从探寻帧中提取出WiFi终端的物理地址，并测得WiFi信号强度；(2)若WiFi无线路由器工作在主动扫描模式，则当学生持有WiFi终端进入教室时，WiFi无线路由器将周期性发出WiFi终端探寻帧；WiFi终端接收到WiFi无线路由器的探寻帧后，向WiFi无线路由器回应一个响应帧，根据WiFi标准，探寻帧和响应帧均为管理帧，其帧格式中将会携带各自的物理地址，此时WiFi无线路由器接收到WiFi终端的响应帧后，能从响应帧中提取出WiFi终端的物理地址，并测得WiFi信号强度。进一步，所述步骤C的具体过程为：①图像采集及预处理：先设定拍摄间隔时间，然后使当前教室内摄像头按照设定的间隔时间进行周期性拍摄，将每次拍摄的图片采用已知的预处理方法进行初步处理，并将初步处理后的照片进行特征金字塔变换，完成预处理工作；这样为后续人脸检测能获取不同大小的人脸数据，并方便后续提供足够多的不同尺寸的图片；②人脸检测：将经过预处理后的照片送入到MTCNN神经网络中的Pnet网络，生成若干人脸候选框，这些人脸候选框的坐标都是相对于原图的；将人脸候选框截出来的图片传入到MTCNN神经网络中的Rnet网络，对图片中是否真实存在人脸进行判断和评分，并对原有人脸候选框进行修正，获得相对正确的人脸候选框；最后，将修正后的人脸候选框截取出来送入到MTCNN神经网络中的Onet网络，对图片中是否真实存在人脸进行精细判断和评分，同时对人脸候选框进行修正，从而输出可用于识别人脸的图片；③图片裁剪：将步骤②处理后的图片标注出各个学生面部信息的预测框，将标注出来的部分进行裁剪，获得每个裁剪后的学生面部图像；④将裁剪后各个学生面部图像经过特征归一化处理后输入到深度网络(深度网络为已知的Inception-ResNet-v1)中，深度网络将人脸映射到欧式空间的特征向量上，计算获得各个学生面部图像的人脸特征距离，最后将步骤B确定的该学生在人脸特征库内的人脸特征距离依次与计算获得的各个学生面部图像的人脸特征距离进行首次比对，若其中任意一个比对成功，则最终确定该学生处于当前教室内，并等待设定的拍摄间隔时间后，再次重复步骤①至④进行再次比对，直至比对不成功，获取该学生在当前教室内的停留时间，完成点名过程；若首次比对不成功，则确定该学生未处于当前教室内，说明存在代替签到，将该情况记录后完成点名过程。与现有技术相比，本专利技术采用WiFi数据与人脸识别双重验证的方式，利用学校服务器已经存储的学生信息原始数据库，当学生手持WiFi终端进入某个教室上课时，WiFi终端与该教室内及周围教室内的WiFi无线路由器进行通信连接，使各个WiFi无线路由器均能自动获取该WiFi终端的物理地址及各自与WiFi终端之间的信号强度；最终根据信号强度确定当前WiFi终端所处的教室编号，并根据获取的物理地址在学生信息原始数据库中找出其对应的学生姓名及该学生在人脸特征库内的人脸特征距离，完成WiFi数据验证，初步确定该学生处于当前教室编号内；接着通过该教室内的摄像头进行拍摄，获取教室实时图像，然后进行图像预处理并采用MTCNN神经网络进行人脸检测，将图像中的人脸图像提取并进行裁剪，最后将各个学生面部信息图像通过深度网络与该学生在人脸特征库内的人脸特征距离进行比对，若首本文档来自技高网...

【技术保护点】
1.一种融合WiFi数据与人脸识别的课堂点名方法，其特征在于，具体步骤为：/nA、确定初始数据：在每个教室中均设有一个WiFi无线路由器和一个摄像头，并将各个WiFi无线路由器通过网络连接存储学生信息原始数据库的服务器；同时对各个WiFi无线路由器进行标记确定其对应的教室编号；同时将学生信息原始数据库中各个学生的人脸照片分别利用深度网络进行处理，从而得到提取特征后的人脸特征距离，这些人脸特征距离构成人脸特征库；/nB、进行WiFi数据验证：当学生持有WiFi终端进入任意一个教室时，WiFi终端会与当前教室内WiFi无线路由器及周围教室内的WiFi无线路由器进行通信连接，各个WiFi无线路由器均能获取该WiFi终端的物理地址及各自与WiFi终端之间的信号强度；将各个WiFi无线路由器获取的同一WiFi终端的信号强度进行比较，确定信号强度最大的WiFi无线路由器所对应的教室编号为该WiFi终端所处的教室编号；然后通过读取学生信息原始数据库确定该WiFi终端的物理地址对应的学生姓名及该学生在人脸特征库内的人脸特征距离，初步确定该学生处于获取的教室编号内，接着进入步骤C；/nC、进行人脸识别再验证：通过步骤B获取的教室编号，控制其内部的摄像头进行拍摄，从而获取当前教室内各个学生的人脸图片，通过深度网络将获取的人脸图片与步骤B确定的该学生在人脸特征库内的人脸特征距离进行识别比对，若首次比对成功，则最终确定该学生处于当前教室内，并间隔一定时间后再次通过摄像头拍摄图片进行比对，直至比对不成功，获取该学生在当前教室内的停留时间，完成点名过程；若首次比对不成功，则确定该学生未处于当前教室内，说明存在代替签到，将该情况记录后完成点名过程。/n...

【技术特征摘要】
1.一种融合WiFi数据与人脸识别的课堂点名方法，其特征在于，具体步骤为：
A、确定初始数据：在每个教室中均设有一个WiFi无线路由器和一个摄像头，并将各个WiFi无线路由器通过网络连接存储学生信息原始数据库的服务器；同时对各个WiFi无线路由器进行标记确定其对应的教室编号；同时将学生信息原始数据库中各个学生的人脸照片分别利用深度网络进行处理，从而得到提取特征后的人脸特征距离，这些人脸特征距离构成人脸特征库；
B、进行WiFi数据验证：当学生持有WiFi终端进入任意一个教室时，WiFi终端会与当前教室内WiFi无线路由器及周围教室内的WiFi无线路由器进行通信连接，各个WiFi无线路由器均能获取该WiFi终端的物理地址及各自与WiFi终端之间的信号强度；将各个WiFi无线路由器获取的同一WiFi终端的信号强度进行比较，确定信号强度最大的WiFi无线路由器所对应的教室编号为该WiFi终端所处的教室编号；然后通过读取学生信息原始数据库确定该WiFi终端的物理地址对应的学生姓名及该学生在人脸特征库内的人脸特征距离，初步确定该学生处于获取的教室编号内，接着进入步骤C；
C、进行人脸识别再验证：通过步骤B获取的教室编号，控制其内部的摄像头进行拍摄，从而获取当前教室内各个学生的人脸图片，通过深度网络将获取的人脸图片与步骤B确定的该学生在人脸特征库内的人脸特征距离进行识别比对，若首次比对成功，则最终确定该学生处于当前教室内，并间隔一定时间后再次通过摄像头拍摄图片进行比对，直至比对不成功，获取该学生在当前教室内的停留时间，完成点名过程；若首次比对不成功，则确定该学生未处于当前教室内，说明存在代替签到，将该情况记录后完成点名过程。


2.根据权利要求1所述的一种融合WiFi数据与人脸识别的课堂点名方法，其特征在于，所述WiFi终端与WiFi无线路由器进行通信连接的具体过程为：
(1)若WiFi无线路由器工作在被动扫描模式，则当学生持有WiFi终端进入教室时，WiFi终端将周期性发出WiFi无线路由器探寻帧；WiFi无线路由器接收到WiFi终端的探寻帧后，向WiFi终端回应一个响应帧，根据WiFi标准，探寻帧和响应帧均为管理帧，其帧格式中将会携带各自的物理地址，此时WiFi无线路由器接收到WiFi终端的探寻帧后，...

【专利技术属性】
技术研发人员：胡青松，张淳一，陈艳，
申请(专利权)人：胡青松，
类型：发明
国别省市：江苏;32