本发明专利技术公开了一种驾驶员检测系统、方法、终端设备及计算机存储介质，涉及驾驶安全检测技术领域。包括摄像头，用于拍摄驾驶员的面部图像；可穿戴设备，实时检测驾驶员的心率参数；控制模块，将检测到的心率参数与心率阈值比较，若检测到的心率参数低于第一阈值的持续时间达到第一规定时间，则控制所述摄像头拍摄驾驶员的正面图像；目标检测模块，检测眼睛边界框和嘴巴边界框；判断模块，若眼睛边界框的宽高比大于第二阈值和/或嘴巴边界框的宽高比小于第三阈值的持续时间达到第二规定时间，则判定驾驶员处于疲劳状态，发出预警信息。本发明专利技术能够结合驾驶员的心率参数以及面部信息进行疲劳状态的检测，保障行车安全。保障行车安全。保障行车安全。
【技术实现步骤摘要】
一种驾驶员检测系统、方法、终端设备及计算机存储介质
[0001]本专利技术涉及驾驶安全检测
，尤其涉及一种驾驶员检测系统、方法、终端设备及计算机存储介质。
技术介绍
[0002]随着社会的发展，汽车已经成为了普遍的代步工具进入了千家万户，随之而来的安全驾驶问题也逐渐称为人们关注的重点。
[0003]据统计，目前造成车祸最主要的原因为疲劳驾驶，驾驶疲劳是指驾驶员在驾驶车辆时由于种种原因产生的生理机能或者心理机能的失调，从而使驾驶员对周边环境的感知能力减弱以及对车辆的操纵能力下降，偏离正常的驾驶行为。据统计，因疲劳驾驶而引发的交通事故占比高达40％以上，其次为酒后驾车、车辆故障、违反交通法规等。
[0004]公开号为CN109740477A的中国专利申请公开了一种驾驶员疲劳检测系统，基于深度学习和信息融合的驾驶员疲劳状态检测系统及方法，实现了即使在光照、姿态变化等复杂条件下均能精确获取驾驶员的面部信息，并进行融合决策准确判断驾驶员状态并预警，能够有效的预防驾驶员疲劳驾驶，减少因驾驶疲劳引发的交通事故。
[0005]该技术根据驾驶员的面部信息，比如左右眼闭眼状态、嘴部张开状态以及头部位姿进行驾驶员疲劳状态的检测。但是由于面部信息仅是驾驶员的外在体现，仅靠面部信息并不一定能够直接判断出其是否处于疲劳状态，比如有些人清醒状态下的面部信息就与其他人疲劳状态下的面部信息相似，会造成误判，持续性发出预警信息反而会干扰驾驶员的正常行车安全。因此现有的技术存在疲劳检测不准确的缺陷，为了保障行车安全，如何开发一种更准确的驾驶员检测系统是接待解决的难题之一。
技术实现思路
[0006]为了解决
技术介绍
中提到的至少一个技术问题，本专利技术的目的在于提供一种驾驶员检测系统、方法、终端设备及计算机存储介质，能够结合驾驶员的心率参数以及面部信息进行疲劳状态的检测，保障行车安全。
[0007]为实现上述目的，本专利技术提供如下技术方案：一种驾驶员检测系统，包括摄像头，设置于驾驶位，用于拍摄驾驶员的面部图像；可穿戴设备，穿戴于驾驶员手臂，实时检测驾驶员的心率参数；控制模块，将检测到的心率参数与心率阈值比较，若检测到的心率参数低于第一阈值的持续时间达到第一规定时间，则控制所述摄像头拍摄驾驶员的正面图像；目标检测模块，检测所述正面图像中的眼睛和嘴巴，获得眼睛边界框和嘴巴边界框；判断模块，若眼睛边界框的宽高比大于第二阈值和/或嘴巴边界框的宽高比小于第三阈值的持续时间达到第二规定时间，则判定驾驶员处于疲劳状态，发出预警信息。
[0008]进一步的，所述摄像头包括：第一摄像头，设置于驾驶位的前方，用于拍摄驾驶员的正面图像。
[0009]进一步的，所述摄像头还包括：第二摄像头，设置于驾驶位的侧方，用于拍摄驾驶员的侧面图像；检测所述侧面图像中的眼睛和嘴巴，分别获得辅助眼睛边界框和辅助嘴巴边界框；连接所述辅助眼睛边界框和辅助嘴巴边界框的中心点的第一连接线，计算驾驶员头部的倾斜角度；根据所述倾斜角度对所述眼睛边界框的宽高比与嘴巴边界框的宽高比进行校正。
[0010]进一步的，所述倾斜角度的计算内容包括：JD1，第二摄像头获取驾驶员开始一段时间内的侧面图像；JD2，间隔检测所述侧面图像中的眼睛和嘴巴，分别获得若干辅助眼睛边界框和辅助嘴巴边界框；JD3，选取多个所述辅助眼睛边界框的中心点的最小外接圆所在圆心作为第一辅助点；选取多个所述辅助嘴巴边界框的中心点的最小外接圆所在圆心作为第二辅助点；JD4，连接所述第一辅助点和第二辅助点求得辅助连接线；JD5，求解所述第一连接线和辅助连接线的夹角，为驾驶员头部的倾斜角度。
[0011]进一步的，所述校正的方法如下：将所述眼睛边界框的宽高比乘以所述倾斜角度的余弦值即得到校正后的眼睛边界框的宽高比；将所述嘴巴边界框的宽高比乘以所述倾斜角度的余弦值即得到校正后的嘴巴边界框的宽高比。
[0012]一种驾驶员检测方法，包括以下步骤：S1，检测驾驶员的心率参数；S2，将检测到的心率参数与心率阈值比较，若检测到的心率参数低于第一阈值的持续时间达到第一规定时间，则拍摄驾驶员的正面图像；S3，检测所述正面图像中的眼睛和嘴巴，获得眼睛边界框和嘴巴边界框；S4，若眼睛边界框的宽高比大于第二阈值和/或嘴巴边界框的宽高比小于第三阈值的持续时间达到第二规定时间，则判定驾驶员处于疲劳状态，发出预警信息。
[0013]进一步的，所述S4中还进行眼睛边界框的宽高比和嘴巴边界框的宽高的校正，包括：拍摄驾驶员的侧面图像；检测所述侧面图像中的眼睛和嘴巴，分别获得辅助眼睛边界框和辅助嘴巴边界框；连接所述辅助眼睛边界框和辅助嘴巴边界框的中心点的第一连接线，计算驾驶员头部的倾斜角度；根据所述倾斜角度对所述眼睛边界框的宽高比与嘴巴边界框的宽高比进行校正。
[0014]进一步的，所述倾斜角度的计算内容包括：JD1，第二摄像头获取驾驶员开始一段时间内的侧面图像；JD2，间隔检测所述侧面图像中的眼睛和嘴巴，分别获得若干辅助眼睛边界框和辅助嘴巴边界框；JD3，选取多个所述辅助眼睛边界框的中心点的最小外接圆所在圆心作为第一辅助点；选取多个所述辅助嘴巴边界框的中心点的最小外接圆所在圆心作为第二辅助点；
JD4，连接所述第一辅助点和第二辅助点求得辅助连接线；JD5，求解所述第一连接线和辅助连接线的夹角，为驾驶员头部的倾斜角度。
[0015]一种终端设备，包括存储器、处理器以及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现如上所述的基于驾驶员检测方法。
[0016]一种计算机存储介质，其上存储有计算机程序，该程序被处理器执行时实现如上所述的基于驾驶员检测方法。
[0017]与现有技术相比，本专利技术的有益效果是：本专利技术结合驾驶员的心率参数以及面部信息进行疲劳状态的检测；具体的，先实时检测驾驶员的心率参数，当检测到心率参数持续性低于阈值的时候，再进行面部信息的判断，两者结合能够进一步提升疲劳状态判断的准确性，保障行车安全。
附图说明
[0018]图1为本专利技术的系统结构示意图。
[0019]图2为本专利技术一实施例的初始状态下的正面图像示意图。
[0020]图3为本专利技术一实施例的实时检测的正面图像示意图。
[0021]图4为本专利技术一实施例的初始状态下的侧面图像示意图。
[0022]图5为本专利技术一实施例的实时检测的侧面图像示意图。
具体实施方式
[0023]下面对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。
[0024]实施例一：请参阅图1，本实施例提出一种驾驶员检测系统，包括摄像头，设置于驾驶位，用于拍摄驾驶员的面部图像；具体的，所述摄像头包括第一摄像头，设置于驾驶位的前方，用于拍摄驾驶员的正面图像。
[0025本文档来自技高网...
【技术保护点】
【技术特征摘要】
1.一种驾驶员检测系统，其特征在于，包括摄像头，设置于驾驶位，用于拍摄驾驶员的面部图像；可穿戴设备，穿戴于驾驶员手臂，实时检测驾驶员的心率参数；控制模块，将检测到的心率参数与心率阈值比较，若检测到的心率参数低于第一阈值的持续时间达到第一规定时间，则控制所述摄像头拍摄驾驶员的正面图像；目标检测模块，检测所述正面图像中的眼睛和嘴巴，获得眼睛边界框和嘴巴边界框；判断模块，若眼睛边界框的宽高比大于第二阈值和/或嘴巴边界框的宽高比小于第三阈值的持续时间达到第二规定时间，则判定驾驶员处于疲劳状态，发出预警信息。2.根据权利要求1所述的一种驾驶员检测系统，其特征在于，所述摄像头包括：第一摄像头，设置于驾驶位的前方，用于拍摄驾驶员的正面图像。3.根据权利要求2所述的一种驾驶员检测系统，其特征在于，所述摄像头还包括：第二摄像头，设置于驾驶位的侧方，用于拍摄驾驶员的侧面图像；检测所述侧面图像中的眼睛和嘴巴，分别获得辅助眼睛边界框和辅助嘴巴边界框；连接所述辅助眼睛边界框和辅助嘴巴边界框的中心点的第一连接线，计算驾驶员头部的倾斜角度；根据所述倾斜角度对所述眼睛边界框的宽高比与嘴巴边界框的宽高比进行校正。4.根据权利要求3所述的一种驾驶员检测系统，其特征在于，所述倾斜角度的计算内容包括：JD1，第二摄像头获取驾驶员开始一段时间内的侧面图像；JD2，间隔检测所述侧面图像中的眼睛和嘴巴，分别获得若干辅助眼睛边界框和辅助嘴巴边界框；JD3，选取多个所述辅助眼睛边界框的中心点的最小外接圆所在圆心作为第一辅助点；选取多个所述辅助嘴巴边界框的中心点的最小外接圆所在圆心作为第二辅助点；JD4，连接所述第一辅助点和第二辅助点求得辅助连接线；JD5，求解所述第一连接线和辅助连接线的夹角，为驾驶员头部的倾斜角度。5.根据权利要求1所述的一种驾驶员检测系统，其特征在于，所述校正的方法如下：将所述眼睛边界框的宽高比乘以所述倾斜角度的余弦值即得到校正后的眼睛边界框的宽高比；将所述嘴巴边界框的宽高比乘以所述倾斜角度...
【专利技术属性】
技术研发人员：郭君元，余芳蓉，程兴，
申请(专利权)人：杭州图软科技有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。