疲劳驾驶预警方法、装置、设备、系统及存储介质制造方法及图纸

本公开是关于一种疲劳驾驶预警方法、装置、设备、系统及存储介质，该方法包括：响应于检测到用户进入车辆内，获取用户的睡眠状况信息和生理数据信息；响应于检测到所述车辆处于行驶状态，获取所述用户的面部图像信息；基于所述睡眠状况信息、所述生理数据信息以及所述面部图像信息确定所述用户的疲劳程度；基于所述疲劳程度进行疲劳驾驶预警。本公开可以提高确定用户的疲劳程度的准确性，进而可以提高后续基于用户的疲劳程度进行疲劳驾驶预警的准确性，可以有效降低疲劳驾驶预警的误报率，从而可以提升用户的驾驶安全性和驾驶体验。而可以提升用户的驾驶安全性和驾驶体验。而可以提升用户的驾驶安全性和驾驶体验。

【技术实现步骤摘要】
疲劳驾驶预警方法、装置、设备、系统及存储介质


[0001]本公开涉及电器
，尤其涉及一种疲劳驾驶预警方法、装置、设备、系统及存储介质。

技术介绍

[0002]随着汽车保有量的增加，交通事故数量高居不下，研究表明，驾驶员疲劳是交通伤亡事故中的重要原因，受人体生物钟的影像，在长期驾驶过程中难免产生疲劳，特别在夜间行车阶段。由疲劳驾驶导致的交通事故给国家造成巨大的经济损失和人员伤亡，而疲劳驾驶已成为交通事故的主要隐患。
[0003]相关技术中，针对疲劳驾驶的检测方法也很多，很多汽车中已经安装了疲劳驾驶预警系统，其采用的疲劳驾驶预警技术主要是通过车载摄像头对司机的人脸进行识别来判断司机的疲劳情况。然而，这种方案的误报比较严重，无法准确地判别司机是否真的处于疲劳驾驶状态。

技术实现思路

[0004]为克服相关技术中存在的问题，本公开实施例提供一种疲劳驾驶预警方法、装置、设备、系统及存储介质，用以解决相关技术中的缺陷。
[0005]根据本公开实施例的第一方面，提供一种疲劳驾驶预警方法，所述方法包括：
[0006]响应于检测到用户进入车辆内，获取用户的睡眠状况信息和生理数据信息；
[0007]响应于检测到所述车辆处于行驶状态，获取所述用户的面部图像信息；
[0008]基于所述睡眠状况信息、所述生理数据信息以及所述面部图像信息确定所述用户的疲劳程度；
[0009]基于所述疲劳程度进行疲劳驾驶预警。
[0010]在一实施例中，所述基于所述睡眠状况信息、所述生理数据信息以及所述面部图像信息确定所述用户的疲劳程度，包括：
[0011]基于所述睡眠状况信息和所述生理数据信息确定所述用户的精神状况信息；
[0012]基于所述面部图像信息确定所述用户的面部表情状态；
[0013]基于所述精神状况信息和所述面部表情状态确定所述用户的疲劳程度。
[0014]在一实施例中，所述基于所述睡眠状况信息和所述生理数据信息确定所述用户的精神状况信息，包括：
[0015]将所述睡眠状况信息和所述生理数据信息输入到预先训练的精神状况识别模型中，得到所述用户的精神状况信息。
[0016]在一实施例中，所述睡眠状况信息包括平均睡眠时长和前晚睡眠时长中的至少一种，所述生理数据信息包括心率和血氧饱和度中的至少一种。
[0017]在一实施例中，所述基于所述面部图像信息确定所述用户的面部表情状态，包括：
[0018]从所述面部图像信息中获取所述用户的设定关键点的子图像信息；
[0019]将所述子图像信息输入到预先训练的行为状态识别模型中，得到所述用户的面部表情状态。
[0020]在一实施例中，所述设定关键点包括面部的轮廓以及各个器官中的至少一种，所述面部表情状态包括打哈欠状态、频繁眨眼状态、闭眼状态以及长时间低头状态中的至少一种。
[0021]在一实施例中，所述基于所述疲劳程度进行疲劳驾驶预警，包括：
[0022]基于预先构建的对应关系，获取所述疲劳程度对应的预警信息；
[0023]基于所述预警信息进行疲劳驾驶预警。
[0024]在一实施例中，所述基于所述疲劳程度进行疲劳驾驶预警，包括：
[0025]响应于检测到所述疲劳程度满足疲劳驾驶预警条件，基于预先获取的预警信息进行疲劳驾驶预警。
[0026]根据本公开实施例的第二方面，提供一种疲劳驾驶预警装置，所述装置包括：
[0027]状态数据获取模块，用于响应于检测到用户进入车辆内，获取用户的睡眠状况信息和生理数据信息；
[0028]图像信息获取模块，用于响应于检测到所述车辆处于行驶状态，获取所述用户的面部图像信息；
[0029]疲劳程度确定模块，用于基于所述睡眠状况信息、所述生理数据信息以及所述面部图像信息确定所述用户的疲劳程度；
[0030]疲劳驾驶预警模块，用于基于所述疲劳程度进行疲劳驾驶预警。
[0031]在一实施例中，所述疲劳程度确定模块，包括：
[0032]精神状况确定单元，用于基于所述睡眠状况信息和所述生理数据信息确定所述用户的精神状况信息；
[0033]面部表情确定单元，用于基于所述面部图像信息确定所述用户的面部表情状态；
[0034]疲劳程度确定单元，用于基于所述精神状况信息和所述面部表情状态确定所述用户的疲劳程度。
[0035]在一实施例中，所述精神状况确定单元还用于将所述睡眠状况信息和所述生理数据信息输入到预先训练的精神状况识别模型中，得到所述用户的精神状况信息。
[0036]在一实施例中，所述睡眠状况信息包括平均睡眠时长和前晚睡眠时长中的至少一种，所述生理数据信息包括心率和血氧饱和度中的至少一种。
[0037]在一实施例中，所述面部表情确定单元还用于：
[0038]从所述面部图像信息中获取所述用户的设定关键点的子图像信息；
[0039]将所述子图像信息输入到预先训练的行为状态识别模型中，得到所述用户的面部表情状态。
[0040]在一实施例中，所述设定关键点包括面部的轮廓以及各个器官中的至少一种，所述面部表情状态包括打哈欠状态、频繁眨眼状态、闭眼状态以及长时间低头状态中的至少一种。
[0041]在一实施例中，所述疲劳驾驶预警模块，包括：
[0042]预警信息获取单元，用于基于预先构建的对应关系，获取所述疲劳程度对应的预警信息；
[0043]疲劳驾驶预警单元，用于基于所述预警信息进行疲劳驾驶预警。
[0044]在一实施例中，所述疲劳驾驶预警模块还用于响应于检测到所述疲劳程度满足疲劳驾驶预警条件，基于预先获取的预警信息进行疲劳驾驶预警。
[0045]根据本公开实施例的第三方面，提供一种疲劳驾驶预警系统，所述系统包括：智能穿戴设备、车载摄像装置以及数据处理装置；
[0046]所述智能穿戴设备用于获取用户的睡眠状况信息和生理数据信息；
[0047]所述车载摄像装置用于获取所述用户的面部图像信息；
[0048]所述数据处理装置用于：响应于检测到用户进入车辆内，从所述智能穿戴设备获取用户的睡眠状况信息和生理数据信息；响应于检测到所述车辆处于行驶状态，从所述车载摄像装置获取所述用户的面部图像信息；基于所述睡眠状况信息、所述生理数据信息以及所述面部图像信息确定所述用户的疲劳程度；以及，基于所述疲劳程度进行疲劳驾驶预警。
[0049]根据本公开实施例的第四方面，提供一种电子设备，所述设备包括：
[0050]处理器以及用于存储计算机程序的存储器；
[0051]其中，所述处理器被配置为在执行所述计算机程序时，实现：
[0052]响应于检测到用户进入车辆内，获取用户的睡眠状况信息和生理数据信息；
[0053]响应于检测到所述车辆处于行驶状态，获取所述用户的面部图像信息；
[0054]基于所述睡眠状况信息、所述生理数据信息以及所述面部图像信息本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种疲劳驾驶预警方法，其特征在于，所述方法包括：响应于检测到用户进入车辆内，获取用户的睡眠状况信息和生理数据信息；响应于检测到所述车辆处于行驶状态，获取所述用户的面部图像信息；基于所述睡眠状况信息、所述生理数据信息以及所述面部图像信息确定所述用户的疲劳程度；基于所述疲劳程度进行疲劳驾驶预警。2.根据权利要求1所述的方法，其特征在于，所述基于所述睡眠状况信息、所述生理数据信息以及所述面部图像信息确定所述用户的疲劳程度，包括：基于所述睡眠状况信息和所述生理数据信息确定所述用户的精神状况信息；基于所述面部图像信息确定所述用户的面部表情状态；基于所述精神状况信息和所述面部表情状态确定所述用户的疲劳程度。3.根据权利要求2所述的方法，其特征在于，所述基于所述睡眠状况信息和所述生理数据信息确定所述用户的精神状况信息，包括：将所述睡眠状况信息和所述生理数据信息输入到预先训练的精神状况识别模型中，得到所述用户的精神状况信息。4.根据权利要求1所述的方法，其特征在于，所述睡眠状况信息包括平均睡眠时长和前晚睡眠时长中的至少一种，所述生理数据信息包括心率和血氧饱和度中的至少一种。5.根据权利要求2所述的方法，其特征在于，所述基于所述面部图像信息确定所述用户的面部表情状态，包括：从所述面部图像信息中获取所述用户的设定关键点的子图像信息；将所述子图像信息输入到预先训练的行为状态识别模型中，得到所述用户的面部表情状态。6.根据权利要求5所述的方法，其特征在于，所述设定关键点包括面部的轮廓以及各个器官中的至少一种，所述面部表情状态包括打哈欠状态、频繁眨眼状态、闭眼状态以及长时间低头状态中的至少一种。7.根据权利要求1所述的方法，其特征在于，所述基于所述疲劳程度进行疲劳驾驶预警，包括：基于预先构建的对应关系，获取所述疲劳程度对应的预警信息；基于所述预警信息进行疲劳驾驶预警。8.根据权利要求1所述的方法，其特征在于，所述基于所述疲劳程度进行疲劳驾驶预警，包括：响应于检测到所述疲劳程度满足疲劳驾驶预警条件，基于预先获取的预警信息进行疲劳驾驶预警。9.一种疲劳驾驶预警装置，其特征在于，所述装置包括：状态数据获取模块，用于响应于检测到用户进入车辆内，获取用户的睡眠状况信息和生理数据信息；图像信息获取模块，用于响应于检测到所述车辆处于行驶状态，获取所述用户的面部图像信息；疲劳程度确定模块，用于基于所述睡眠状况信息、所述生理数据信息以及所述面部图
像信息确定所述用户的疲劳程度；疲劳驾驶预警模块，用于基于所述疲劳程度进行疲劳驾驶预警。10.根据权利要求9所述的装置，其特征在于，所述疲劳程度确定模块，包括：精神状况确定单元，用于基于所述睡眠状况信息和所述生理数据信息确定所述用户的精神状况信息；面部表情确定单元，用于基于所述面部图像信息确定所述用户的面部表情状态；疲劳程度确定单元，用于基于所...

【专利技术属性】
技术研发人员：马炜棋，胡恒帅，杨涵，金修旭，张良宇，
申请(专利权)人：北京小米移动软件有限公司，
类型：发明
国别省市：