监测驾驶员状态的方法、设备、系统、处理器及存储介质技术方案

本发明专利技术公开了一种监测驾驶员状态的方法、设备、系统、处理器及存储介质。其中，该方法包括：获取驾驶员的脸部图像和俯视状态下的驾驶员图像；从所述图像提取特征；基于所提取的特征，判定驾驶员的当前状态；以及基于所判定的当前状态发出警报。本发明专利技术解决了传统驾驶员状态监测装置监测内容较为单一，且易受车辆类型、驾驶环境等因素影响，无法大面积推广的技术问题。

Method, Equipment, System, Processor and Storage Medium for Monitoring Driver's Status

【技术实现步骤摘要】
监测驾驶员状态的方法、设备、系统、处理器及存储介质
本专利技术涉及驾驶员状态监测领域，具体而言，涉及一种监测驾驶员状态的方法、设备、系统、处理器及存储介质。
技术介绍
2016年，我国道路交通事故造成死亡人数达6.3万人，其中超过60％的事故由疲劳驾驶、接打电话、玩手机等危险或不良驾驶习惯造成。因此，为确保道路交通安全，有必要对驾驶员的驾驶状态进行实时的监测预警。在实际使用中，驾驶员状态监测装置与方法应具有成本低、体积小、方便性好、检测内容丰富、鲁棒性强等优点。眼动仪、心率手环等设备，其检测内容较为单一，且易受车辆类型、驾驶环境等因素影响，因此无法大面积推广。并且，现有技术中通常都是通过脸部图像采集机器来获取脸部图像，从而提取特征获得驾驶员的驾驶状态，因此获取图像的手段单一，不能充分利用多个角度的特征判定驾驶员的驾驶状态。而随着图像视觉技术的飞速发展，利用驾驶员丰富的面部与手部信息，提取驾驶状态参数，设计一个低成本高鲁棒性的驾驶员状态监测装置与方法，对于保障道路交通安全，减少交通事故发生具有极其重要的意义。针对上述的问题，目前尚未提出有效的解决方案。
技术实现思路
本专利技术实施例提供了一种监测驾驶员状态的方法、设备、系统、处理器及存储介质，以至少解决关键的技术问题。根据本专利技术实施例的一个方面，提供了一种监测驾驶员状态的方法，包括：获取驾驶员的脸部图像；从脸部图像提取特征；基于所提取的特征，判定驾驶员的当前状态；以及基于所判定的当前状态发出警报。其中，特征包脸部图像上的多个特征点的位置信息。根据本专利技术实施例的另一方面，还提供了一种监测驾驶员状态的方法，包括：获取从驾驶员上方拍摄的俯视图图像；基于俯视图图像确定驾驶员的手部以及手机位置；以及基于手部以及手机的位置，判定驾驶员的当前状态。根据本专利技术实施例的另一个方面，提供了一种存储介质。存储介质包括存储的程序，其中，在程序运行时控制存储介质所在设备执行上面任意一项所述的方法。根据本专利技术实施例的另一个方面，提供了一种处理器。处理器用于运行程序，其中，程序运行时执行上面任意一项所述的方法。根据本专利技术实施例的另一个方面，还提供一种监测驾驶员状态的设备。设备包括：面部图像采集器，用于获取驾驶员的脸部图像；以及处理器，处理器用于运行程序。其中，程序运行时对于从面部图像采集器输出的数据执行如下处理步骤：从脸部图像提取特征；基于所提取的特征，判定驾驶员的当前状态；以及基于所判定的当前状态发出警报，其中特征包括脸部图像上的多个特征点的位置信息。根据本专利技术实施例的另一个方面，还提供一种监测驾驶员状态的设备。设备包括：俯视图像采集器，设置于驾驶员的上方，用于从驾驶员上方拍摄俯视图图像；以及处理器。处理器用于运行程序，其中，程序运行时对于从俯视图像采集器输出的数据执行如下处理步骤：基于俯视图图像确定驾驶员的手部以及手机位置；以及基于手部以及手机的位置，判定驾驶员的当前状态。根据本专利技术实施例的另一个方面，还提供一种监测驾驶员状态的系统。系统包括：处理器；以及存储器，与处理器连接，用于为处理器提供处理以下处理步骤的指令：获取驾驶员的脸部图像；从脸部图像提取特征；基于所提取的特征，判定驾驶员的当前状态；以及基于所判定的当前状态发出警报。其中，特征包括脸部图像上的多个特征点的位置信息。根据本专利技术实施例的另一个方面，还提供一种监测驾驶员状态的系统。系统包括：处理器；以及存储器，与处理器连接，用于为处理器提供处理以下处理步骤的指令：获取从驾驶员上方拍摄的俯视图图像；基于俯视图图像确定驾驶员的手部以及手机位置；以及基于手部以及手机的位置，判定驾驶员的当前状态。在本专利技术实施例中，通过两个图像采集装置和处理器存储器的使用，实现了多内容同时监测的技术效果，进而解决了传统监测设备监测内容较为单一，且易受车辆类型、驾驶环境等因素影响，因此无法大面积推广的技术问题。附图说明此处所说明的附图用来提供对本专利技术的进一步理解，构成本申请的一部分，本专利技术的示意性实施例及其说明用于解释本专利技术，并不构成对本专利技术的不当限定。在附图中：图1是根据本专利技术实施例的一种车体截面的示意图；图2是根据本专利技术实施例的一种车载终端的示意图；图3是根据本专利技术实施例所述的监测驾驶员状态的方法的流程图；图4是面部特征点位置信息图；图5是根据本实施例的另一个方面的监测驾驶员状态的方法的流程图；图6是依据本专利技术实施例处理面部图像信息的监测驾驶员状态的设备的结构图：图7是依据本专利技术实施例处理俯视图像信息的监测驾驶员状态的设备的结构图；图8是依据本专利技术实施例处理面部图像信息的监测驾驶员状态的系统的结构图；图9是依据本专利技术实施例处理俯视图像信息的监测驾驶员状态的系统的结构图。具体实施方式为了使本
的人员更好地理解本专利技术方案，下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分的实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本专利技术保护的范围。需要说明的是，本专利技术的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本专利技术的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。实施例1根据本专利技术实施例，提供了一种监测驾驶员行驶状态的方法实施例，需要说明的是，在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行，并且，虽然在流程图中示出了逻辑顺序，但是在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤。本申请实施例一所提供的方法实施例可以在车载终端、移动终端、计算机终端或者类似的运算装置中执行。图1示出了根据本专利技术实施例的一种车体截面的示意图。参考图1所示，所述车体内设置有用于采集驾驶员面部图像的面部图像采集器11、用于采集俯视图像的俯视图像采集器12以及与面部图像采集器11和俯视图像采集器12通信连接的车载终端10。图2示出了一种用于实现本专利技术方法的车载终端10的硬件结构框图。如图2所示，车载终端10可以包括一个或多个(图中采用102a、102b，……，102n来示出)处理器102(处理器102可以包括但不限于微处理器MCU或可编程逻辑器件FPGA等的处理装置)、用于存储数据的存储器104。除此以外，还可以包括：显示器、输入/输出接口(I/O接口)、通用串行总线(USB)端口(可以作为I/O接口的端口中的一个端口被包括)、网络接口、电源和/或相机。本领域普通技术人员可以理解，图2所示的结构仅为示意，其并不对上述电子装置的结构造成限定。例如，车载终端10还可包括比图2中所示更多或者更少的组件，或者具有与图2所示不同的配置。应当注意到的是上述一个或多个处理器102和/或其他数据处理电路在本文中通常可以被称为“数据处理本文档来自技高网...

【技术保护点】
1.一种监测驾驶员状态的方法，其特征在，包括获取驾驶员的脸部图像；从所述脸部图像提取特征；基于所提取的特征，判定所述驾驶员的当前状态；以及基于所判定的当前状态发出警报，其中所述特征包括所述脸部图像上的多个特征点的位置信息。

【技术特征摘要】
1.一种监测驾驶员状态的方法，其特征在，包括获取驾驶员的脸部图像；从所述脸部图像提取特征；基于所提取的特征，判定所述驾驶员的当前状态；以及基于所判定的当前状态发出警报，其中所述特征包括所述脸部图像上的多个特征点的位置信息。2.根据权利要求1所述的方法，其特征在于，判定所述驾驶员的当前状态的操作包括：根据所述多个特征点的位置信息，计算脸部各区域的参数；将所计算的参数与预设的参数进行比对，判定当前驾驶员驾驶状态。3.根据权利要求2所述的方法，其特征在于，所述计算的参数包括以下各参数中的至少一个参数：闭眼时长、眨眼频率、手部在耳部区域中存在的时长、嘴部被遮挡的频率、打呵欠的频率、下巴运动的频率。4.根据权利要求3所述的方法，其特征在于，还包括通过以下操作计算所述闭眼时长：计算预定时间内眼睛闭合的时间长度，其中所述眼睛的闭合是根据眼部区域中的图像来确定的。5.根据权利要求3或4所述的方法，其特征在于，还包括获取从驾驶员上方拍摄的俯视图图像；从所述俯视图图像提取特征，以及判定所述驾驶员的当前状态的操作还包括从所述俯视图图像提取的特征判定所述驾驶员的当前状态。6.一种监测驾驶员状态的方法，其特征在，包括获取从驾驶员上方拍摄的俯视图图像；基于所述俯视图图像确定驾驶员的手部以及手机位...

【专利技术属性】
技术研发人员：余贵珍，雷傲，王云鹏，胡哲华，胡超伟，
申请(专利权)人：北京航空航天大学，
类型：发明
国别省市：北京,11