本发明专利技术公开了一种驾驶员状态识别的方法、装置、设备以及存储介质，所述方法包括：对当前驾驶员进行实时眼部识别，得到眼部区域；在第一光线投射到眼部区域的情况下，基于与第一光线对应的第一图像采集设备对眼部区域进行图像采集，得到黑白图像；在第二光线投射到驾驶舱内除眼部区域以外的剩余区域的情况下，基于与第二光线对应的第二图像采集设备对剩余区域进行图像采集，得到彩色图像；对黑白图像以及彩色图像进行图像融合，得到融合图像；基于融合图像确定当前驾驶员的驾驶状态。本发明专利技术通过设置两种光线对驾驶舱内部进行补光并采集补光后的图片，能够减少光线对驾驶员的干扰，在保证行车安全的同时，能够兼顾对驾驶员状态识别的准确性。识别的准确性。识别的准确性。
【技术实现步骤摘要】
一种驾驶员状态识别的方法、装置、设备以及存储介质
[0001]本专利技术涉及自动驾驶领域，具体为一种驾驶员状态识别的方法、装置、设备以及存储介质。
技术介绍
[0002]随着智能驾驶的快速发展，智能座舱内部的人员监控对于行车安全尤为重要。采用DMS(DriverMonitorSystem驾驶员监控系统)等算法，可以对舱内人员闭眼、未正视前方等疲劳驾驶、危险驾驶行为进行监控，从而降低因上述行为造成的安全事故发生的概率。
[0003]现有技术中，DMS一般采用红外补光采集人脸图像和背景图像，红外补光得到的均为黑白灰度图像，不利于算法对于人脸与背景等进行精细区分以及识别利用；或通过内部白光光源对舱内进行补光，但白光补光在夜间行车时，容易造成前挡玻璃反光，干扰驾驶员正常视线，从而导致交通事故的发生。如何在不干扰驾驶员正常视线的情况下，得到易处理图像，是一个亟需解决的问题。
技术实现思路
[0004]有鉴于现有技术的上述缺陷，本专利技术所要解决的技术问题是在提高行车安全的同时，提高对于驾驶员状态识别分析的准确性。
[0005]为了解决上述提出的至少一个技术问题，本专利技术公开一种驾驶员状态识别的方法、装置、设备以及存储介质。
[0006]根据本公开的一方面，提供了一种驾驶员状态识别的方法，包括：
[0007]对当前驾驶员进行实时眼部识别，得到眼部区域；
[0008]在第一光线投射到所述眼部区域的情况下，基于与所述第一光线对应的第一图像采集设备对所述眼部区域进行图像采集，得到黑白图像；所述第一光线与人眼对光线的感知度相匹配；
[0009]在第二光线投射到驾驶舱内除所述眼部区域以外的剩余区域的情况下，基于与所述第二光线对应的第二图像采集设备对所述剩余区域进行图像采集，得到彩色图像；
[0010]对所述黑白图像以及所述彩色图像进行图像融合，得到融合图像；
[0011]基于所述融合图像确定所述当前驾驶员的驾驶状态。
[0012]在一些可能的实施例中，所述在第一光线投射到所述眼部区域的情况下，基于与所述第一光线对应的第一图像采集设备对所述眼部区域进行图像采集，得到黑白图像包括：
[0013]基于栅格分区结果所述驾驶舱内进行区域检测，得到与所述眼部区域对应的第一栅格分区；所述栅格分区结果基于对所述驾驶舱内进行分区处理确定；
[0014]基于所述第一栅格分区确定光源投射点的第一投射属性；所述第一投射属性包括目标投射角度和目标投射方向；
[0015]基于所述第一投射角度、所述第一投射方向，以及所述第一图像采集设备对所述
眼部区域进行图像采集，得到黑白图像。
[0016]在一些可能的实施例中，所述基于所述第一投射角度、第一投射方向，以及所述第一图像采集设备对所述眼部区域进行图像采集，得到黑白图像包括：
[0017]基于所述第一投射角度以及所述第一投射方向，向所述第一栅格分区投射所述第一光线；
[0018]基于所述第一图像采集设备对已投射所述第一光线的所述第一栅格分区进行图像采集，得到所述黑白图像。
[0019]在一些可能的实施例中，所述在第二光线投射到驾驶舱内除所述眼部区域以外的剩余区域的情况下，基于与所述第二光线对应的第二图像采集设备对所述剩余区域进行图像采集，得到彩色图像包括：
[0020]基于栅格分区结果对所述驾驶舱内进行区域检测，得到与所述剩余区域对应的第二栅格分区；
[0021]基于预设划分规则，对所述第二栅格分区进行栅格划分，得到多个栅格单元；所述栅格单元包括多个栅格；
[0022]基于所述第二图像采集设备对所述多个栅格单元进行图像采集，得到彩色图像。
[0023]在一些可能的实施例中，所述基于所述第二图像采集设备对所述多个栅格单元进行图像采集，得到彩色图像包括：
[0024]基于所述多个栅格单元确定光源投射点的第二投射属性；所述第二投射属性包括与所述多个栅格单元对应的多个投射角度，以及与所述多个栅格单元对应的多个投射方向；
[0025]基于所述多个投射角度、所述多个投射方向，以及所述第二图像采集设备，分别对所述多个栅格单元进行图像采集，得到彩色图像。
[0026]在一些可能的实施例中，所述基于所述多个投射角度、多个投射方向，以及所述第二图像采集设备，分别对所述多个栅格单元进行图像采集，得到彩色图像包括：
[0027]基于与每一个所述栅格单元对应的投射角度、与每一个所述栅格单元对应的投射方向，依次向每一个所述栅格单元投射所述第二光线；
[0028]基于所述第二图像采集设备，分别对已投射所述第二光线的每一个所述栅格单元进行图像采集，得到与每一个所述栅格单元对应的多个待拼接图像；
[0029]对所述多个待拼接图像进行图像拼接处理，得到所述彩色图像。
[0030]在一些可能的实施例中，所述对所述黑白图像以及所述彩色图像进行图像融合，得到融合图像包括：
[0031]基于所述黑白图像以及所述彩色图像进行重复区域检测，得到所述彩色图像中与所述黑白图像重复的重复区域；
[0032]删除所述彩色图像中的所述重复区域，得到待融合彩色图像；
[0033]对所述黑白图像以及所述待融合彩色图像进行图像融合，得到所述融合图像。
[0034]在一些可能的实施例中，所述基于所述融合图像确定所述当前驾驶员的驾驶状态包括：
[0035]基于所述融合图像，对所述当前驾驶员进行人员姿态检测以及双眼开合检测，分别得到姿态检测结果以及开合检测结果；
[0036]基于所述姿态检测结果以及所述开合检测结果，确定所述当前驾驶员的驾驶状态。
[0037]在一些可能的实施例中，所述基于所述开合检测结果确定所述当前驾驶员的驾驶状态之后，所述方法包括：
[0038]在所述姿态检测结果指示所述当前驾驶员的人员姿态不符合预设驾驶姿态的情况下，或在所述开合检测结果指示所述当前驾驶员的双眼开合度低于预设开合阈值的情况下，生成驾驶接管指令；
[0039]基于所述驾驶接管指令，控制车辆进入自动驾驶模式。
[0040]根据本公开的第二方面，提供了一种驾驶员状态识别的装置，所述装置包括：
[0041]眼部识别模块，用于对当前驾驶员进行实时眼部识别，得到眼部区域；
[0042]黑白图像采集模块，在第一光线投射到所述眼部区域的情况下，基于与所述第一光线对应的第一图像采集设备对所述眼部区域进行图像采集，得到黑白图像；所述第一光线与人眼对光线的感知度相匹配；
[0043]彩色图像采集模块，用于在第二光线投射到驾驶舱内除所述眼部区域以外的剩余区域的情况下，基于与所述第二光线对应的第二图像采集设备对所述剩余区域进行图像采集，得到彩色图像；
[0044]图像融合模块，用于对所述黑白图像以及所述彩色图像进行图像融合，得到融合图像；
[0045]状态分析模块，用于基于所述融合图像确定所述当前驾驶员的驾驶状态。<本文档来自技高网...
【技术保护点】
【技术特征摘要】
1.一种驾驶员状态识别的方法，其特征在于，所述方法包括：对当前驾驶员进行实时眼部识别，得到眼部区域；在第一光线投射到所述眼部区域的情况下，基于与所述第一光线对应的第一图像采集设备对所述眼部区域进行图像采集，得到黑白图像；所述第一光线与人眼对光线的感知度相匹配；在第二光线投射到驾驶舱内除所述眼部区域以外的剩余区域的情况下，基于与所述第二光线对应的第二图像采集设备对所述剩余区域进行图像采集，得到彩色图像；对所述黑白图像以及所述彩色图像进行图像融合，得到融合图像；基于所述融合图像确定所述当前驾驶员的驾驶状态。2.根据权利要求1所述的一种驾驶员状态识别的方法，其特征在于，所述在第一光线投射到所述眼部区域的情况下，基于与所述第一光线对应的第一图像采集设备对所述眼部区域进行图像采集，得到黑白图像包括：基于栅格分区结果所述驾驶舱内进行区域检测，得到与所述眼部区域对应的第一栅格分区；所述栅格分区结果基于对所述驾驶舱内进行分区处理确定；基于所述第一栅格分区确定光源投射点的第一投射属性；所述第一投射属性包括目标投射角度和目标投射方向；基于所述第一投射角度、所述第一投射方向，以及所述第一图像采集设备对所述眼部区域进行图像采集，得到黑白图像。3.根据权利要求2所述的一种驾驶员状态识别的方法，其特征在于，所述基于所述第一投射角度、第一投射方向，以及所述第一图像采集设备对所述眼部区域进行图像采集，得到黑白图像包括：基于所述第一投射角度以及所述第一投射方向，向所述第一栅格分区投射所述第一光线；基于所述第一图像采集设备对已投射所述第一光线的所述第一栅格分区进行图像采集，得到所述黑白图像。4.根据权利要求1所述的一种驾驶员状态识别的方法，其特征在于，所述在第二光线投射到驾驶舱内除所述眼部区域以外的剩余区域的情况下，基于与所述第二光线对应的第二图像采集设备对所述剩余区域进行图像采集，得到彩色图像包括：基于栅格分区结果对所述驾驶舱内进行区域检测，得到与所述剩余区域对应的第二栅格分区；基于预设划分规则，对所述第二栅格分区进行栅格划分，得到多个栅格单元；所述栅格单元包括多个栅格；基于所述第二图像采集设备对所述多个栅格单元进行图像采集，得到彩色图像。5.根据权利要求4所述的一种驾驶员状态识别的方法，其特征在于，所述基于所述第二图像采集设备对所述多个栅格单元进行图像采集，得到彩色图像包括：基于所述多个栅格单元确定光源投射点的第二投射属性；所述第二投射属性包括与所述多个栅格单元对应的多个投射角度，以及与所述多个栅格单元对应的多个投射方向；基于所述多个投射角度、所述多个投射方向，以及所述第二图像采集设备，分别对所述多个栅格单元进行图像采集，得到彩色图像。
6.根据权利要求5所述的一种驾驶员状态识别的方法，其特征在于，所述基于所述多个投射角度、多个投射方向，以及所述第二图像采集设备，分别对所述多个栅格单元进...
【专利技术属性】
技术研发人员：孔庆宇，林湖，徐康，王坚，黄歆，
申请(专利权)人：中汽创智科技有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。