一种基于激光雷达的驾驶员盲区智能补偿系统技术方案

本发明专利技术属于自动驾驶车辆技术领域，提出了一种基于激光雷达的驾驶员盲区智能补偿系统，利用车载激光雷达配识别算法获取车辆周围交通参与者信息，同时结合车内摄像头对驾驶员面部朝向识别并判断驾驶员实时关注区域，实时获取驾驶员观察区域存在的盲区并且依据激光雷达获取的全域消息筛选获得盲区中的物体或交通参与者信息，最后利用显示设备将被遮挡物警示符通过光线反射进入驾驶员的眼睛，形成一种可实时追随驾驶员头部的类透视补偿效果。本发明专利技术的驾驶员盲区智能补偿系统可以实现主驾驶位实时的虚拟透视效果，可以令驾驶员在行车的观察过程中获得视野内被遮挡物体的虚拟位置和速度朝向信息，辅助驾驶员更好且更安全地进行行车判断。行行车判断。行行车判断。

【技术实现步骤摘要】
一种基于激光雷达的驾驶员盲区智能补偿系统


[0001]本专利技术属于自动驾驶车辆
，尤其涉及一种基于激光雷达的驾驶员盲区智能补偿系统。

技术介绍

[0002]伴随着车辆智能化水平的阶段性提升，人机共驾相关的问题逐渐进入了智能驾驶从业者的视野，再智能的车辆也不能完全脱离驾驶员的掌控范围，在驾驶员为主导控制车辆的时候，智能的车辆需要在一定程度上为驾驶员提供辅助，从而最大程度上达成行车安全的目标。
[0003]目前自动驾驶人机共驾方面由自动驾驶系统主动为驾驶员驾驶下提供辅助的主要有两个系统，辅助紧急制动系统和换道辅助系统。其中，辅助紧急制动系统在车辆行驶时，当车辆前方出现碰撞风险的交通参与者时为驾驶员提供紧急制动功能，阻止车辆发生因操作不当或分心产生的部分紧急交通事故。换道辅助系统一般在车辆两个后视镜上放置警示灯，当车辆左右侧后方盲区出现车辆或行人时，通过在相对应区域发出灯光提示来警示驾驶员当前存在换道风险。除上述两者外，还有一部分特殊的人机共驾辅助系统，如特斯拉的主动避障系统，当自动驾驶系统感知到驾驶员驾驶的车辆将会碰撞到后方或侧面的来车时，立即反向接管驾驶员的操作对车辆进行紧急避险控制。
[0004]由上可知，目前自动驾驶车辆的人机共驾策略在驾驶员为主导时主要还是提供紧急或驾驶员疏忽时候的安全保障，以直接接管车辆的控制系统为直接介入手段，并没有在常规驾驶时间为驾驶员的主动安全行车能力提供辅助。这在一定程度上造成了感知设备和车辆感知能力的资源浪费。所以，为了使自动驾驶系统中的感知、决策和控制模块得到全方面的充分应用，提高人机共驾的全生命周期安全性，在人为驾驶时应当寻找一种方法或组合系统使得自动驾驶的设备可以实时为驾驶员提供常态时间的安全保障和安全参考，从而最大化利用硬件设备来提升行车质量。

技术实现思路

[0005]为了解决目前现有技术中存在的上述问题，本专利技术提出了一种基于激光雷达的驾驶员盲区智能补偿系统，该系统利用车载激光雷达配识别算法获取车辆周围交通参与者信息，同时结合车内摄像头对驾驶员面部朝向识别并判断驾驶员实时关注区域，实时获取驾驶员观察区域存在的盲区并且依据激光雷达获取的全域消息筛选获得盲区中的物体或交通参与者信息，最后利用显示设备将被遮挡物警示符通过光线反射进入驾驶员的眼睛，形成一种可实时追随驾驶员头部的类透视补偿效果。本专利技术在一定程度上解决了自动驾驶车辆人机共驾环节中人类为主导驾驶部分的安全性问题，同时解决了感知设备与算法在人工驾驶时存在闲置的问题，最终形成了一种相对自然的实时驾驶员观察补偿效果，提升了驾驶时对车辆智能程度的直接体会。
[0006]本专利技术的技术方案如下：
[0007]一种基于激光雷达的驾驶员盲区智能补偿系统，包括：车载激光雷达组件、激光雷达信息处理模块、车内摄像头、车内摄像头信息识别模块、驾驶员视觉遮挡状态判断模块和抬头显示盲区实时补偿模块，其中，
[0008]所述车载激光雷达组件，包括多个搭载于车辆的激光雷达，在车辆行驶过程中对周围环境进行实时扫描；
[0009]所述激光雷达信息处理模块，获取车载激光雷达组件检测到的点云信息，对周围环境中的物体进行判断识别，获得周围交通参与者的位置、方向和相对速度信息并提供给驾驶员视觉遮挡状态判断模块；
[0010]所述车内摄像头的摄像头，用于实时采集驾驶员的头部图像信息；
[0011]所述车内摄像头信息识别模块，基于驾驶员的头部图像信息，利用神经网络图像分割的方式获得驾驶员人脸部分的像素块，对像素块进行区域提取，再利用人类面部特征点识别算法获得驾驶员的五官特征分布情况，根据五官特征分布情况计算获得驾驶员的头部朝向，并提供给驾驶员视觉遮挡状态判断模块；
[0012]所述驾驶员视觉遮挡状态判断模块，基于所述激光雷达信息处理模块和所述车内摄像头信息识别模块提供的信息，筛选出本车周围环境中被完全遮挡的交通参与者信息，并提供给抬头显示盲区实时补偿模块。
[0013]所述抬头显示盲区实时补偿模块，通过位于车辆前挡风玻璃内侧的显示设备，显示被完全遮挡的交通参与者的位置和方向信息，实现驾驶员视野前方的全显示覆盖功能。
[0014]进一步的，所述车内摄像头设置在车辆主驾驶侧仪表旁。
[0015]进一步的，所述对周围环境中的物体进行判断识别具体包括：基于点云信息的分布状态，利用聚类判断的方式得到点云团，从而获得周围环境中的物体情况，再根据点云团的模态利用神经网络的方式划分物体属性。(分为小型车辆、大型车辆、行人、摩托车、非机动车、锥桶和树木)
[0016]进一步的，所述获得周围交通参与者的位置、方向和相对速度信息具体包括：利用激光雷达组件识别周围交通参与者的朝向状态和与本车的距离；识别周围交通参与者前后两个瞬时状态，从而获得其相对本车的实时运动速度。
[0017]进一步的，所述驾驶员的头部朝向通过yaw角表征，即横摆角状态。
[0018]进一步的，筛选出本车周围环境中被完全遮挡的交通参与者信息具体包括：
[0019]所述驾驶员视觉遮挡状态判断模块接收来自车内摄像头信息识别模块发出的驾驶员的头部朝向，根据驾驶员的头部转向角度判断出驾驶员的实时关注区域，结合周围交通参与者的位置、方向和相对速度信息，判断驾驶员实时关注区域内的前后遮挡关系，在周围交通参与者中筛选出处于关注区域内并且被完全遮挡的交通参与者的位置、方向和相对速度信息。
[0020]进一步的，所述显示被完全遮挡的交通参与者的位置和方向信息具体包括：所述抬头显示盲区实时补偿模块接收驾驶员视觉遮挡判断模块提供的被完全遮挡的交通参与者信息，并将该信息中的交通参与者位置和方向转化为相对车辆驾驶员视角与位置的信息，利用抬头显示器综合投影至驾驶员的主视野内。
[0021]相比于现有技术，本专利技术具有以下优势：
[0022]本专利技术提出的一种基于激光雷达的驾驶员盲区智能补偿系统，基于自动驾驶车辆
常备的激光雷达和摄像头，实时获取驾驶员头部的角度和周围环境信息，有效判断并识别了驾驶员视觉被遮挡的区域，并对该区域中被完全遮挡的交通参与者进行信息提取，利用全方位的抬头显示器对被遮挡物体的状态进行实时显示，形成一种实时行车过程中的视觉透视效果。
附图说明
[0023]为了更清楚地说明本专利技术实施例或现有技术中的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，通过参考附图会更加清楚的理解本专利技术的特征和优点，附图是示意性的而不应理解为对本专利技术进行任何限制，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，可以根据这些附图获得其他的附图。其中：
[0024]图1为本专利技术的一种基于激光雷达的驾驶员盲区智能补偿系统的结构示意图；
[0025]图2为本专利技术中车内摄像头检测驾驶员头部转动朝向示意图；
[0026]图3为本专利技术中驾驶员视觉方向内遮挡盲区示意图。
具体实施方式
[0027]为了能够更清楚地理解本专利技术的上述目的、特征和优点，下面结合附图和本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于激光雷达的驾驶员盲区智能补偿系统，其特征在于，包括车载激光雷达组件、激光雷达信息处理模块、车内摄像头、车内摄像头信息识别模块、驾驶员视觉遮挡状态判断模块和抬头显示盲区实时补偿模块，其中，所述车载激光雷达组件，包括多个搭载于车辆的激光雷达，在车辆行驶过程中对周围环境进行实时扫描；所述激光雷达信息处理模块，获取车载激光雷达组件检测到的点云信息，对周围环境中的物体进行判断识别，获得周围交通参与者的位置、方向和相对速度信息并提供给驾驶员视觉遮挡状态判断模块；所述车内摄像头的摄像头，用于实时采集驾驶员的头部图像信息；所述车内摄像头信息识别模块，基于驾驶员的头部图像信息，利用神经网络图像分割的方式获得驾驶员人脸部分的像素块，对像素块进行区域提取，再利用人类面部特征点识别算法获得驾驶员的五官特征分布情况，根据五官特征分布情况计算获得驾驶员的头部朝向，并提供给驾驶员视觉遮挡状态判断模块；所述驾驶员视觉遮挡状态判断模块，基于所述激光雷达信息处理模块和所述车内摄像头信息识别模块提供的信息，筛选出本车周围环境中被完全遮挡的交通参与者信息，并提供给抬头显示盲区实时补偿模块；所述抬头显示盲区实时补偿模块，通过位于车辆前挡风玻璃内侧的显示设备，显示被完全遮挡的交通参与者的位置和方向信息，实现驾驶员视野前方的全显示覆盖功能。2.根据权利要求1所述的驾驶员盲区智能补偿系统，其特征在于，所述车内摄像头设置在车辆主驾驶侧仪表旁。3.根据权利要求1所述的驾驶员盲区智能补偿系统，其特征在于，所述对周围环境...

【专利技术属性】
技术研发人员：曹耀光，卢家怿，杨世春，王志腾，张博奥，冯鑫杰，孙玢，闫啸宇，彭朝霞，
申请(专利权)人：北京航空航天大学，
类型：发明
国别省市：