驾驶员视觉辅助系统和方法技术方案

一种用于交通工具的驾驶员视觉辅助系统，包括：驾驶员状态监测系统，驾驶员状态监测系统被配置成用于监测交通工具的驾驶员的状态，该状态至少包括驾驶员的眼睛注视的方向；交通工具感知系统集，该交通工具感知系统集被配置成用于检测交通工具附近的对象；驾驶员接口，驾驶员接口被配置成用于向驾驶员输出视觉、音频和触觉信息中的至少一者；以及控制器，控制器被配置成用于：检测驾驶员难以读取交通工具外部的信息的视觉困难场景、基于驾驶员的眼睛注视的方向并使用交通工具感知系统集，检测驾驶员正在瞄准并且难以读取相关信息的最可能的对象、以及使用驾驶员接口，输出视觉、音频和触觉信息中的至少一者，以辅助驾驶员确定信息。息。息。

【技术实现步骤摘要】
驾驶员视觉辅助系统和方法


[0001]本公开总体上涉及交通工具高级驾驶员辅助系统(ADAS)，并且更具体地涉及驾驶员视觉辅助系统和方法。

技术介绍

[0002]交通工具的乘员(驾驶员、乘客等)在驾驶时通常难以读取街道标志、交通标志和/或在他们周围的其他特征。驾驶员在试图读取标志、读取地址或标识在他们周围的特征(例如，广告牌、广告、消防栓、人行横道、购物中心、店面、停车场)时，通常会斜靠在他们的座椅中、拉紧脖子、眯起眼睛、反复眨眼、揉他们的眼睛、调整眼具、用手臂或手朝方向打手势、打开额外的照明/远光灯和/或做出其他物理形式的挣扎。这可能导致他们在导航时错过转弯、错过他们正在试图寻找的住宅或企业、或者可能导致事故。常规的高级驾驶员辅助系统(ADAS)执行通用驾驶员状态监测，并检测特定状况(诸如眩光)，但是这些常规的ADAS无法为上述问题提供适当的解决方案。因此，相关领域中存在着改善的机会。
[0003]本文中所提供的背景描述是为了总体呈现本公开的上下文的目的。在此
技术介绍
部分中所描述的范围内，目前指定的专利技术人的工作以及在提交申请时并不以其它方式指认为现有技术的说明书各方面，既不明确地也不隐含地被承认为相对于本公开的现有技术。

技术实现思路

[0004]根据本公开的一个方面，呈现了一种用于交通工具的驾驶员视觉辅助系统。在一个示例性实现中，驾驶员视觉辅助系统包括：驾驶员状态监测系统，驾驶员状态监测系统被配置成用于监测交通工具的驾驶员的状态，该状态至少包括驾驶员的眼睛注视的方向；交通工具感知系统集，该交通工具感知系统集被配置成用于检测交通工具附近的对象；驾驶员接口，驾驶员接口被配置成用于向驾驶员输出视觉、音频和触觉信息中的至少一者；以及控制器，控制器被配置成用于：使用驾驶员状态监测系统，检测驾驶员难以读取交通工具外部的信息的视觉困难场景、基于驾驶员的眼睛注视的方向并使用交通工具感知系统集，检测驾驶员正在瞄准并且难以读取相关信息的最可能的对象、以及使用驾驶员接口，输出视觉、音频和触觉信息中的至少一者，以辅助驾驶员确定信息。
[0005]在一些实现中，交通工具感知系统集包括交通工具的前置相机，前置相机被配置成用于捕获交通工具前方的图像。在一些实现中，交通工具感知系统集进一步包括全球导航卫星系统(GNSS)。在一些实现中，控制器被配置成用于：基于由前置相机捕获的图像和从GNSS系统获得的信息，来从交通工具附近的多个对象中确定最可能的对象。在一些实现中，地图信息用于根据该对象确定信息。在一些实现中，交通工具对任何事物(V2X)信息用于根据该对象确定信息。在一些实现中，检测到的视觉困难场景是驾驶员斜靠在他或她的座椅中。在一些实现中，检测到的视觉困难场景是驾驶员拉紧他或她的脖子。在一些实现中，检测到的视觉困难场景是驾驶员眯起他或她的眼睛。在一些实现中，检测到的视觉困难是驾驶员指向对象或要求系统澄清对象和/或与对象相关联的文本是什么。
[0006]根据本公开的另一方面，呈现了一种用于交通工具的驾驶员视觉辅助方法。在一个示例性实现中，该方法包括：提供驾驶员状态监测系统，驾驶员状态监测系统被配置成用于监测交通工具的驾驶员的状态，该状态至少包括驾驶员的眼睛注视的方向；提供交通工具感知系统集，该交通工具感知系统集被配置成用于检测交通工具附近的对象；提供驾驶员接口，驾驶员接口被配置成用于向驾驶员输出视觉、音频和触觉信息中的至少一者；使用驾驶员状态监测系统，由交通工具的控制器检测驾驶员难以读取交通工具外部的信息的视觉困难场景；基于驾驶员的眼睛注视的方向并使用交通工具感知系统集，由控制器检测驾驶员正在瞄准并且难以读取相关信息的最可能的对象；以及使用驾驶员接口，由控制器输出视觉、音频和触觉信息中的至少一者，以辅助驾驶员确定信息。
[0007]在一些实现中，交通工具感知系统集包括交通工具的前置相机，前置相机被配置成用于捕获交通工具前方的图像。在一些实现中，交通工具感知系统集进一步包括GNSS。在一些实现中，地图信息用于根据该对象确定信息。在一些实现中，V2X信息用于根据该对象确定信息。在一些实现中，检测到的视觉困难场景是驾驶员斜靠在他或她的座椅中。在一些实现中，控制器被配置成用于：基于由前置相机捕获的图像和从GNSS系统获得的信息，来从交通工具附近的多个对象中确定最可能的对象。在一些实现中，检测到的视觉困难场景是驾驶员斜靠在他或她的座椅中。在一些实现中，检测到的视觉困难场景是驾驶员拉紧他或她的脖子。在一些实现中，检测到的视觉困难场景是驾驶员眯起他或她的眼睛。在一些实现中，检测到的视觉困难是驾驶员指向对象或要求系统澄清对象和/或与对象相关联的文本是什么。
[0008]根据本公开的又另一实现，呈现了一种用于交通工具的驾驶员视觉辅助系统。在一个示例性实现中，驾驶员视觉辅助系统包括：驾驶员状态监测装置，驾驶员状态监测装置用于监测交通工具的驾驶员的状态，该状态至少包括驾驶员的眼睛注视的方向；交通工具感知系统装置集，交通工具感知系统装置集用于检测交通工具附近的对象；驾驶员接口装置，驾驶员接口装置用于向驾驶员输出视觉、音频和触觉信息中的至少一者；以及控制器装置，控制器装置用于：使用驾驶员状态监测装置，检测驾驶员难以读取交通工具外部的信息的视觉困难场景、基于驾驶员的眼睛注视的方向并使用交通工具感知系统装置集，检测驾驶员正在瞄准并且难以读取相关信息的最可能的对象、以及使用驾驶员接口装置，输出视觉、音频和触觉信息中的至少一者，以辅助驾驶员确定信息。
[0009]在一些实现中，交通工具感知系统装置集包括交通工具的前置相机装置，前置相机装置用于捕获交通工具前方的图像。在一些实现中，交通工具感知系统装置集包括交通工具的成像雷达或激光雷达装置，成像雷达或激光雷达装置用于感测交通工具前方的对象。在一些实现中，交通工具感知系统装置集进一步包括GNSS装置。在一些实现中，地图信息用于根据该对象确定信息。在一些实现中，V2X信息用于根据该对象确定信息。在一些实现中，控制器装置用于基于由前置相机装置捕获的图像和从GNSS装置获得的信息来从交通工具附近的多个对象中确定最可能的对象。在一些实现中，检测到的视觉困难场景是以下各项中的至少一项：驾驶员斜靠在他或她的座椅中、驾驶员拉紧他或她的脖子、以及驾驶员眯起他或她的眼睛。
[0010]本公开的进一步适用领域将根据下文所提供的具体实施方式而变得明显。应当认识的是，具体实施方式和具体示例仅旨在用于说明的目的而并不旨在限制本公开的范围。
附图说明
[0011]本公开将通过具体实施方式和所附附图而变得被更全面地理解，其中：
[0012]图1是具有根据本公开的原理的示例驾驶员视觉辅助系统的交通工具的功能框图；以及
[0013]图2是根据本公开的原理的示例驾驶员视觉辅助方法的流程图。
具体实施方式
[0014]如上文所讨论的，在驾驶员视觉辅助的
中存在着改善的机会。因此，呈现了驾驶员视觉辅助系统和方法。现在参考图1，示出了具有根据本公开的原理的示例驾驶员视觉辅助系统104本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种用于交通工具的驾驶员视觉辅助系统，所述驾驶员视觉辅助系统包括：驾驶员状态监测系统，所述驾驶员状态监测系统被配置成用于监测所述交通工具的驾驶员的状态，所述状态至少包括所述驾驶员的眼睛注视的方向；交通工具感知系统集，所述交通工具感知系统集被配置成用于检测所述交通工具附近的对象；驾驶员接口，所述驾驶员接口被配置成用于向所述驾驶员输出视觉、音频和触觉信息中的至少一者；以及控制器，所述控制器被配置成用于：使用所述驾驶员状态监测系统，检测所述驾驶员难以读取所述交通工具外部的信息的视觉困难场景，基于所述驾驶员的所述眼睛注视的方向并使用所述交通工具感知系统集，检测所述驾驶员正在瞄准并且难以读取所述相关信息的最可能的对象，以及使用所述驾驶员接口，输出视觉、音频和触觉信息中的至少一者，以辅助所述驾驶员确定所述信息。2.如权利要求1所述的驾驶员视觉辅助系统，其特征在于，所述交通工具感知系统集包括所述交通工具的前置相机，所述前置相机被配置成用于捕获所述交通工具前方的图像。3.如权利要求2所述的驾驶员视觉辅助系统，其特征在于，所述交通工具感知系统集进一步包括定位能力，所述定位能力包括以下各项中的至少一项：基于全球导航卫星系统(GNSS)的定位、基于雷达和/或激光雷达的定位、基于对象的定位、和基于其他场景语义信息的定位。4.如权利要求3所述的驾驶员视觉辅助系统，其特征在于，所述交通工具感知系统集进一步包括地图信息。5.如权利要求4所述的驾驶员视觉辅助系统，其特征在于，所述控制器被配置成用于：基于来自交通工具感知系统集的至少一个信息、地图信息和定位能力信息，来从所述交通工具附近的多个对象中确定所述最可能的对象。6.如权利要求1所述的驾驶员视觉辅助系统，其特征在于，检测到的视觉困难场景是所述驾驶员斜靠在他或她的座椅中。7.如权利要求1所述的驾驶员视觉辅助系统，其特征在于，检测到的视觉困难场景是所述驾驶员拉紧他或她的脖子。8.如权利要求1所述的驾驶员视觉辅助系统，其特征在于，检测到的视觉困难场景是所述驾驶员眯起他或她的眼睛。9.一种用于交通工具的驾驶员视觉辅助方法，所述方法包括：提供驾驶员状态监测系统，所述驾驶员状态监测系统被配置成用于监测所述交通工具的驾驶员的状态，所述状态至少包括所述驾驶员的眼睛注视的方向；提供交通工具感知系统集，所述交通工具感知系统集被配置成用于检测所述交通工具附近的对象；提供驾驶员接口，所述驾驶员接口被配置成用于向所述驾驶员输出视觉、音频和触觉信息中的至少一者；使用所述驾驶员状态监测系统，由所述交通工具的控制器检测所述驾驶员难以读取所
述交通工具外部的信息的视觉困难场景；基于所述驾驶员的所示眼睛注视的方向并使用所述交通工具感知系统集，由所述控制器检测所述驾驶员正在瞄准并且难以读取所述相关信息的最可能的对象；以及使用所述驾驶员接口，由所述控制器输出视觉、音频和触...

【专利技术属性】
技术研发人员：S，
申请(专利权)人：安波福技术有限公司，
类型：发明
国别省市：