用于估算车辆的驾驶员的注意力等级的装置和方法制造方法及图纸

本发明专利技术涉及一种估算在行驶车道中的车辆的驾驶员的注意力等级的方法，所述方法包括以下步骤：连续捕获地面的图像(10)，重新构建在连续的当前时刻t上的地面区段的鸟瞰图(11，12)，重新构建在连续的当前时刻t上的道路区段的鸟瞰图(11，12)，估算所述车辆(100)在重新构建的鸟瞰图(11，12)中的侧向位置，并存储所述车辆的估算位置，确定在过去的时刻t3上的驾驶员的估算的注意力等级，所述确定取决于：所述车辆的侧向位置的变化，对在时刻t3上至少部分位于所述车辆上游的道路部分的轮廓的分析。

【技术实现步骤摘要】
【国外来华专利技术】用于估算车辆的驾驶员的注意力等级的装置和方法
本专利技术属于辅助车辆驾驶的辅助装置领域，并且更具体地涉及评估驾驶员的注意力的方法。本专利技术更具体地涉及一种方法，所述方法用于估算车辆的驾驶员控制车辆保持在行驶车道中的能力以便能够评估驾驶员的注意力等级，并且在必要时在可能发生不希望的越过行驶车道的限界线时发出警告。
技术介绍
如今，机动车辆包括许多驾驶员辅助系统。这些系统通常由本领域技术人员所知地表示为ADAS，即AdvancedDriverAssistanceSystems的首字母缩略词，意思为高级驾驶员辅助系统。这种驾驶辅助系统装配在越来越多的机动车辆上。由这些ADAS系统确保的大多数功能要求车辆能够检测其所在的行驶车道。在这些功能中，来自用于捕获车辆前方的道路图像的正面摄像头的数据与来自用于捕获驾驶员面部的位于乘客舱中的摄像头的数据的结合可利用于确定驾驶员的注意力或疏忽等级。实际上，目前，与自主化车辆有关且更现实地用于在车辆自动化阶段介入的驾驶辅助功能的技术发展认为：与驾驶员的注意力或疏忽等级相关的信息是至关重要的，特别是考虑到可能需要重新获取对车辆的控制。在该背景下，分析来自正面摄像头的图像，以便估算车辆在其行驶车道中的侧向位置，尤其用于检测不希望的可能越线。在现有技术中，与车辆在其行驶车道中的侧向位置有关的信息通常仅可通过正面摄像头获得，因此在很大等级上取决于该正面摄像头捕获的图像的可靠性和可用性。一些车辆事实上装配有能够确定车辆在行驶车道中的侧向位置的这种正面摄像头。然而，如已知的，来自这种正面摄像头的数据可由于所使用的“平坦地面”假设(通常有误差)或者由于所使用的车辆水平稳度假设(通常有误差)等等而出错。另外，对于所有这些系统，摄像头的校准参数用于计算线相对于车辆的相对位置。这使得这些摄像头对任何非校准(摄像头上的冲击，车辆稳度根据车辆负载发生改变)敏感。同样地，这些系统认为地面是车辆参考系中的水平平面。当道路上升或下降时，或者道路在用于检测线的地面部分上存在倾斜时，这种假设并不总是成立的，这导致了定位误差。因此，实际上，根据现有技术，车辆在行驶车道中的侧向位置是被多个驾驶辅助功能利用的信息并且用于尤其与对驾驶员的面部图像分析相结合而评估驾驶员的注意力等级。因此，该系统尤其观察车辆的侧向位置随时间的变化以估算越线并警告驾驶员。文件FR2947769_A1描述了一种系统，该系统包括位于车辆后部的摄像头，所述摄像头用于跟踪车辆的路径，以在相对于预定的理想轨迹偏离的情况下向驾驶员发送警报。该文件代表了现有技术。如今，通常根据由正面摄像头捕获的图像来实时确定与车辆在行驶车道中的位置有关的信息。然而，除了与不精确相关甚至与不可能估算车辆在其行驶车道中的侧向位置相关的缺陷之外，这些已知系统的缺陷还在于所实施的摄像头的校准参数必须精确调节。这使得这些摄像头对于由于摄像头上的冲击、车辆稳度变化等引起的任何“非校准”敏感。同样地，这些系统认为地面在车辆参考系中是水平平面，这构成了整体上有误差的假设。此外，为了估算驾驶员的注意力等级并有效地检测可能的意外越线，通过车道区段存储车辆在其行驶车道中的相对侧向位置随时间的变化是有用的。
技术实现思路
因此，为了有效地解决上面提出的问题而不产生新的缺点，设置成在一定时长内集成由至少一个摄像头捕获的地面的图像，以便消除由于不相干性或局部不可用性而造成的误差。由于捕获的图像，根据本专利技术的方法能够创建车辆在其行驶车道中的鸟瞰图，所述鸟瞰图成在一定时长上集成。另外，通过跟踪并预测车辆在其车道中的侧向位置随时间的变化，并且优选地通过将该跟踪与对驾驶员面部的捕获图像的合适分析相关联，根据本专利技术的方法能够估算驾驶员的注意力等级。为此，考虑到车辆在行驶车道中的侧向位置的变化，根据本专利技术的用于估算车辆的驾驶员的注意力等级的方法包括通过随着车辆的移动来存储最靠近车辆的地面部分而重新构建所获得的道路区段的鸟瞰图。根据本专利技术的方法还包括在前一时刻在所述重新构建的鸟瞰图中定位车辆，以及在给定的道路区段上存储车辆的连续位置。因此，本专利技术能够创建在车辆的时间参考系中位于所述车辆上游的道路部分的鸟瞰图。根据本专利技术的方法的有利实施例，对驾驶员面部图像的分析与对鸟瞰图中的车辆的连续位置的分析的结合能够精确地确定车辆的驾驶员的注意力等级。更具体地，本专利技术涉及一种估算在行驶车道中移动的车辆的驾驶员的注意力等级的方法，所述方法包括以下步骤：-借助于至少一个适用的摄像头连续捕获在所述车辆前方和/或后方的地面的图像，所述图像对应于地面表面，所述地面表面具有的宽度至少等于行驶车道宽度并且具有深度，-通过使在时刻t1＝t-dt1与当前时刻t之间捕获的图像在时间上集成，重新构建在连续的当前时刻t上的道路区段的鸟瞰图，dt1为正，-估算所述车辆在所述连续的当前时刻t上重新构建的鸟瞰图中的侧向位置，并且存储在时刻t2＝t-dt2与当前时刻t之间的所述车辆的估算位置，dt2为正且独立于dt1，-确定在时刻t3＝t-dt3上的驾驶员的估算的注意力等级，dt3为正，时刻t3在时刻t2之后并且时刻t3在时刻t1之后或等于时刻t1，所述确定取决于：○在时刻t2与t3之间所述车辆在鸟瞰图中的侧向位置的变化，○对属于在当前时刻t上重新构建的鸟瞰图并且对应于在时刻t1与当前时刻t之间捕获的图像序列的道路部分的轮廓的分析，所述道路部分在时刻t3上至少部分位于所述车辆的上游。因此，由于根据本专利技术的方法，能够设置在车辆的时间参考系中给出在时刻t3上位于车辆上游的道路区段部分的鸟瞰图。对车辆的侧向位置随时间变化的分析用于估算驾驶员的注意力等级。根据一种实施方式，在重新构建地面的鸟瞰图的步骤之后，所述方法包括在所述重新构建的鸟瞰图中检测形成地面标记线的至少一条线，所述地面标记线限界出行驶车道，并且包括在重新构建的鸟瞰图中估算所述车辆的位置，所述重新构建的鸟瞰图涉及确定所述车辆相对于所述至少一条线的相对位置。根据一种优选实施方式，所述方法还包括：-捕获驾驶员的面部图像，-对驾驶员的面部图像的进行分析，对所述驾驶员的估算的注意力等级的确定还取决于对驾驶员的面部图像的所述分析。根据一种实施方式，对所述车辆在所述重新构建的鸟瞰图中相对于所述至少一条线的相对位置的估算包括对应于地面表面的连续捕获的图像的组合，所述地面表面具有取决于所述车辆的速度来确定的深度。根据一种实施方式，对在所述重新构建鸟瞰图中对形成地面标记线的至少一条线的检测包括实施霍夫变换，所述地面标记线限界出行驶车道。根据一种实施方式，根据本专利技术的方法还包括在所述车辆越过所述至少一条线时警告驾驶员的步骤。有利地，所述车道宽度可等于五米。有利地，捕获的图像的地面表面的所述深度小于两米。本专利技术还提供一种用于估算车辆在行驶车道中的侧向位置的装置，所述装置包括：用于实施在所述车辆的前方和/或后方的地面的图像的连续捕获的至少一个摄像头、计算单元及存储单元，所述计算单元及存储单元配置用于实施根据前述权利要求中任一项所述的方法。有利地，所述至少一个摄像头是设置在所述车辆前部的正面摄像头。附图说明通过阅读下文中仅作为示例给出的本专利技术实施例的详细描述并且参考附图，本专利技术的其它特征和优点将更加清楚，在所述附图中：-本文档来自技高网...

【技术保护点】
1.一种用于估算在行驶车道中移动的车辆的驾驶员的注意力等级的方法，所述方法包括以下步骤：‑借助于至少一个适用的摄像头连续捕获在所述车辆(100)前方和/或后方的地面的图像(10)，所述图像(10)对应于地面表面，所述地面表面具有的宽度至少等于行驶车道宽度并且具有深度，‑通过使在时刻t1＝t‑dt1与当前时刻t之间捕获的图像(10)在时间上集成，重新构建在连续的当前时刻t上的道路区段的鸟瞰图(11，12)，dt1为正，‑估算所述车辆(100)在所述连续的当前时刻t上重新构建的鸟瞰图(11，12)中的侧向位置，并且存储在时刻t2＝t‑dt2与当前时刻t之间的所述车辆的估算位置，dt2为正且独立于dt1，‑确定在时刻t3＝t‑dt3上的驾驶员的估算的注意力等级，dt3为正，时刻t3在时刻t2之后并且时刻t3在时刻t1之后或等于时刻t1，所述确定取决于：○在时刻t2与t3之间所述车辆在鸟瞰图中的侧向位置的变化，○对属于在当前时刻t上重新构建的鸟瞰图并且对应于在时刻t1与当前时刻t之间捕获的图像序列的道路部分的轮廓的分析，所述道路部分在时刻t3上至少部分位于所述车辆的上游。

【技术特征摘要】
【国外来华专利技术】2016.02.19 FR 16513711.一种用于估算在行驶车道中移动的车辆的驾驶员的注意力等级的方法，所述方法包括以下步骤：-借助于至少一个适用的摄像头连续捕获在所述车辆(100)前方和/或后方的地面的图像(10)，所述图像(10)对应于地面表面，所述地面表面具有的宽度至少等于行驶车道宽度并且具有深度，-通过使在时刻t1＝t-dt1与当前时刻t之间捕获的图像(10)在时间上集成，重新构建在连续的当前时刻t上的道路区段的鸟瞰图(11，12)，dt1为正，-估算所述车辆(100)在所述连续的当前时刻t上重新构建的鸟瞰图(11，12)中的侧向位置，并且存储在时刻t2＝t-dt2与当前时刻t之间的所述车辆的估算位置，dt2为正且独立于dt1，-确定在时刻t3＝t-dt3上的驾驶员的估算的注意力等级，dt3为正，时刻t3在时刻t2之后并且时刻t3在时刻t1之后或等于时刻t1，所述确定取决于：○在时刻t2与t3之间所述车辆在鸟瞰图中的侧向位置的变化，○对属于在当前时刻t上重新构建的鸟瞰图并且对应于在时刻t1与当前时刻t之间捕获的图像序列的道路部分的轮廓的分析，所述道路部分在时刻t3上至少部分位于所述车辆的上游。2.根据权利要求1所述的方法，在重新构建地面的鸟瞰图(11，12)的步骤之后，所述方法包括在所述重新构建的鸟瞰图中检测形成地面标记线的至少一条线，所述地面标记线限界出行驶车道，并且包括在重新构建的鸟瞰图(11，12)中估算所述...

【专利技术属性】
技术研发人员：F·拉尔热，
申请(专利权)人：标致雪铁龙汽车股份有限公司，
类型：发明
国别省市：法国,FR