用于机动车辆的视觉系统和方法技术方案

本发明专利技术公开了一种用于机动车辆的视觉系统(10)，所述视觉系统包括具有成像装置(12)的立体成像设备(11)，所述成像装置适于从所述机动车辆的周围环境捕获图像；和处理装置(14)，所述处理装置适于处理由所述成像装置(12)捕获的图像，以及在所捕获的图像中检测对象，并在若干时间帧内跟踪检出对象。所述处理装置(14)适于通过使用非线性方程解算器方法求解属于一个特定检出对象(30)的一组方程来获得所述成像装置(12)的固有偏航误差的估计值，其中每个方程对应于一个时间帧并且关联帧时间、所述特定检出对象的视差值、固有偏航误差以及所述自我意识车辆的运动变量。

【技术实现步骤摘要】
【国外来华专利技术】用于机动车辆的视觉系统和方法
本专利技术涉及用于机动车辆的视觉系统，该视觉系统包括具有成像装置的立体成像设备，这些成像装置适于从机动车辆的周围环境捕获图像；和处理装置，该处理装置适于处理由所述成像装置捕获的图像并检测与机动车辆的周围环境中的现实世界对象相对应的所述图像中的对象，并且在所捕获的图像的若干时间帧内跟踪检出对象。本专利技术还涉及对应的视觉方法。
技术介绍
必须非常准确地确定立体相机系统中的左相机与右相机之间的偏航角(也称为斜视角)，因为该角度的误差会导致立体计算中的大距离估计误差。距离误差随着距离的平方而增加。对于汽车立体相机而言，由于汽车系统的热变化和长寿命时间，斜视角在车辆寿命时间内将不恒定。因此，需要用于估计斜视角误差的在线解决方案。已知的是使用雷达或激光雷达距离信息作为参考值来估计斜视角误差，但是这需要雷达或激光雷达参考系统。DE102012009577A1描述了通过将由里程计数据确定的参考驱动距离与由图像处理确定的立体驱动距离进行比较来校准机动车辆中的两个立体相机之间的斜视角的方法。然而，计算参考驱动距离所需的外部里程计数据构成斜视角误差确定的不确定性的附加系统源。DE102013224502A1公开了校准车辆的立体相机的方法。该方法涉及单独地确定来自这两个相机的图像的光流。根据车辆的光流及估计的自我运动，计算对应的3D环境数据。根据这两个相机的3D环境数据的比较，确定校准误差。上文提及的两种方法都需要确切了解某个其他传感器给出的自我意识车辆的运动。US2014/0168377A1公开了用于使车载对象检测系统的立体相机对准的方法，其中每个相机在两个不同时间拍摄的图像用于确定静止对象(如交通标志)相对于车辆的所观察的位移。还使用例如在两个不同时间拍摄的图像中的对象的尺寸差异来确定对象相对于车辆的所预测的位移。基于所观察的位移与所预测的位移的差值来确定三角测量校正，以此用于校正相机的失准。
技术实现思路
本专利技术的目的是提供视觉系统和控制视觉系统的方法，从而允许在机动车辆的操作期间准确确定立体相机之间的偏航角误差。本专利技术利用独立权利要求的特征来达到该目的。根据本专利技术，通过使用非线性方程解算器方法来求解一组方程以便获得固有偏航误差的估计值。每个方程对应于一个时间帧，并且通过使用非线性方程解算器方法来关联时间帧的时间、特定检出对象的计算的视差值、固有偏航误差以及自我意识车辆的运动变量以便获得固有偏航误差的估计值。已经发现，以这种方式，可在机动车辆的运动期间准确地确定立体相机之间的偏航角误差，从而实现立体相机的对应偏航角校准。固有偏航误差的估计值可有利地用于在驾驶期间校准成像装置之间的偏航角。优选地，该组中的所有方程具有相同形式。具体地讲，优选地通过使由车辆运动学获得的离特定检出对象的当前距离与由视差值获得的当前距离相等来获得该组中的所有方程。在本文中，由视差值获得的当前距离可表示为x＝f·b/(d+ε)，其中f是基线方向上的成像装置的焦距，b是基线，即成像装置之间的距离，d是当前视差值，并且ε是固有偏航误差。在许多情况下，基线方向是水平的。然而，例如如果立体成像装置远离彼此定位(如在车辆的前保险杠中以及在挡风玻璃后面)，基线方向也可具有显著的垂直分量。在此类情况下，在成像装置之间的非水平方向上测量基线和焦距方向。在ε＝0的理想情况下，上述方程给出检出对象的距离x与视差d之间的熟知关系。在ε≠0的现实情况下，上述方程与将偏航误差ε表示为向视差值d的简单移位的附加有利特征一起使用。换句话讲，所计算的视差d和偏航误差ε通过在该方程中进行加或减来彼此关联。换句话讲，通过将所计算的视差d与偏航误差ε相加(或相减)来表示理想视差D。本专利技术方法是准确的，这是由于小角度近似：偏航角ε非常小，使得sinε≈ε。不可接受的误差ε的示例为0.05度。为了提高偏航误差估计中的精确度，该组方程中使用的方程数优选地大于未知变量，优选地为至少1.5倍，更优选地为至少2倍，甚至更优选地为至少3倍。优选地，该组中使用的方程数是至少三个、优选地至少五个、更优选地至少十个。一般而言，所使用的方程数越多，所确定的未知变量的精度越高。优选地，该组方程基于基本上恒定的自我意识车辆速度v的假设，从而简化用于偏航误差计算的方程并因此降低计算工作量。具体地讲，上面提到的由车辆运动学获得的离特定检出对象的当前距离x可简单表示为方程x＝(t0-t)×v，其中t0是特定检出对象处于x＝0(即，在连接成像装置的直线上)时的(未知)时间，t是当前时间帧的帧时间，使得t0-t是至碰撞的时间TTC，并且运动变量v是一般相对于特定检出对象的自我意识车辆速度，即，自我意识车辆的纵向速度，或就静止检出对象而言，是绝对自我意识车辆速度(相对于地)。综上所述，要在偏航误差估计中使用的实际优选的一般方程形式是(t0-t)·(d+ε)-f·b/v＝0优选地，视觉系统适于确定检出对象是否为静止或近乎静止的，并且丢弃不满足此条件(即正在运动)的检出对象。这可通过以下方式进行：确定检出对象的速度，并且在对象具有非零速度或超过预定阈值的速度的情况下丢弃该对象。检出对象的速度优选地由所述处理装置中的跟踪器估计，该跟踪器适于随时间推移跟踪检出对象或对象候选者。其他确定检出对象的速度的方式是可能的。另外，其他确定检出对象是否为静止或近乎静止的方式是可能的，例如通过在检出对象的图像处理中使用分类器，并且仅考虑已知为静止的分类对象，如杆、交通标志、灯柱、树木、斑马线、虚线车道标记等。就静止检出对象而言，上面提到的相对于检出对象基本上恒定的自我意识车辆速度的条件简化为基本上恒定的绝对自我意识车辆速度(相对于地)。因此，视觉系统优选地适于确定自我意识车辆速度是否为基本上恒定的，并且在所述偏航误差估计中丢弃不满足此条件的图像帧。基本上恒定的自我意识车辆速度的条件可易于例如通过以下方式评价：监测车辆数据总线上可用的自我意识车辆速度，即，由以与自我意识车辆的动力总成中的旋转部件(如曲轴)的测量关系布置的角速度传感器测量的自我意识车辆速度，该速度与车轮速度成比例并且由驾驶舱速度计显示。其他评价基本上恒定的自我意识车辆速度的条件的方式是可能的，例如通过监测由机动车辆的卫星导航系统(GPS)接收机提供的更精确速度值；或通过评价来自纵向加速度传感器的信号，该信号应为零或接近零。如上面提到的，运动变量可特别是纵向车辆速度。然而，运动变量也可为例如积分纵向车辆速度、或自我意识车辆的纵向加速度。就纵向车辆速度而言，有多种方式可以处理该组方程中的速度变量。在一个优选实施方案中，速度变量v被视为已知的，即，由机动车辆的速度传感器和/或卫星导航系统接收机提供的自我意识车辆速度v插入到这些方程中。这具有以下优点：通过将未知变量数减少一个，可提高其他未知变量(包括偏航误差)确定时的精确度。另一方面，速度变量v可被视为未知的，并且可以以与导出其他未知数(诸如固有偏航误差)相同的方式通过使用非线性方程解算器方法求解该组方程来导出自我意识车辆速度v。在本申请中，本专利技术提供了独立于与车轮速度相关且由驾驶舱速度计显示的速度值的自我意识车辆速度值，该速度值可用于校准自我意识车辆速度。优选地，该组方程基于自我意识车辆基本上沿直线运本文档来自技高网...

【技术保护点】
1.用于机动车辆的视觉系统(10)，包括具有成像装置(12)的立体成像设备(11)，所述成像装置适于从所述机动车辆的周围环境捕获图像；和处理装置(14)，所述处理装置适于处理由所述成像装置(12)捕获的图像，以及在所捕获的图像中检测对象，并在若干时间帧内跟踪检出对象，其特征在于所述处理装置(14)适于通过使用非线性方程解算器方法求解属于一个特定检出对象(30)的一组方程来获得所述成像装置(12)的固有偏航误差的估计值，其中每个方程对应于一个时间帧并且关联帧时间、所述特定检出对象的视差值、固有偏航误差以及自我意识车辆的运动变量。

【技术特征摘要】
【国外来华专利技术】2016.06.01 EP 16172442.21.用于机动车辆的视觉系统(10)，包括具有成像装置(12)的立体成像设备(11)，所述成像装置适于从所述机动车辆的周围环境捕获图像；和处理装置(14)，所述处理装置适于处理由所述成像装置(12)捕获的图像，以及在所捕获的图像中检测对象，并在若干时间帧内跟踪检出对象，其特征在于所述处理装置(14)适于通过使用非线性方程解算器方法求解属于一个特定检出对象(30)的一组方程来获得所述成像装置(12)的固有偏航误差的估计值，其中每个方程对应于一个时间帧并且关联帧时间、所述特定检出对象的视差值、固有偏航误差以及自我意识车辆的运动变量。2.根据权利要求1所述的视觉系统，其特征在于所述自我意识车辆的所述运动变量是车辆速度。3.根据前述权利要求中任一项所述的视觉系统，其特征在于所述组方程基于基本上恒定的自我意识车辆速度的假设。4.根据前述权利要求中任一项所述的视觉系统，其特征在于所述视觉系统(10)适于确定所述自我意识车辆速度是否为基本上恒定的，并且在所述偏航误差估计中丢弃不满足此条件的图像帧。5.根据前述权利要求中任一项所述的视觉系统，其特征在于所述视觉系统(10)适于确定检出对象是否为静止或近乎静止的，并且在所述偏航误差估计中丢弃不为静止或近乎静止的检出对象。6.根据权利要求5所述的视觉系统，其特征在于所述视觉系统(10)适于特别是通过使用所述处理装置(14)中的跟踪器来确定检出对象的所述速度，所述跟踪器适于随时间推移跟踪检出对象。7.根据前述权利要求中任一项所述的视觉系统，其特征在于所述视觉系统(10)向所述组方程中插入所述机动车辆的数据总线(20)上可用的所述已知自我意识车辆速度。8.根据前...

【专利技术属性】
技术研发人员：利夫·林德格伦，弗雷德里克·麦得利，皮尔·克努森，
申请(专利权)人：奥托立夫开发公司，
类型：发明
国别省市：瑞典,SE