基于多传感器融合的车道线检测方法、系统、电子设备技术方案

本发明专利技术提供一种基于多传感器融合的车道线检测方法、系统、电子设备，所述方法包括：每获取一个传感器传来的数据帧，比较当前数据帧和上一数据帧的时间戳大小，其中，所述当前数据帧中包括车道线检测点集，所述上一数据帧对应有第一车道线更新点集；确定时间在后的数据帧，将所述车道线检测点集和所述第一车道线更新点集统一至所述时间在后的数据帧的车体坐标系下；将所述车道线检测点集和所述第一车道线更新点集做匹配；形成第一子车道线更新点集、第二子车道线更新点集，二者的合集作为所述当前数据帧对应的第二车道线更新点集。本发明专利技术能够弥补单个传感器各自的缺点，实现更优的车道线检测结果。车道线检测结果。车道线检测结果。

【技术实现步骤摘要】
基于多传感器融合的车道线检测方法、系统、电子设备


[0001]本专利技术涉及自动驾驶
，尤其涉及一种基于多传感器融合的车道线检测方法、系统、电子设备。

技术介绍

[0002]在自动驾驶的环境要素中，车道线可以用来划定车辆的行驶区域，也是用来规划车辆行驶路径和策略的重要参考元素，用其检测结果和高精地图进行匹配还可以进行车辆定位的横向定位，因此车道线检测是无人驾驶中必不可少的重要技术。由于车辆行驶环境的复杂性，不同传感器在不同场景下对车道线的检测各有差异，单一的传感器检测并不能满足对车道线的检测需求，因此基于多传感器融合的车道线检测方法显得十分必要。
[0003]基于图像的车道线检测方法受限于光线影响，在黑暗场景以及类似隧道进出口等条件下检测效果一般不佳，而且图像坐标系下的检测结果最终投影到三维坐标系下需要依赖一个假设的平坦地面，道路坡度以及车辆颠簸都会影响最终的车道线检测结果。但是图像对车道线的检测有检测距离远、受天气状态影响小、可以区分车道线的颜色信息等优势。
[0004]基于激光雷达对车道线的检测，则在雨天或者雾霾天气下效果不佳，而且由于激光雷达的检测距离短以及不能识别车道线颜色信息等缺点，一般没有单纯用激光雷达进行成车道线检测的方案。但是激光雷达直接生成的是三维坐标系下的信息，而且其近处的检测精度比较高。
[0005]公开于该
技术介绍
部分的信息仅仅旨在加深对本专利技术的总体
技术介绍
的理解，而不应当被视为承认或以任何形式暗示该信息构成已为本领域技术人员所公知的现有技术。
专利技术内容
[0006]针对现有技术存在的问题，本专利技术提供一种基于多传感器融合的车道线检测方法、系统、电子设备。
[0007]本专利技术提供的一种基于多传感器融合的车道线检测方法，所述方法包括：
[0008]每获取一个传感器传来的数据帧，比较当前数据帧和上一数据帧的时间戳大小，其中，所述当前数据帧中包括车道线检测点集，所述车道线检测点集基于图像传感器获取或者基于激光雷达传感器获取，所述上一数据帧对应有第一车道线更新点集；
[0009]确定时间在后的数据帧，基于车辆运动补偿，将所述车道线检测点集和所述第一车道线更新点集统一至所述时间在后的数据帧的车体坐标系下；
[0010]在所述车体坐标系下，将所述车道线检测点集和所述第一车道线更新点集做匹配；
[0011]对于匹配成功的所述车道线检测点集，融合所述车道线点集和所述第一车道线更新点集，形成第一子车道线更新点集，基于匹配失败的所述车道线检测点集，形成第二子车道线更新点集，所述第一子车道线更新点集和所述第二子车道线更新点集的合集作为所述当前数据帧对应的第二车道线更新点集。
[0012]根据本专利技术提供的一种基于多传感器融合的车道线检测方法，对于匹配成功的所述车道线检测点集，融合所述车道线点集和所述第一车道线更新点集，形成第一子车道线更新点集，包括：
[0013]对于匹配成功的所述车道线检测点集，分为与所述第一车道线更新点集重合的第一部分点集、与所述第一车道线更新点集不重合的第二部分点集；
[0014]基于所述第一部分点集和与之重合的所述第一车道线更新点集，进行卡尔曼滤波融合，形成第三部分点集；
[0015]将所述第二部分点集整体平移，形成第四部分点集，所述第四部分点集与所述第三部分点集衔接形成所述第一子车道线更新点集。
[0016]根据本专利技术提供的一种基于多传感器融合的车道线检测方法，将所述第二部分点集整体平移，形成第四部分点集，所述第四部分点集与所述第三部分点集衔接形成所述第一子车道线更新点集，包括：
[0017]获取所述第三部分点集中与所述第二部分点集中最接近的点；
[0018]计算所述最接近的点相较于所述第一部分点集的平移量；
[0019]基于所述平移量，将所述第二部分点集整体平移，形成第四部分点集，所述第四部分点集与所述第三部分点集衔接形成所述第一子车道线更新点集。
[0020]根据本专利技术提供的一种基于多传感器融合的车道线检测方法，
[0021]假设所述车道线检测点集基于图像传感器获取，进行卡尔曼滤波融合时，为所述车道线检测点集中的检测点的横向位置设定第一观测噪声方差，
[0022]假设所述车道线检测点集基于激光雷达传感器获取，进行卡尔曼滤波融合时，为所述车道线检测点集中的检测点的横向位置设定第二观测噪声方差，
[0023]则所述第一观测噪声方差大于所述第二观测噪声方差。
[0024]根据本专利技术提供的一种基于多传感器融合的车道线检测方法，假设所述车道线检测点集基于图像传感器获取，则进行卡尔曼滤波融合时，对于纵向位置越远的所述车道线检测点集的检测点，为检测点的横向位置设定的观测噪声方差越大。
[0025]根据本专利技术提供的一种基于多传感器融合的车道线检测方法，进行卡尔曼滤波融合时，对于所述车道线检测点集的检测点，如果所述检测点与所述第一车道线更新点集的对应点在横向位置上相差越远，则为所述检测点的横向位置设定的观测噪声方差越大。
[0026]根据本专利技术提供的一种基于多传感器融合的车道线检测方法，基于所述第一部分点集和与之重合的所述第一车道线更新点集，进行卡尔曼滤波融合，包括：
[0027]基于所述车道线检测点集，形成二次曲线方程；
[0028]基于所述第一车道线更新点集的点的纵坐标，在所述的二次曲线方程上采样，形成与所述第一车道线更新点集的点相对应的所述车道线检测点集的检测点，作为所述第一部分点集。
[0029]根据本专利技术提供的一种基于多传感器融合的车道线检测方法，所述方法还包括：
[0030]获取传感器传来的多个数据帧，所述多个数据帧包括至少一个来自图像传感器的数据帧和至少一个来自激光雷达传感器的数据帧；
[0031]按照获取的时间顺序，依次基于所述数据帧对应处理形成车道线更新点集。
[0032]根据本专利技术提供的一种基于多传感器融合的车道线检测方法，确定时间在后的数
据帧，基于车辆运动补偿，将所述车道线检测点集和所述第一车道线更新点集统一至所述时间在后的数据帧的车体坐标系下，包括：
[0033]如果所述上一数据帧的时间小于所述当前数据帧的时间，将所述上一数据帧车体坐标系下的所述第一车道线更新点集转换到所述当前数据帧的车体坐标系下；
[0034]如果所述上一数据帧的时间大于所述当前数据帧的时间，将所述当前数据帧的所述车道线检测点集转换到所述上一数据帧的车体坐标系下。
[0035]本专利技术还提供的一种基于多传感器融合的车道线检测系统，所述系统包括：
[0036]获取模块，用来每获取一个传感器传来的数据帧，比较当前数据帧和上一数据帧的时间戳大小，其中，所述当前数据帧中包括车道线检测点集，所述车道线检测点集基于图像传感器获取或者基于激光雷达传感器获取，所述上一数据帧对应有第一车道线更新点集；
[0037]补偿模块，用来确定时间在后的数据帧，基于车辆运动补偿，本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于多传感器融合的车道线检测方法，其特征在于，所述方法包括：每获取一个传感器传来的数据帧，比较当前数据帧和上一数据帧的时间戳大小，其中，所述当前数据帧中包括车道线检测点集，所述车道线检测点集基于图像传感器获取或者基于激光雷达传感器获取，所述上一数据帧对应有第一车道线更新点集；确定时间在后的数据帧，基于车辆运动补偿，将所述车道线检测点集和所述第一车道线更新点集统一至所述时间在后的数据帧的车体坐标系下；在所述车体坐标系下，将所述车道线检测点集和所述第一车道线更新点集做匹配；对于匹配成功的所述车道线检测点集，融合所述车道线点集和所述第一车道线更新点集，形成第一子车道线更新点集，基于匹配失败的所述车道线检测点集，形成第二子车道线更新点集，所述第一子车道线更新点集和所述第二子车道线更新点集的合集作为所述当前数据帧对应的第二车道线更新点集。2.根据权利要求1所述的基于多传感器融合的车道线检测方法，其特征在于，对于匹配成功的所述车道线检测点集，融合所述车道线点集和所述第一车道线更新点集，形成第一子车道线更新点集，包括：对于匹配成功的所述车道线检测点集，分为与所述第一车道线更新点集重合的第一部分点集、与所述第一车道线更新点集不重合的第二部分点集；基于所述第一部分点集和与之重合的所述第一车道线更新点集，进行卡尔曼滤波融合，形成第三部分点集；将所述第二部分点集整体平移，形成第四部分点集，所述第四部分点集与所述第三部分点集衔接形成所述第一子车道线更新点集。3.根据权利要求2所述的基于多传感器融合的车道线检测方法，其特征在于，将所述第二部分点集整体平移，形成第四部分点集，所述第四部分点集与所述第三部分点集衔接形成所述第一子车道线更新点集，包括：获取所述第三部分点集中与所述第二部分点集中最接近的点；计算所述最接近的点相较于所述第一部分点集的平移量；基于所述平移量，将所述第二部分点集整体平移，形成第四部分点集，所述第四部分点集与所述第三部分点集衔接形成所述第一子车道线更新点集。4.根据权利要求2所述的基于多传感器融合的车道线检测方法，其特征在于，假设所述车道线检测点集基于图像传感器获取，进行卡尔曼滤波融合时，为所述车道线检测点集中的检测点的横向位置设定第一观测噪声方差，假设所述车道线检测点集基于激光雷达传感器获取，进行卡尔曼滤波融合时，为所述车道线检测点集中的检测点的横向位置设定第二观测噪声方差，则所述第一观测噪声方差大于所述第二观测噪声方差。5.根据权利要求2所述的基于多传感器融合的车道线检测方法，其特征在于，假设所述车道线检测点集基于图像传感器获取，则进行卡尔曼滤波融合时，对于纵向位置越远的所述车道线检测点集的检测点，为检测点的横向位置设定的观测噪声方差越大。6.根据权利要求2所述的基于多传感器融合的车道线检测方法，其特征在于，进行卡尔曼滤波融合时，对于所述车道线检测点集的检测点，如果所述检测点与所述第一车道线更新点集的对应点在横向位置上相差越远，则为所述检测点...

【专利技术属性】
技术研发人员：吴尧，韩雨，
申请(专利权)人：际络科技上海有限公司，
类型：发明
国别省市：