一种路侧激光雷达的车辆检测和轨迹预测方法技术

本发明专利技术涉及一种路侧激光雷达的车辆检测和轨迹预测方法，该方法包括：步骤1：建立车辆检测和轨迹预测的多任务深度神经网络模型；步骤2：基于公开数据集对多任务深度神经网络模型进行预训练；步骤3：采用基于体素化处理的背景滤波法对点云进行背景滤波；步骤4：基于自建路侧端数据集进行多任务深度神经网络模型的迁移训练；步骤5：部署多任务深度神经网络模型，进行车辆的检测、跟踪和轨迹预测，与现有技术相比，本发明专利技术具有提升检测模型的准确率和轨迹预测的准确率等优点。迹预测的准确率等优点。迹预测的准确率等优点。

【技术实现步骤摘要】
一种路侧激光雷达的车辆检测和轨迹预测方法


[0001]本专利技术涉及目标检测
，尤其是涉及一种路侧激光雷达的车辆检测和轨迹预测方法。

技术介绍

[0002]近年来，随着汽车保有量的增加，交通拥堵问题，交通中的安全问题越来越突显，为了提高通行效率，增加安全性，并将驾驶员从疲劳的驾驶工作中解放出来，自动驾驶进入了大众的视野。车路协同是自动驾驶的重要分支之一，而路侧端感知需要通过在路侧端安装的传感器准确感知周围环境和环境内的交通参与者，以分担车端感知的压力，提供信息冗余，是车路协同的核心。
[0003]自动驾驶环境感知中常用的传感器有RGB相机，激光雷达和毫米波雷达等，RGB相机成本低廉，较易布设于路侧，数据分辨率高，特征丰富等优势，但受光照条件影响较大，夜间几乎无法正常使用；毫米波雷达成本较低，不受光照条件和天气条件影响，但分辨率很低；激光雷达具有不易受光照条件影响，日夜都能工作，精度高，分辨率较高的特点，但易受雨雾雪等恶劣环境的影响。
[0004]现有的基于激光雷达的路侧端感知技术方案通过在路侧布设激光雷达，对交通参与者进行类别的识别和边界框的检测,如《路侧激光雷达目标检测方法及装置》中首先通过栅格化处理对点云进行背景滤波，然后将经过滤波的点云输入检测模型得到目标的类别信息和边界框结果,其中栅格化的背景滤波方式容易造成漏删和误删的问题，因为点云是三维的数据点而栅格为二维矩形区域，若同一个栅格内同时存在背景点与非背景点，如交通标识牌下方驶过的车辆，这种方法容易造成车辆点云被误删或交通标识牌的漏删,另外，上述方法只能得到类别信息和边界框信息，无法获取目标的运动状态，也没有对目标进行跟踪，也没有对目标进行轨迹预测，而这些都是智能驾驶中非常重要的信息。

技术实现思路

[0005]本专利技术的目的就是为了克服上述现有技术存在的缺陷而提供一种路侧激光雷达的车辆检测和轨迹预测方法。
[0006]本专利技术的目的可以通过以下技术方案来实现：
[0007]一种路侧激光雷达的车辆检测和轨迹预测方法，该方法包括以下步骤：
[0008]步骤1：建立车辆检测和轨迹预测的多任务深度神经网络模型；
[0009]步骤2：基于公开数据集对多任务深度神经网络模型进行预训练；
[0010]步骤3：采用基于体素化处理的背景滤波法对点云进行背景滤波；
[0011]步骤4：基于自建路侧端数据集进行多任务深度神经网络模型的迁移训练；
[0012]步骤5：部署多任务深度神经网络模型，进行车辆的检测、跟踪和轨迹预测。
[0013]所述的步骤1中，多任务深度神经网络模型采用深度神经网络对车辆进行检测和轨迹预测，基于深度神经网络的多任务深度神经网络模型的结构具体为：
[0014]体素化层：对输入点云序列进行体素化，得到体素化的点云序列；
[0015]卷积层：对体素化后的点云序列连续使用两次2D卷积和3D卷积，得到将点云序列融合后的特征图；
[0016]网络主干层：采用网络主干对特征图提取更深层的特征，得到多尺度特征图；
[0017]输出分支层：包括两个输出分支，分别为目标检测分支和目标轨迹预测分支通过两个分支分别输出目标检测结果和目标预测轨迹。
[0018]所述的目标检测分支的输出表达式为：
[0019](x,y,w,l,yaw,conf)
[0020]其中，(x,y)为车辆目标在地面坐标系下的坐标值，w为车辆目标的宽度，l为车辆目标的长度，yaw为车辆目标在地面坐标系下的朝向角，conf为车辆目标的置信度。
[0021]所述的目标轨迹预测分支的输出表达式为：
[0022](dx
i
,dy
i
,dθ
i
),i＝1
…
30
[0023]其中，i表示时间段为(i
‑
1)/10秒至i/10秒，dx
i
和dy
i
分别为在(i
‑
1)/10秒至i/10秒时间段内目标在地面坐标系的x方向上发生的位移预测量和y方向上发生的位移预测量，dθ
i
为在(i
‑
1)/10秒至i/10秒时间段内目标在地面坐标系下发生的朝向角预测量。
[0024]所述的目标检测结果包括检测边界框、检测的位置、检测的朝向角和检测的尺寸，所述的目标预测轨迹包括预测边界框、预测的位置、预测的朝向角和预测的尺寸。
[0025]所述的步骤2中，对多任务深度神经网络模型进行预训练的过程具体包括以下哪些步骤：
[0026]步骤201：对用以训练的公开数据集中的点云进行预处理，根据公开数据集中的地图信息剔除点云中的地面点和不可行驶区域内的点云；
[0027]步骤202：公开数据集中两帧点云的时间间隔为0.1秒，每隔0.2秒抽取0.5秒的片段数据，即连续5帧的点云，将片段数据通过公开数据集中的车姿信息统一到最后一帧的坐标系下；
[0028]步骤203：将经过预处理后且坐标系统一后的点云输入多任务深度神经网络模型进行预训练；
[0029]步骤204：预训练的训练目标为点云中的车辆的位置、尺寸、朝向角和未来轨迹。
[0030]所述的公开数据集具体为：
[0031]具有连续帧车辆标注且每一帧都带有车姿信息的激光雷达数据集，所述的公开数据集包括Argoverse数据集。
[0032]所述的步骤3中，基于体素采用背景滤波法对点云进行背景滤波的过程具体包括以下步骤：
[0033]步骤301：通过路侧激光雷达采集点云，得到一段无动态物体的点云序列；
[0034]步骤302：对采集到的点云序列进行体素化，将所有体素中出现过点云的体素标记为背景体素，其余标记为非背景体素，得到体素化后的背景帧；
[0035]步骤303：对背景帧进行实时背景滤除，判断点云是否落在背景帧中的背景体素上，若是，则为背景点，直接剔除，得到滤除背景点后的点云序列；
[0036]步骤304：对滤除背景点后的点云序列进行半径滤波，进一步剔除点云序列的噪声点。
[0037]所述的步骤4中，进行多任务深度神经网络模型的迁移训练的过程具体包括以下步骤：
[0038]步骤401：通过路侧激光雷达采集路端真实数据；
[0039]步骤402：对路端真实数据采用步骤3的背景滤波法剔除背景点后再输入多任务深度神经网络模型生成检测结果；
[0040]步骤403：对生成的检测结果进行人工筛选，得到自建路侧端数据集；
[0041]步骤404：采用步骤3的背景滤波法对自建路侧端数据集剔除背景点；
[0042]步骤405：将多任务深度神经网络模型在剔除背景点后的自建路侧数据集上进行迁移训练；
[0043]步骤406：迁移训练的训练目标为点云中的车辆的位置尺寸和朝向。
[0044]所述的步骤5中，进行车辆的检测、跟踪和轨迹预测的过本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种路侧激光雷达的车辆检测和轨迹预测方法，其特征在于，该方法包括以下步骤：步骤1：建立车辆检测和轨迹预测的多任务深度神经网络模型；步骤2：基于公开数据集对多任务深度神经网络模型进行预训练；步骤3：采用基于体素化处理的背景滤波法对点云进行背景滤波；步骤4：基于自建路侧端数据集进行多任务深度神经网络模型的迁移训练；步骤5：部署多任务深度神经网络模型，进行车辆的检测、跟踪和轨迹预测。2.根据权利要求1所述的一种路侧激光雷达的车辆检测和轨迹预测方法，其特征在于，所述的步骤1中，多任务深度神经网络模型采用深度神经网络对车辆进行检测和轨迹预测，基于深度神经网络的多任务深度神经网络模型的结构具体为：体素化层：对输入点云序列进行体素化，得到体素化的点云序列；卷积层：对体素化后的点云序列连续使用两次2D卷积和3D卷积，得到将点云序列融合后的特征图；网络主干层：采用网络主干对特征图提取更深层的特征，得到多尺度特征图；输出分支层：包括两个输出分支，分别为目标检测分支和目标轨迹预测分支通过两个分支分别输出目标检测结果和目标预测轨迹。3.根据权利要求2所述的一种路侧激光雷达的车辆检测和轨迹预测方法，其特征在于，所述的目标检测分支的输出表达式为：(x,y,w,l,yaw,conf)其中，(x,y)为车辆目标在地面坐标系下的坐标值，w为车辆目标的宽度，l为车辆目标的长度，yaw为车辆目标在地面坐标系下的朝向角，conf为车辆目标的置信度。4.根据权利要求3所述的一种路侧激光雷达的车辆检测和轨迹预测方法，其特征在于，所述的目标轨迹预测分支的输出表达式为：(dx
i
,dy
i
,dθ
i
),i＝1
…
30其中，i表示时间段为(i
‑
1)/10秒至i/10秒，dx
i
和dy
i
分别为在(i
‑
1)/10秒至i/10秒时间段内目标在地面坐标系的x方向上发生的位移预测量和y方向上发生的位移预测量，dθ
i
为在(i
‑
1)/10秒至i/10秒时间段内目标在地面坐标系下发生的朝向角预测量。5.根据权利要求4所述的一种路侧激光雷达的车辆检测和轨迹预测方法，其特征在于，所述的目标检测结果包括检测边界框、检测的位置、检测的朝向角和检测的尺寸，所述的目标预测轨迹包括预测边界框、预测的位置、预测的朝向角和预测的尺寸。6.根据权利要求1所述的一种路侧激光雷达的车辆检测和轨迹预测方法，其特征在于，所述的步骤2中，对多任务深度神经网络模型进行预训练的过程具体包括以下哪些步骤：步骤201：对用以训练的公开数据集中的点云进行预...

【专利技术属性】
技术研发人员：王亚飞，周志松，张智骋，陈炜邦，
申请(专利权)人：上海交通大学，
类型：发明
国别省市：