当前位置: 首页 > 专利查询>长安大学专利>正文

多目标识别与跟踪方法、系统、设备和介质技术方案

技术编号:42205217 阅读:26 留言:0更新日期:2024-07-30 18:49
本发明专利技术属于多传感器多模态计算机视觉技术领域,涉及一种多目标识别与跟踪方法、系统、设备和介质。通过获取目标的二维特征,根据目标的二维特征对目标进行跟踪和关联,同时为目标绘制边界框,得到有分类标签框的二维图像;获取目标的三维点云信息和初始运动向量,对三维点云信息进行聚类并根据聚类结果分割成为不同的三维点集,计算三维点集的运动向量,预测目标的运动趋势,得到预测位置的三维点集,根据获取的三维点集和预测的三维点集得到目标的三维点云前视图,将三维点云前视图与二维图像进行空间关系匹配得到预测目标图像。本发明专利技术结合目标的二维特征和三维点云空间的运动向量对目标进行跟踪与验证,提高了目标识别与跟踪的鲁棒性与准确性。

【技术实现步骤摘要】

本专利技术属于多传感器多模态计算机视觉,涉及一种多目标识别与跟踪方法、系统、设备和介质


技术介绍

1、在自动驾驶领域,准确高效的目标识别与跟踪技术是至关重要的。自动驾驶汽车需要实时检测和跟踪道路上的车辆、行人、障碍物等目标,以确保行车安全和智能决策。尽管深度学习推动了目标识别与跟踪算法的飞速发展,但仍面临一些挑战,如遮挡、光照变化、目标形变等,可能导致识别和跟踪的错误或丢失。此外,单一传感器获取的信息有限,难以全面感知目标状态。

2、通过融合多种传感器(如视觉、3d激光雷达等)获取互补的目标信息,可以显著提高目标识别和跟踪的精度和鲁棒性。例如,视觉传感器提供目标的外观和语义信息,而激光雷达则能精确测量目标的位置和运动信息,多模态融合可最大限度地利用各传感器的优势,从而大幅提升目标识别和跟踪的准确性和鲁棒性。

3、然而,多模态融合也面临一些挑战,如时间同步、空间配准和异构数据融合等问题,进而影响多模态融合的自动驾驶系统的感知性能、决策准确性和安全性。


技术实现思路

1、为了克服上述现有本文档来自技高网...

【技术保护点】

1.多目标识别与跟踪方法,其特征在于,包括以下步骤:

2.根据权利要求1所述的多目标识别与跟踪方法,其特征在于,所述获取目标的二维特征,根据目标的二维特征对目标进行跟踪和关联,同时为目标绘制边界框,得到有分类标签框的二维图像,具体如下:

3.根据权利要求2所述的多目标识别与跟踪方法,其特征在于,所述使用YOLO目标检测算法检测输入图像或视频帧中的目标,具体如下:

4.根据权利要求2所述的多目标识别与跟踪方法,其特征在于,所述将目标的特征向量输入DeepOCSORT,利用DeepOCSORT的对目标进行跟踪和关联,具体如下:

<p>5.根据权利要求...

【技术特征摘要】

1.多目标识别与跟踪方法,其特征在于,包括以下步骤:

2.根据权利要求1所述的多目标识别与跟踪方法,其特征在于,所述获取目标的二维特征,根据目标的二维特征对目标进行跟踪和关联,同时为目标绘制边界框,得到有分类标签框的二维图像,具体如下:

3.根据权利要求2所述的多目标识别与跟踪方法,其特征在于,所述使用yolo目标检测算法检测输入图像或视频帧中的目标,具体如下:

4.根据权利要求2所述的多目标识别与跟踪方法,其特征在于,所述将目标的特征向量输入deepocsort,利用deepocsort的对目标进行跟踪和关联,具体如下:

5.根据权利要求1所述的多目标识别与跟踪方法,其特征在于,所述获取目标的三维点云信息和初始运动向量,对三维点云信息进行聚类并根据聚类结果分割成为不同的三维点集,具体如下:

6.根据权利要求1所述的多目标识别与跟踪方法,其特征在于,所述计算三维点...

【专利技术属性】
技术研发人员:任帅何骁石磊
申请(专利权)人:长安大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1