基于雷视融合的目标跟踪方法、装置、存储介质及设备制造方法及图纸

技术编号:43737387 阅读:30 留言:0更新日期:2024-12-20 12:59
本申请公开了一种基于雷视融合的目标跟踪方法、装置、存储介质及设备,该方法包括:获取交通路口的多个视频设备的视频数据和多个雷达设备的雷达数据,提取含有目标对象的目标视频帧和目标雷达帧,并获得目标视频像素坐标和目标经纬度信息,进行平面坐标转换得到大地平面坐标,并根据目标视频帧和目标雷达帧的时间戳以及大地平面视频坐标和大地平面雷达坐标得到时间同步帧数据集,并将相同时刻的目标视频帧的目标对象坐标和目标雷达帧目标对象坐标融合,得到跨设备雷视融合结果,最后将不同时刻的跨设备雷视融合结果中的各目标对象的跨设备融合坐标匹配到对应的轨迹跟踪器中得到各目标对象的跟踪轨迹,以实现准确高效的多传感器目标融合。

【技术实现步骤摘要】

本申请属于图像处理,尤其涉及一种基于雷视融合的目标跟踪方法、装置、存储介质及设备


技术介绍

1、在智能交通应用场景中,单目相机和毫米波雷达是目标检测常用的传感器。单目相机能够获得目标纹理信息,但是易受光照天气影响,且感知距离近,毫米波雷达能够测量运动目标速度和空间位置,对于雨雾等恶劣天气具有较好的适应性,但是无法感知静止目标。当前大多数跨场景目标跟踪算法仅使用视频数据,存在目标检测精度低,无法适应恶劣天气等复杂场景的问题。


技术实现思路

1、本申请旨在至少解决相关技术中存在的技术问题之一。为此,本申请提出一种基于雷视融合的目标跟踪方法、装置、存储介质及设备,能够提高目标对象的检测精度。

2、第一方面,本申请提供了一种基于雷视融合的目标跟踪方法,该方法包括:

3、获取交通路口的多个视频设备的视频数据和多个雷达设备的雷达数据,每个所述视频设备对应有多帧视频数据,每个所述雷达设备对应有多帧雷达数据;

4、从所述多帧视频数据中提取含有目标对象的目标视频帧,并从各所述目标视频帧中提本文档来自技高网...

【技术保护点】

1.一种基于雷视融合的目标跟踪方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述从各所述目标视频帧中提取各所述目标对象对应的目标视频像素坐标,包括:

3.根据权利要求2所述的方法,其特征在于,所述根据目标视频帧和所述目标雷达帧的时间戳以及所述大地平面视频坐标和所述大地平面雷达坐标得到时间同步帧数据集,包括:

4.根据权利要求3所述的方法,其特征在于,所述将不同视频设备的相同时刻的同步目标视频帧中的目标对象进行融合,得到融合后的单源目标视频帧结果,包括:

5.根据权利要求4所述的方法,其特征在于,所述将不同所述雷...

【技术特征摘要】

1.一种基于雷视融合的目标跟踪方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述从各所述目标视频帧中提取各所述目标对象对应的目标视频像素坐标,包括:

3.根据权利要求2所述的方法,其特征在于,所述根据目标视频帧和所述目标雷达帧的时间戳以及所述大地平面视频坐标和所述大地平面雷达坐标得到时间同步帧数据集,包括:

4.根据权利要求3所述的方法,其特征在于,所述将不同视频设备的相同时刻的同步目标视频帧中的目标对象进行融合,得到融合后的单源目标视频帧结果,包括:

5.根据权利要求4所述的方法,其特征在于,所述将不同所述雷达设备的相同时刻的同步雷达帧中的目标对象进行融合,得到融合后的单源目标雷达帧结果,包括:

6.根据权利要求5所述的方...

【专利技术属性】
技术研发人员:唐心瑶徐天适黄宇恒孙峥峥岳许要
申请(专利权)人:广电运通集团股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1