基于AR眼镜的多源数据快速分类的驾驶预警系统技术方案

技术编号:42508733 阅读:23 留言:0更新日期:2024-08-22 14:24
本发明专利技术属于目标分类技术领域,公开了一种基于AR眼镜的多源数据快速分类的驾驶预警系统,包括汽车车载传感器、带有GPU的小电脑和AR眼镜;所述汽车车载传感器用于获取外部环境的图像数据I1、外部环境的点云数据C1、以及感知自身的姿态;带有GPU的小电脑读取所述图像数据I1和点云数据C1,并结合姿态,对所述图像数据I1和点云数据C1中的危险目标进行识别,并发出显示信息给AR眼镜,本发明专利技术具有对计算资源要求少、具有合理鲁棒性的对危险目标进行快速分类的特点;采用了基于本地相关坐标的坐标系变换的方法,解决了汽车本身和危险目标的位姿变化导致的PointNet++方法鲁棒性较差的问题。

【技术实现步骤摘要】

专利
本专利技术属于目标分类,尤其涉及基于ar眼镜的多源数据快速分类的驾驶预警系统。具体是在驾驶者进行驾驶的时候,汽车自带的激光、相机传感器对外进行观察时,能够快速对周围危险目标进行分类,继而使用ar眼镜提示的系统。


技术介绍

0、专利技术背景

1、在驾驶者进行驾驶的时候,有时其注意力会集中在其关心的区域,注意不到周围的变化。例如在小区行驶时,注意不到道路旁一些的动态物体,例如小孩、猫、狗、车等,这些动态物体很可能冲到道路中间,影响驾车安全。此刻需要对驾驶员进行提示,小心周围的这些动态物体。

2、现有的对驾驶员进行驾驶过程中的提示方案主要有:汽车大屏、声音提示、ar眼镜。其中汽车大屏需要驾驶员不断低头观看大屏,影响安全;声音提示反应慢、不直接,ar眼镜是直接戴在驾驶员头上。比较而言,ar眼镜是比较合适的方案。

3、现有的ar眼镜虽然自身没有激光雷达、计算力差,但是可以从现有的智能汽车上读取车载相机的视频数据、激光雷达的点云数据、imu、gps等数据。其中,智能汽车上的激光点云数据数据量大,由于ar眼镜自身计算力差,本文档来自技高网...

【技术保护点】

1.基于AR眼镜的多源数据快速分类的驾驶预警系统,包括汽车车载传感器、带有GPU的电脑和AR眼镜;

2.根据权利要求1所述基于AR眼镜的多源数据快速分类的驾驶预警系统,其特征在于,所述带有GPU的电脑中包括基于图像数据I1的识别模块、基于点云数据C1的识别模块和分类结果融合模块;

3.根据权利要求2所述基于AR眼镜的多源数据快速分类的驾驶预警系统,其特征在于,所述基于图像数据识别模块用于识别出图像I1中的危险目标类别,得到含有危险目标分类结果的掩码模板YM1,具体过程如下:

4.根据权利要求2所述基于AR眼镜的多源数据快速分类的驾驶预警系统,其特征在于...

【技术特征摘要】

1.基于ar眼镜的多源数据快速分类的驾驶预警系统,包括汽车车载传感器、带有gpu的电脑和ar眼镜;

2.根据权利要求1所述基于ar眼镜的多源数据快速分类的驾驶预警系统,其特征在于,所述带有gpu的电脑中包括基于图像数据i1的识别模块、基于点云数据c1的识别模块和分类结果融合模块;

3.根据权利要求2所述基于ar眼镜的多源数据快速分类的驾驶预警系统,其特征在于,所述基于图像数据识别模块用于识别出图像i1中的危险目标类别,得到含有危险目标分类结果的掩码模板ym1,具体过程如下:

4.根据权利要求2所述基于ar眼镜的多源数据快速分类的驾驶预警系统,其特征在于,所述得到点云数据中关注区域的掩码模板ym3的过程如下:

5.根据权利要求2所述基于ar眼镜的多源数据快速分类的驾驶预警系统,其特征...

【专利技术属性】
技术研发人员:袁博沈玉龙陈森霖胡凯
申请(专利权)人:南京栢拓视觉科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1