基于车载视觉与BCM控制的交通灯预警系统及方法技术方案

本发明专利技术公开了一种基于车载视觉与BCM控制的交通灯预警系统及方法，其中，预警系统包括影像采集模块、车载视觉模块、BCM和预警系统；车载视觉模块进行特征提取、交通灯检测和导向标志检测，通过判断模块比对交通灯检测数据信息和导向标志检测信息是否一致，BCM生成预警指令，预警系统接收预警指令进行预警；本发明专利技术在驾驶过程中不需要进行实时连接互联网，无需后期的消费和维护，减少使用成本，同时解决由于GPS位置和信息的误差所导致的误检问题；给予用户更佳的驾驶体验，采用BCM控制的方式可以给予驾驶人员更实时和多元化的提示，给予用户实时的、准确的提醒，为用户提供精准的决策辅助，提升智能驾驶的使用体验。提升智能驾驶的使用体验。提升智能驾驶的使用体验。

【技术实现步骤摘要】
基于车载视觉与BCM控制的交通灯预警系统及方法


[0001]本专利技术属于目标检测
，尤其涉及一种基于车载视觉与BCM控制的交通灯预警系统及方法。

技术介绍

[0002]智能驾驶和无人驾驶已经逐步成为当今汽车发展的主要研究方向。对于交通灯的识别一直是智能驾驶研究中至关重要的一环，交通灯预警可以极大程度地解决司机疲劳驾驶并避免其分散精力，并且为色盲和色弱驾驶者提供的辅助决策。
[0003]当前的交通灯识别方案主要包含基于周边车辆状态感知、基于GPS导航、基于车路通信及基于车载视觉。基于极度学习和BCM控制通过融合车载视觉方案及车身电子模块能够为用户提供成本更低、更加稳定、同时效果更佳的体验。

技术实现思路

[0004]本专利技术的目的在于提供一种基于车载视觉与BCM控制的交通灯预警系统及方法，以解决上述
技术介绍
中提出的问题。
[0005]为实现上述目的，本专利技术提供如下技术方案：一种基于车载视觉与BCM控制的交通灯预警系统，其特征在于，包括：
[0006]影像采集模块，所述影像采集模块用于采集交通灯影像数据和导向标志影像数据；
[0007]车载视觉模块，所述车载视觉模块包括交通灯识别数据集、导向标志数据集、交通灯目标检测网络模块、导向标志检测网络模块和判断模块；
[0008]其中，将所述交通灯影像数据和交通灯识别数据集通过所述交通灯目标检测网络模块进行特征提取及交通灯检测，并生成交通灯检测数据信息；将所述导向标志影像数据和导向标志数据集通过导向标志检测网络模块进行导向标志检测，并生成导向标志检测信息；通过判断模块比对交通灯检测数据信息和导向标志检测信息是否一致，如果不一致则向BCM发送异常预警信息；
[0009]BCM，所述BCM接收所述异常预警信息，生成预警指令；
[0010]预警系统，所述预警系统接收所述预警指令，进行预警。
[0011]进一步地，制作所述交通灯识别数据集，所述交通灯识别数据集是将传统数据集、网络图片和交通灯影像数据相结合作为模型的训练集；制作所述导向标志数据集，所述导向标志数据集是将网络图片作为模型的训练集。
[0012]进一步地，所述BCM接收所述异常预警信息后，生成异常影像预警数据和异常语音预警数据。
[0013]进一步地，所述预警系统包括：
[0014]HUD，根据所述预警指令，所述BCM将所述异常影像预警数据发送至HUD，在HUD的显示屏幕上显示交通灯与导向标志不一致的预警影像；
[0015]语音模块，根据所述预警指令，所述BCM将所述异常语音预警数据发送至语音模块，语音模块播放交通灯与导向标志不一致的预警提示音。
[0016]进一步地，所述交通灯目标检测网络模块为YOLOV5模型。
[0017]进一步地，所述YOLOV5模型为单阶段目标检测网络模型，采用Focus+CSP结构，采用FPN+PAN进行特征提取用以融合不同尺度上图像特征，采用三个输出头以保证精准的回归和分类。
[0018]进一步地，所述导向标志检测网络模块为轻量化检测网络的SSD模型。
[0019]进一步地，所述SSD模型以VGG作为骨干网络，去掉了网络最后的全连接层，并替换为3
×
3卷积层和1
×
1卷积层。
[0020]进一步地，所述交通灯数据集和所述导向标志数据集均按3比1划分为训练集和测试集，并使用LabelImg对图像进行标注，所述交通灯数据集和所述导向标志数据集中的图片均为高清图像。
[0021]另一方面，提供了一种基于车载视觉与BCM控制的交通灯预警方法，应用上述任一项所述的一种基于车载视觉与BCM控制的交通灯预警系统，包括：
[0022]采集交通灯影像数据和导向标志影像数据；
[0023]制作所述交通灯识别数据集和导向标志数据集；
[0024]将所述交通灯影像数据和交通灯识别数据集通过所述交通灯目标检测网络模块进行特征提取及交通灯检测，并生成交通灯检测数据信息；
[0025]将所述导向标志影像数据和导向标志数据集通过导向标志检测网络模块进行导向标志检测，并生成导向标志检测信息；
[0026]比对交通灯检测数据信息和导向标志检测信息是否一致，如果不一致则向BCM发送异常预警信息；
[0027]BCM接收所述异常预警信息，生成预警指令；
[0028]将所述预警指令发送至预警系统，所述预警系统接收所述预警指令后进行预警。
[0029]与现有技术相比，本专利技术的有益效果是：本专利技术在驾驶过程中不需要进行实时连接互联网，无需后期的消费和维护，减少使用成本，同时解决由于GPS位置和信息的误差所导致的误检问题；给予用户更佳的驾驶体验，采用BCM控制的方式可以给予驾驶人员更实时和多元化的提示，给予用户实时的、准确的提醒，为用户提供精准的决策辅助，提升智能驾驶的使用体验。
附图说明
[0030]图1为本专利技术实施例中一种基于车载视觉与BCM控制的交通灯预警系统连接框图；
[0031]图2为本专利技术实施例中一种基于车载视觉与BCM控制的交通灯预警方法流程图；
[0032]图3为本专利技术实施例中YOLOV5模型和SSD模型检测流程示意图；
[0033]图4为本专利技术实施例中YOLOV5模型结构示意图；
[0034]图5为本专利技术实施例中SSD模型结构示意图；
[0035]图6为本专利技术实施例中交通灯数据集具体信息表。
具体实施方式
[0036]下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。
[0037]在本专利技术的描述中，除非另有说明，“多个”的含义是两个或两个以上；术语“上”、“下”、“左”、“右”、“内”、“外”、“前端”、“后端”、“头部”、“尾部”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本专利技术和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本专利技术的限制。此外，术语“第一”、“第二”、“第三”等仅用于描述目的，而不能理解为指示或暗示相对重要性。
[0038]在本专利技术的描述中，需要说明的是，除非另有明确的规定和限定，术语“相连”、“连接”应做广义理解，例如，可以是固定连接，也可以是可拆卸连接，或一体地连接；可以是机械连接，也可以是电连接；可以是直接相连，也可以通过中间媒介间接相连。对于本领域的普通技术人员而言，可以具体情况理解上述术语在本专利技术中的具体含义。
[0039]请参阅说明书附图，本专利技术提供一种技术方案：如图1和3所示，一种基于车载视觉与BCM控制的交通灯预警系统，其特征在于，包括：
[0040]影像采集模块，所述影像采集模本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于车载视觉与BCM控制的交通灯预警系统，其特征在于，包括：影像采集模块，所述影像采集模块用于采集交通灯影像数据和导向标志影像数据；车载视觉模块，所述车载视觉模块包括交通灯识别数据集、导向标志数据集、交通灯目标检测网络模块、导向标志检测网络模块和判断模块；其中，将所述交通灯影像数据和交通灯识别数据集通过所述交通灯目标检测网络模块进行特征提取及交通灯检测，并生成交通灯检测数据信息；将所述导向标志影像数据和导向标志数据集通过导向标志检测网络模块进行导向标志检测，并生成导向标志检测信息；通过判断模块比对交通灯检测数据信息和导向标志检测信息是否一致，如果不一致则向BCM发送异常预警信息；BCM，所述BCM接收所述异常预警信息，生成预警指令；预警系统，所述预警系统接收所述预警指令，进行预警。2.根据权利要求1所述的一种基于车载视觉与BCM控制的交通灯预警系统，其特征在于，制作所述交通灯识别数据集，所述交通灯识别数据集是将传统数据集、网络图片和交通灯影像数据相结合作为模型的训练集；制作所述导向标志数据集，所述导向标志数据集是将网络图片作为模型的训练集。3.根据权利要求1所述的一种基于车载视觉与BCM控制的交通灯预警系统，其特征在于，所述BCM接收所述异常预警信息后，生成异常影像预警数据和异常语音预警数据。4.根据权利要求3所述的一种基于车载视觉与BCM控制的交通灯预警系统，其特征在于，所述预警系统包括：HUD，根据所述预警指令，所述BCM将所述异常影像预警数据发送至HUD，在HUD的显示屏幕上显示交通灯与导向标志不一致的预警影像；语音模块，根据所述预警指令，所述BCM将所述异常语音预警数据发送至语音模块，语音模块播放交通灯与导向标志不一致的预警提示音。5.根据权利要求1所述的一种基于车载视觉与BCM控制的交通灯预警系统，其特征在于，所述交通灯目标检测网...

【专利技术属性】
技术研发人员：韩昊，赵文渤，王子军，魏佳勇，李志刚，孙福鑫，梁海洋，唐达，潘文涛，刘鑫瞳，
申请(专利权)人：一汽奔腾轿车有限公司，
类型：发明
国别省市：