车牌识别方法和装置制造方法及图纸

一种车牌识别方法及装置，该方法包括：接收采集的图像序列；对所述图像序列进行车辆检测，获取车辆检测结果和RE

【技术实现步骤摘要】
车牌识别方法和装置


[0001]本专利技术涉及目标识别
，具体地涉及一种车牌识别方法和装置。

技术介绍

[0002]车牌识别在停车管理、道路交通等方面有着广泛的应用，包括车辆检测、车牌文字检测与矫正、车牌文字识别、车辆跟踪与信息融合等环节。
[0003]现有技术提供的一种车牌识别方法如图1所示，在进行车辆检测后，对每个车辆单独用RE
‑
ID(Re
‑
Identification，重识别)模型提取特征，然后通过Deep Sort进行跟踪，对包含车辆的图像进行车牌检测和车牌框四个角点的回归，用四个角点的位置做投影变换与对齐后，对车牌缩放到94x24像素的大小做LPRNet(License Plate Recognition Network，车牌识别网络)的识别。
[0004]但该方法还存在以下缺点：
[0005]1.随着画面中车辆的增多，提取RE
‑
ID特征的耗时线性增加，跟踪速度慢，无法处理快速车牌识别的场景。
[0006]2.车牌四个角点的回归，由于车牌本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种车牌识别方法，其特征在于，所述方法包括：接收采集的图像序列；对所述图像序列进行车辆检测，获取车辆检测结果和RE
‑
ID特征；根据所述车辆检测结果和RE
‑
ID特征进行车辆跟踪，得到车辆的跟踪轨迹；基于所述跟踪轨迹对所述车辆进行车牌检测，得到车牌文字；对所述车牌文字进行识别，得到所述车辆的当前车牌识别结果；将所述车辆的当前车牌识别结果与所述车辆的历史车牌识别结果进行融合，得到融合结果；判断所述融合结果是否达到设定要求；如果是，则将所述融合结果作为最终车牌识别结果输出；否则，继续对所述车辆进行车牌检测。2.根据权利要求1所述的方法，其特征在于，所述将所述车辆的当前车牌识别结果与所述车辆的历史车牌识别结果进行融合，得到融合结果包括：确定所述当前车牌识别结果的考核指标是否优于所述历史车牌识别结果；如果是，则将所述当前车牌识别结果作为融合结果，并更新历史车牌识别结果为所述当前车牌识别结果；否则，将所述历史车牌识别结果作为融合结果。3.根据权利要求2所述的方法，其特征在于，所述车牌识别结果的考核指标包括以下任意一种或多种：车牌检测文字置信度、车牌识别结果置信度、车牌规则校验结果。4.根据权利要求1至3任一项所述的方法，其特征在于，所述对所述图像序列进行车辆检测，获取车辆检测结果和RE
‑
ID特征包括：将所述图像序列输入预先训练的车辆检测器中，根据所述车辆检测器的输出得到车辆检测结果和RE
‑
ID特征；所述车辆检测器采用轻量级神经网络作为骨干网络，在所述骨干网络的快速目标检测层中添加有RE
‑
ID特征提取层。5.根据权利要求1至3任一项所述的方法，其特征在于，所述根据所述车辆检测结果和RE
‑
ID特征进行车辆跟踪，得到车辆的跟踪轨迹包括：利用Deep Sort算法及所述车辆检测结果和RE
‑
ID特征进行车辆跟踪，并且采用以下任意一种或多种处理方式：如果图像采集场景为特定场景，则使用检测框与跟踪器预测框之间的欧氏距离描述运动信息的关联度，否则使用检测框与跟踪器预测框之间的马氏距离描述运动信息的关联度；所述特定场景为车辆单向运动的场景；在级联匹配时，如果当前帧车辆框对应的IOU大于设定的IOU阈值，则延用上一帧对应的车辆的RE
‑
ID特征作为当前帧对应所述车辆的RE
‑
ID特征；如果级联匹配失败，则停止新的IOU指派；车辆的轨迹消失后，设定一定时限的生命周期，在所述生命周期内继续对所述车辆进行车辆跟踪。6.根据权利要求1至3任一项所述的方法，其特征在于，所述方法还包括：预先训练车牌文字检测矫正模型，具体包括：采用轻量级神经网络作为骨干网络；
采集大量车辆图像，并对所述车辆图像中单排车牌和堆叠车牌进行标注；截取所述车辆图像中的车牌区域，得到车牌图像；对所述车牌图像进行缩放处理，得到设定尺寸的训练样本图像；将所述训练样本图像及对应的车牌标注信息作为训练数据，训练得到基于所述骨干网络的车牌文字检测矫正模型；所述基于所述跟踪轨迹对所述车辆进行车牌检测包括：将所述跟踪轨迹上的各图像输入所述车牌文字检测矫正网络，根据所述车牌文字检测矫正网络的输出得到车牌文字及其置信度。7.根据权利要求6所述的方法，其特征在于，所述方法还包括：预先训练车牌识别模型，具体包括：将输入特征维度为128x32的LPRNet模型作为车牌识别模型的网络结构；采集大量原始车牌图像，并对所述原始车牌图像进行扩展，得到扩展车牌图像；将所述原始车牌图像及所述扩展车牌图像作为训练样本集；利用所述训练样本集训练得到车牌识别模型；所述对所述车牌文字进行识别，得到所述车辆的当前车牌识别结果包括：将所述车牌文字输入所述车牌识别模型，根据所述车牌识别模型的输出得到所述车辆的当前车牌识别结果及其置信度。8.根据权利要求7所述的方法，其特征在于，所述对所述原始车牌图像进行扩展包括以下任意一种或多种：对所述原始车牌图像随机添加模糊处理；对所述原始车牌图像随机添加噪声；对所述原始车牌图像随机调整色彩饱和度、亮度、对比度。9.根据权利要求7所述的方法，其特征在于，所述对所述车牌文字进行识别，得到所述车辆的当前车牌识别结果还包括：对所述车辆的当前车牌识别结果进行过滤，过滤掉重复的识别结果，以及置信度低于设定值的文字。10.一种车牌识别装置，其特征在于，所述装置包括：接收模块，用于接收采集的图像序列；车辆检测模块，用于对所述图像序列进行车辆检测，获取车辆检测结果和RE
‑
ID特征；轨迹跟踪模块，用于根据所述车辆检测结果和RE
‑
ID特征进行车辆跟踪，得到车辆的跟踪轨迹；车牌检测模块，用于基...

【专利技术属性】
技术研发人员：胡伯承，
申请(专利权)人：展讯通信上海有限公司，
类型：发明
国别省市：