车牌属性识别方法及装置、电子设备和存储介质制造方法及图纸

本公开涉及一种车牌属性识别方法及装置、电子设备和存储介质，所述方法包括：获取待处理的车辆图像；对车辆图像中的车牌图像进行特征提取，得到车牌图像的车牌特征图；按照与车牌的属性类型对应的识别方式，对车牌特征图进行属性识别，得到车牌图像中车牌的属性识别结果。本公开实施例可实现提高不同车牌属性的识别精度。

【技术实现步骤摘要】
车牌属性识别方法及装置、电子设备和存储介质
本公开涉及计算机
，尤其涉及一种车牌属性识别方法及装置、电子设备和存储介质。
技术介绍
随着车辆的普及，智能交通监控系统应用的越来越广泛，比如：应用于卡口的车辆监控和检索、公安刑侦调查、交警指挥调度等场景。其中，车牌的属性检测是智能交通监控系统的关键环节，该环节能够对采集到的车辆图像中的车牌进行属性识别，得到车牌类型、车牌号码、车牌颜色等信息。相关技术中，多任务卷积神经网络(Multi-TaskConvolutionNeuralNet，MTCNN)常用于解决车牌属性的识别问题，这种方法基于多分支网络共享特征，可简单有效地对车牌的各个独立属性进行识别。但不同属性的识别难度不同，针对多个分支网络，基于同样的共享特征进行识别，可能会出现由于特征不明显而造成分支网络的识别结果不精确的问题。
技术实现思路
本公开提出了一种车牌属性识别技术方案。根据本公开的一方面，提供了一种车牌属性识别方法，包括：获取待处理的车辆图像；对所述车辆图像中的车牌图像进行特征提取，得到所述车牌图像的车牌特征图；按照与车牌的属性类型对应的识别方式，对所述车牌特征图进行属性识别，得到所述车牌图像中车牌的属性识别结果。在一种可能的实现方式中，所述属性类型包括车牌类型，所述按照与所述车牌的属性类型对应的识别方式，对所述车牌特征图进行属性识别，得到所述车牌图像中车牌的属性识别结果，包括：根据预设的尺寸比例，对所述车牌特征图进行分割，得到分割后的至少两个局部特征图；对所述至少两个局部特征图进行加权及融合处理，得到处理后的融合特征图；对所述融合特征图进行分类处理，确定所述车牌图像中车牌的车牌类型，所述属性识别结果包括所述车牌图像中车牌的车牌类型。在一种可能的实现方式中，所述对所述至少两个局部特征图进行加权及融合处理，得到处理后的融合特征图，包括：对所述至少两个局部特征图进行卷积处理，得到每一所述局部特征图的权重图，所述权重图的尺度与所述局部特征图的尺度相同；将所述权重图与对应的局部特征图相乘，得到至少两个注意力图；对所述至少两个注意力图进行加权及融合处理，得到所述融合特征图。在一种可能的实现方式中，所述对所述至少两个注意力图进行加权及融合处理，得到所述融合特征图，包括：根据所述至少两个局部特征图相对于所述车牌特征图的位置，确定所述至少两个局部特征图的权重值；基于所述权重值，对所述至少两个注意力图进行加权处理，得到至少两个加权后的注意力图；对所述至少两个加权后的注意力图进行融合处理，得到所述融合特征图。在一种可能的实现方式中，所述属性类型包括车牌颜色，所述按照与所述车牌的属性类型对应的识别方式，对所述车牌特征图进行属性识别，得到所述车牌图像中车牌的属性识别结果，包括：对所述车牌特征图进行分类处理，确定所述车牌图像中车牌的车牌颜色，所述属性识别结果包括所述车牌图像中车牌的车牌颜色。在一种可能的实现方式中，所述属性类型包括车牌号，所述按照与所述车牌的属性类型对应的识别方式，对所述车牌特征图进行属性识别，得到所述车牌图像中车牌的属性识别结果，包括：对所述车牌特征图进行文本识别，得到车牌图像中车牌的车牌号，所述属性识别结果包括所述车牌图像中车牌的车牌号。在一种可能的实现方式中，所述方法通过属性识别网络对所述车辆图像中的车牌图像进行特征提取，得到所述车牌图像的车牌特征图，以及按照与车牌的属性类型对应的识别方式，对所述车牌特征图进行属性识别，得到所述车牌图像中车牌的属性识别结果，所述方法还包括：将已标注的样本图像输入至所述属性识别网络中，得到所述属性识别网络的输出结果；根据所述输出结果以及所述样本图像的标注信息，确定所述属性识别的网络损失；根据所述属性识别网络的网络损失，训练所述属性识别网络。在一种可能的实现方式中，所述属性识别网络包括主干网络以及多个分支网络，所述主干网络用于对所述车辆图像中的车牌图像进行特征提取，得到所述车牌图像的车牌特征图，所述多个分支网络用于按照与车牌的属性类型对应的识别方式，对所述车牌特征图进行属性识别，得到所述车牌图像中车牌的属性识别结果；其中，所述属性识别网络的网络损失包括：所述多个分支网络中至少一个分支网络对应的子网络损失；所述根据所述属性识别网络的网络损失，训练所述属性识别网络，包括：在所述多个分支网络中至少一个分支网络的子网络损失已收敛的情况下，根据未收敛的分支网络的子网络损失，更新所述未收敛的分支网络的网络参数。根据本公开的一方面，提供了一种车牌属性识别装置，包括：获取模块，用于获取待处理的车辆图像；提取模块，用于对所述车辆图像中的车牌图像进行特征提取，得到所述车牌图像的车牌特征图；识别模块，用于按照与车牌的属性类型对应的识别方式，对所述车牌特征图进行属性识别，得到所述车牌图像中车牌的属性识别结果。在一种可能的实现方式中，所述属性类型包括车牌类型，所述识别模块，包括：分割子模块，用于根据预设的尺寸比例，对所述车牌特征图进行分割，得到分割后的至少两个局部特征图；融合子模块，用于对所述至少两个局部特征图进行加权及融合处理，得到处理后的融合特征图；分类子模块，用于对所述融合特征图进行分类处理，确定所述车牌图像中车牌的车牌类型，所述属性识别结果包括所述车牌图像中车牌的车牌类型。在一种可能的实现方式中，所述对所述至少两个局部特征图进行加权及融合处理，得到处理后的融合特征图，包括：对所述至少两个局部特征图进行卷积处理，得到每一所述局部特征图的权重图，所述权重图的尺度与所述局部特征图的尺度相同；将所述权重图与对应的局部特征图相乘，得到至少两个注意力图；对所述至少两个注意力图进行加权及融合处理，得到所述融合特征图。在一种可能的实现方式中，所述对所述至少两个注意力图进行加权及融合处理，得到所述融合特征图，包括：根据所述至少两个局部特征图相对于所述车牌特征图的位置，确定所述至少两个局部特征图的权重值；基于所述权重值，对所述至少两个注意力图进行加权处理，得到至少两个加权后的注意力图；对所述至少两个加权后的注意力图进行融合处理，得到所述融合特征图。在一种可能的实现方式中，所述属性类型包括车牌颜色，所述识别模块，包括：颜色识别子模块，用于对所述车牌特征图进行分类处理，确定所述车牌图像中车牌的车牌颜色，所述属性识别结果包括所述车牌图像中车牌的车牌颜色。在一种可能的实现方式中，所述属性类型包括车牌号，所述识别模块，包括：文本识别子模块，用于对所述车牌特征图进行文本识别，得到车牌图像中车牌的车牌号，所述属性识别结果包括所述车牌图像中车牌的车牌号。在一种可能的实现方式中，所述装置通过属性识别网络对所述车辆图像中的车牌图像进行特征提取，得到所述车牌图像的车牌特征图，以及按照与车牌的属性类型对应的识别方式，对所述车牌特征图进行属性识别，得到所述车牌图像中车牌的属性识别结果，所述装置还包括：输入模块，用于将已标注的样本图像输入至所述属性识别网络中，得到所述属性识别网络的输出结果；损失确定模块，用于根据所述输出结果以及本文档来自技高网...

【技术保护点】
1.一种车牌属性识别方法，其特征在于，包括：/n获取待处理的车辆图像；/n对所述车辆图像中的车牌图像进行特征提取，得到所述车牌图像的车牌特征图；/n按照与车牌的属性类型对应的识别方式，对所述车牌特征图进行属性识别，得到所述车牌图像中车牌的属性识别结果。/n

【技术特征摘要】
1.一种车牌属性识别方法，其特征在于，包括：
获取待处理的车辆图像；
对所述车辆图像中的车牌图像进行特征提取，得到所述车牌图像的车牌特征图；
按照与车牌的属性类型对应的识别方式，对所述车牌特征图进行属性识别，得到所述车牌图像中车牌的属性识别结果。


2.根据权利要求1所述的方法，其特征在于，所述属性类型包括车牌类型，所述按照与所述车牌的属性类型对应的识别方式，对所述车牌特征图进行属性识别，得到所述车牌图像中车牌的属性识别结果，包括：
根据预设的尺寸比例，对所述车牌特征图进行分割，得到分割后的至少两个局部特征图；
对所述至少两个局部特征图进行加权及融合处理，得到处理后的融合特征图；
对所述融合特征图进行分类处理，确定所述车牌图像中车牌的车牌类型，所述属性识别结果包括所述车牌图像中车牌的车牌类型。


3.根据权利要求2所述的方法，其特征在于，所述对所述至少两个局部特征图进行加权及融合处理，得到处理后的融合特征图，包括：
对所述至少两个局部特征图进行卷积处理，得到每一所述局部特征图的权重图，所述权重图的尺度与所述局部特征图的尺度相同；
将所述权重图与对应的局部特征图相乘，得到至少两个注意力图；
对所述至少两个注意力图进行加权及融合处理，得到所述融合特征图。


4.根据权利要求3所述的方法，其特征在于，所述对所述至少两个注意力图进行加权及融合处理，得到所述融合特征图，包括：
根据所述至少两个局部特征图相对于所述车牌特征图的位置，确定所述至少两个局部特征图的权重值；
基于所述权重值，对所述至少两个注意力图进行加权处理，得到至少两个加权后的注意力图；
对所述至少两个加权后的注意力图进行融合处理，得到所述融合特征图。


5.根据权利要求1所述的方法，其特征在于，所述属性类型包括车牌颜色，所述按照与所述车牌的属性类型对应的识别方式，对所述车牌特征图进行属性识别，得到所述车牌图像中车牌的属性识别结果，包括：
对所述车牌特征图进行分类处理，确定所述车牌图像中车牌的车牌颜色，所述属性识别结果包括所述车牌图像中车牌的车牌颜色。


6.根据权利要求1所述的方法，其特征在于，所述属性类型包括车牌号，所述按照与所述车牌的属性类型对应的识别方式，对所述车牌特...

【专利技术属性】
技术研发人员：杨钰鑫，洪依君，朱铖恺，武伟，
申请(专利权)人：浙江商汤科技开发有限公司，
类型：发明
国别省市：浙江;33