一种基于卷积神经网络的车牌去模糊识别方法技术

本发明专利技术公开了一种基于卷积神经网络的车牌去模糊识别方法，包括如下步骤：步骤一、去模糊训练样本采集；步骤二、训练车牌去模糊网络；步骤三、车牌识别训练样本采集；步骤五、把原始车牌数据输入训练好的去模糊网络，把输出图片输入车牌识别网络，实时的输出车牌属性内容。本发明专利技术方法中，通过上述各块功能的相互配合，各司其职，相互协作更高效地完成了本发明专利技术所述的任务，实现了快速有效地完成对车牌颜色、字符及类型的快速识别，在车牌分析的实践中获得了节约人力物力成本、显著提高准确性等良好效果。

【技术实现步骤摘要】
一种基于卷积神经网络的车牌去模糊识别方法
本专利技术涉及图像检测
，尤其涉及一种基于卷积神经网络的车牌去模糊识别方法。
技术介绍
车牌是一辆汽车独一无二的信息，因此，对车辆牌照的识别技术可以作为辨识一辆车最为有效的方法。随着ITS(智能交通系统)的高速发展，对车牌识别技术的研究也随之发展。从根本上讲，牌照识别应用了先进的图像处理，模式识别，人工智能技术来获取、处理、解释记录拍照的图像。目前，牌照识别技术已经广泛而成功的应用于高速公路的监测，电子收费，交通违规管理，安全停车管理，偷盗车辆辨识等重要领域。然而，现有车牌识别的大多数算法只能在受控条件下工作。例如，一些系统需要复杂的硬件来捕获高质量的图像，而其他系统则需要车辆缓慢地通过固定的门禁，甚至是完全停止。在一个在开放环境中准确检测车牌并识别是一项挑战性任务。困难在于字符模式的极端多样性，例如不同尺寸，字体和颜色，捕获视角引起的字符失真以及由不均匀的光线，遮挡或模糊引起的低质量图像。高度复杂的环境背景使问题变得更加复杂，特别像是商店、窗口、护栏、砖块等贴有文字信息的物体，通常会导致检测中的虚假警报。以前的车牌识别工作通常依赖于某些手工制作的图像特征，其捕获了牌照的某些形态，颜色或纹理属性。这些特征可能对图像噪声敏感，并且可能在复杂背景或不同光照条件下导致许多假阳性。为此提出一种基于卷积神经网络的车牌去模糊识别方法，以解决车牌难以识别的问题。
技术实现思路
本专利技术的目的是为了解决现有技术中车辆的车牌识别不准确的缺点，而提出的一种基于卷积神经网络的车牌去模糊识别方法。为了实现上述目的，本专利技术采用了如下技术方案：设计一种基于卷积神经网络的车牌去模糊识别方法，包括如下步骤：步骤一、去模糊训练样本采集：收集清晰的车牌数据，作为车牌去模糊训练部分的输出数据，手工制作模糊车牌数据，作为训练输入的数据；步骤二、训练车牌去模糊网络，输入数据为模糊车牌图像，输出清晰车牌图像；步骤三、车牌识别训练样本采集：标记车牌属性标签；步骤四、采用卷积神经网络、长短时记忆网络及CTC，进行车牌识别；步骤五、把原始车牌数据输入训练好的去模糊网络，把输出图片输入车牌识别网络，实时的输出车牌属性内容。优选的，深层卷积神经网络通过建立15convolution+ReLUlayers，完成车牌由模糊变清晰规律的学习，深层卷积神经网络包括图像特征提取网络、图像特征记忆网络及损失层。优选的，图像特征提取网络为VGG-16网络去掉最后的池化层和三层全连接层，再接一层防过拟合层、一层扁平层；图像特征记忆网络是通过双层的长短时记忆网络记忆车牌的特征；损失层是利用CTC损失函数，接在长短时记忆网络的最后一层，用于序列学习，优化序列。优选的，车牌属性标签包括：车牌颜色标签，车牌中的汉字标签、字母标签、数字标签。优选的，步骤一中制作模糊车牌数据的方法为：对训练的清晰车牌数据添加透视畸变，增加饱和度光照的噪声，添加自然环境的噪声，然后在随机选择车牌不定大小的区域，使用高斯模糊进行模糊处理。本专利技术提出的一种基于卷积神经网络的车牌去模糊识别方法，有益效果在于：1、本专利技术通过对车牌预先的去模糊处理，构建一个深层次的车牌识别网络，实现了同一网络多功能任务的实现。在提高了准确率的同时，避免了多网络多任务造成的人力、物力、精力的浪费。2、本专利技术的方法中主要应用了：基于卷积神经网络的图像特征提取网络、基于长短时记忆网络的图像特征记忆网络、以及优化序列的CTC层。3、基于卷积神经网络的图像特征提取网络，完成对车牌颜色、字符及类型的特征提取；通过长短时记忆网络完成对车牌车牌颜色、字符及类型特征的长久记忆；CTC损失函数可较好的优化序列的损失。4、本专利技术方法中，通过上述各块功能的相互配合，各司其职，相互协作更高效地完成了本专利技术所述的任务，实现了快速有效地完成对车牌颜色、字符及类型的快速识别，在车牌分析的实践中获得了节约人力物力成本、显著提高准确性等良好效果。附图说明图1为本专利技术的车牌字符及颜色特征提取卷积图。图2为本专利技术的车牌识别的标签对应表。图3为本专利技术的车牌颜色及字符识别完整网络图。图4为本专利技术的车牌去模糊训练的卷积神经网络图。具体实施方式下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。如图1-4，一种基于卷积神经网络的车牌去模糊识别方法，包括如下步骤：步骤一、去模糊样本采集：收集清晰的车牌数据，作为车牌去模糊训练部分的输出数据，手工制作模糊车牌数据，作为训练输入的数据。步骤二、训练车牌去模糊网络，网络结构如图4。输入数据为66×66的模糊车牌图像，输出为16×16的清晰车牌图像。主线网络为：15层的卷积神经网络层，15层的激活层，最后一层为线性linear层。步骤三、车牌识别训练样本采集：标记车牌颜色、车牌字符、车牌类型的属性标签。车牌颜色标签：0黄底黑字、1蓝底白字、2白底红“WJ”、黑字、3渐变绿色、4其他，如图2。车牌字符标签：具体见图2；车牌颜色对应车牌类型标签：{黄底黑字：大型民用汽车；蓝底白字：小型民用汽车；白底红“WJ”、黑字：武警专用汽车；渐变绿色：新能源汽车；其他：其他}，具体如图2。最终训练输入标签，如车牌鲁Q37205：{13,54,33,37,32,30,35,2}，前七个标签为车牌字符，最后一个标签为对应车牌的颜色。步骤四、采用卷积神经网络、长短时记忆网络及CTC，进行车牌颜色、字符及车牌类型的识别。其中：特征提取网络包括13层卷积层、3层归一化层、13层激活层、5层池化层，特征记忆网络为两层LSTM层及CTC损失层，结构图，如图1、图3。步骤五、把原始车牌数据输入训练好的去模糊网络，把输出图片输入车牌识别网络，实时的输出车牌颜色、字符及类型属性内容。其中，深层卷积神经网络通过建立15convolution+ReLUlayers，完成车牌由模糊变清晰规律的学习，深层卷积神经网络包括图像特征提取网络、图像特征记忆网络及损失层。图像特征提取网络为VGG-16网络去掉最后的池化层和三层全连接层，再接一层防过拟合层、一层扁平层；图像特征记忆网络是通过双层的长短时记忆网络记忆车牌的特征；损失层是利用CTC损失函数，接在长短时记忆网络的最后一层，用于序列学习，优化序列。其中，所述步骤一中制作模糊车牌数据的方法为：对训练的清晰车牌数据添加透视畸变，增加饱和度光照的噪声，添加自然环境的噪声，然后在随机选择车牌不定大小的区域，使用高斯模糊进行模糊处理。本专利技术通过对车牌预先的去模糊处理，构建一个深层次的车牌识别网络，实现了同一网络多功能任务的实现。在提高了准确率的同时，避免了多网络多任务造成的人力、物力、精力的浪费。本专利技术的方法中主要应用了：基于卷积神经网络的图像特征提取网络、基于长短时记忆网络的图像特征记忆网络、以及优化序列的CTC层。其中，基于卷积神经网络的图像特征提取网络，完成对车牌颜色、字符及类型的特征提取；通过长短时记忆网络完成对车牌车牌颜色、字符及类型特征的长久记忆；CTC损失函数可较好的优化序列的损失。本专利技术方法中，通过上述各块功能的相互配合，各司其职，相互协作更高效地完成了本专利技术所述的任务，实现了本文档来自技高网...

【技术保护点】
1.一种基于卷积神经网络的车牌去模糊识别方法，其特征在于：包括如下步骤：步骤一、去模糊训练样本采集：收集清晰的车牌数据，作为车牌去模糊训练部分的输出数据，手工制作模糊车牌数据，作为训练输入的数据；步骤二、训练车牌去模糊网络，输入数据为模糊车牌图像，输出清晰车牌图像；步骤三、车牌识别训练样本采集：标记车牌属性标签；步骤四、采用卷积神经网络、长短时记忆网络及CTC，进行车牌识别；步骤五、把原始车牌数据输入训练好的去模糊网络，把输出图片输入车牌识别网络，实时的输出车牌属性内容。

【技术特征摘要】
1.一种基于卷积神经网络的车牌去模糊识别方法，其特征在于：包括如下步骤：步骤一、去模糊训练样本采集：收集清晰的车牌数据，作为车牌去模糊训练部分的输出数据，手工制作模糊车牌数据，作为训练输入的数据；步骤二、训练车牌去模糊网络，输入数据为模糊车牌图像，输出清晰车牌图像；步骤三、车牌识别训练样本采集：标记车牌属性标签；步骤四、采用卷积神经网络、长短时记忆网络及CTC，进行车牌识别；步骤五、把原始车牌数据输入训练好的去模糊网络，把输出图片输入车牌识别网络，实时的输出车牌属性内容。2.根据权利要求1所述的一种基于卷积神经网络的车牌去模糊识别方法，其特征在于：所述深层卷积神经网络通过建立15convolution+ReLUlayers，完成车牌由模糊变清晰规律的学习，所述深层卷积神经网络包括图像特征提取网络、图像特征记忆网络及损失层。...

【专利技术属性】
技术研发人员：武传营，李凡平，石柱国，
申请(专利权)人：北京以萨技术股份有限公司，青岛以萨数据技术有限公司，
类型：发明
国别省市：北京,11