一种基于注意力机制的改进手写体板坯号识别方法技术

本发明专利技术属于钢铁企业生产过程自动控制技术领域，提出一种基于注意力机制的改进手写体板坯号识别方法，结合复杂生产场景对手写体板坯号图像数据进行预处理，保证模型输入图片质量；利用残差神经网络模块提取图片特征；双向长短期记忆网络提取基于图像的序列特征；最后基于注意力机制捕获序列内的信息流，对每个字符的特征进行整合形成文本特征向量以预测输出序列。经过现场测试，实现钢板表面手写板号识别任务准确率达到93.49％，结果表明算法可行有效，满足实际生产需求。满足实际生产需求。满足实际生产需求。

【技术实现步骤摘要】
一种基于注意力机制的改进手写体板坯号识别方法


[0001]本专利技术涉及钢铁企业生产过程自动控制
，尤其涉及一种基于注意力机制的改进手写体板坯号识别方法。

技术介绍

[0002]生产过程中，钢板厂会给每块钢板标注一串字符作为其唯一编号，即板坯号。该编号反映了钢板的制造工艺、材质、生产环节、制造用途等信息，在钢板质量溯源和库存管理方面起到非常重要的作用。
[0003]目前，较多的国内钢铁企业生产厂仍然使用在钢材表面进行手写板坯号的方式对钢板进行编码。经测试，目前暂无有效的手写体板坯号智能识别方法。以“Shi B,Bai X,Yao C.An End
‑
to
‑
End Trainable Neural Network for Image
‑
Based Sequence Recognition and Its Application to Scene Text Recognition[J].IEEE Transactions on Pattern Analysis&M本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于注意力机制的改进手写体板坯号识别方法，其特征在于，包括以下步骤：步骤1、对钢板板坯在辊道上行进的视频流过滤，得到手写体板坯号图像；步骤2、对步骤1所述手写体板坯号图像进行预处理，得到训练集、验证集及测试集；步骤3、基于恒等映射，对预处理后的手写体板坯号图像进行特征提取得到特征图组；步骤4、对步骤3所得特征图组进行序列化特征计算，输出序列权重，同时对特征图组映射得到序列化的特征向量，作为序列向量；步骤5、基于注意力机制设计特征解码器，利用该特征解码器计算联合概率，得到序列向量与已知字典的内容匹配度，输出预测的字符序列；步骤6、重复步骤3至步骤5，迭代得到预测模型，使用预测模型进行自主迭代标注；使用自主迭代标注结果对训练集进行扩充，并更新预测模型得到更新后的预测模型；步骤7、输入待识别样本，根据步骤6所得更新后的预测模型得到实际输出结果。2.根据权利要求1所述的基于注意力机制的改进手写体板坯号识别方法，其特征在于，所述步骤1的具体方法为：步骤1.1：视频流相机架设在距离辊道7000
‑
8000mm水平位置、8000
‑
9000mm高度位置上，俯视视野长度不小于26000mm；步骤1.2：基于帧间差分法构建过滤器，比对连续帧间差异性得到含有手写体板坯号图像。3.根据权利要求1所述的基于注意力机制的改进手写体板坯号识别方法，其特征在于，所述步骤2的具体方法为：基于概率霍夫变换提取手写体板坯号图像的直线残缺部分、噪声部分以及其它共存的非直线结构部分，得到钢板下边缘与两侧边缘轮廓，输出为一次处理图像；对一次处理图像进行透视变换矫正，转换为俯视图，并进行像素尺寸对应，得到二次处理图像；然后利用高斯导数对边缘进行提取，基于最大化类间方差对图像前景进行提取。4.根据权利要求2或3所述的基于注意力机制的改进手写体板坯号识别方法，其特征在于，所述步骤3中，基于恒等映射，提取特征图并构建特征图组FS，具体方法为：将训练集、验证集、测试集按照7:2:1划分；通过具有跨层连接结构的残差神经网络模块进行恒等映射，其同时提取来自训练集中的图像，从而获得其中连续文本区域的多种属性并构成不同的特征图，包括文本偏移量TDC、边界偏移量EDC、中心偏离CDC值、序列区域特征矩阵SRE；将多种特征图进行组合生成特征图组FS，分别用于描述手写体板坯号图像中像素点的中轴偏移距离、前景文本中水平与垂直边界到中心点的偏移、文本中心点与区域中心的偏离值以及序列区域的局部特征抽取。5.根据权利要求4所述的基于注意力机制的改进手写体板坯号识别方法，其特征在于，所述具有跨层连接结构的残差神经网络模块包括多种卷积模块、池化模块...

【专利技术属性】
技术研发人员：王雪飞，王昭东，张田，
申请(专利权)人：沈阳建筑大学，
类型：发明
国别省市：