食品包装生产日期识别方法、装置及存储介质制造方法及图纸

本发明专利技术公开了食品包装生产日期识别方法、装置及存储介质，其中方法包括：输入包含生产日期的原始图像；提取原始图像的第一特征图；去模糊处理得到清晰图像；提取清晰图像的第二特征图；特征融合得到融合特征图；倾斜文本校正处理得到角度校正图像；提取校正特征图；将融合特征图和校正特征图拼接得到拼接特征图；对拼接特征图进行场景文本识别处理得到识别结果。对包含生产日期的原始图像进行去模糊处理和倾斜文本校正处理，减少干扰；以及对不同的特征图进行融合或拼接，使提取的特征图不失真，从而提高生产日期的识别准确率。

Food packaging production date identification method, device and storage medium

【技术实现步骤摘要】
食品包装生产日期识别方法、装置及存储介质
本专利技术涉及图像识别领域，特别是食品包装生产日期识别方法、装置及存储介质。
技术介绍
食品包装生产日期识别对于食品生产安全至关重要。过往通过工人人眼检测，检测效率慢且工人容易疲劳并产生错误。由于生产日期识别的背景复杂，变化多样，极大增加了场景文本识别的难度。首先生产日期识别是在食品在传输带上运输的过程中进行的，此时拍摄的图像容易因运动产生模糊；另外食品包装袋上的生产日期由于印刷以及其他干扰，会导致出现不同程度的印刷倾斜。传统的场景文本识别一般需要经过边缘检测，膨胀腐蚀和联通区域检测三个过程，但对拥有复杂背景的文本的检测识别效果差，局限于识别较为简单背景的文本。
技术实现思路
本专利技术的目的在于至少解决现有技术中存在的技术问题之一，提供食品包装生产日期识别方法、装置及存储介质。本专利技术解决其问题所采用的技术方案是：本专利技术的第一方面，食品包装生产日期识别方法，包括以下步骤：输入包含生产日期的原始图像；提取所述原始图像的第一特征图；对所述原始图像进行去模糊处理得到清晰图像；提取所述清晰图像的第二特征图；将所述第一特征图与所述第二特征图进行特征融合得到融合特征图；将所述第二特征图进行倾斜文本校正处理得到角度校正图像；提取所述角度校正图像的校正特征图；将所述融合特征图和所述校正特征图拼接得到拼接特征图；对所述拼接特征图进行场景文本识别处理得到识别结果。根据本专利技术的第一方面，食品包装生产日期识别方法，还包括以下步骤：通过整体损失函数优化，其中所述整体损失函数如下：Lglobal＝λ1LDeblur+λ2LRotate+λ3LR；其中，LDeblur，LRotate，LR分别是去模糊处理中的第一损失函数、倾斜文本校正处理中的第二损失函数和场景文本识别处理中的第三损失函数，λ1，λ2，λ3均是权衡参数。根据本专利技术的第一方面，所述对原始图像进行去模糊处理得到清晰图像包括以下步骤：将所述原始图像缩放得到缩放图像；将所述缩放图像经过卷积层和残差层处理，再经过编码器处理得到第一隐藏状态；将所述第一隐藏状态经过解码器处理，再经过残差层和反卷积层处理得到锐化图像；将经过上采样处理的所述锐化图像和所述原始图像连接后作为输入，经过卷积层和残差层处理，再经过编码器处理得到第二隐藏状态；将所述第二隐藏状态和所述第一隐藏状态连接后，经过解码器处理，再经过残差层和反卷积层处理得到清晰图像。根据本专利技术的第一方面，所述将第二特征图进行倾斜文本校正处理得到角度校正图像包括以下步骤：将所述第二特征图经过卷积层处理；在经卷积层处理处理的第二特征图上生成多个锚点；以每个所述锚点为中心生成k个相对水平方向具有不同倾斜角度的锚点候选框，其中所述锚点候选框具有四个参数，所述四个参数分别为中心坐标的横坐标、中心坐标的纵坐标、宽和高；将所述锚点候选框经过分类层和回归层处理得到角度校正图像。根据本专利技术的第一方面，所述将第一特征图与第二特征图进行特征融合得到融合特征图包括以下步骤：将所述第一特征图与所述第二特征图调整为相同的尺寸；将尺寸相同的第一特征图和第二特征图拼接；利用卷积核对拼接后的特征图进行特征提取得到融合特征图。根据本专利技术的第一方面，所述场景文本识别处理包括文本候选框生成处理、文本候选框定位识别处理和文本行识别处理。本专利技术的第二方面，食品包装生产日期识别装置，包括：图像输入单元，用于输入包含生产日期的原始图像；第一特征提取单元，用于提取所述原始图像的第一特征图；去模糊单元，用于对所述原始图像进行去模糊处理得到清晰图像；第二特征提取单元，用于提取所述清晰图像的第二特征图；特征融合单元，用于将所述第一特征图与所述第二特征图进行特征融合得到融合特征图；倾斜文本校正单元，用于将所述第二特征图进行倾斜文本校正处理得到角度校正图像；第三特征提取单元，用于提取所述角度校正图像的校正特征图；特征拼接单元，用于将所述融合特征图和所述校正特征图拼接得到拼接特征图；场景文本识别单元，用于对所述拼接特征图进行场景文本识别处理得到识别结果。本专利技术的第三方面，存储介质存储有可执行指令，所述可执行指令用于使计算机执行如本专利技术第一方面所述的食品包装生产日期识别方法。上述技术方案至少具有以下的有益效果：对包含生产日期的原始图像进行去模糊处理和倾斜文本校正处理，减少干扰；以及对不同的特征图进行融合或拼接，使提取的特征图不失真，从而提高生产日期的识别准确率。本专利技术的附加方面和优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本专利技术的实践了解到。附图说明下面结合附图和实例对本专利技术作进一步说明。图1是本专利技术实施例食物包装生产日期识别方法的流程图；图2是图1中步骤S300的原理图；图3是本专利技术实施例食物包装生产日期识别装置的结构图。具体实施方式本部分将详细描述本专利技术的具体实施例，本专利技术之较佳实施例在附图中示出，附图的作用在于用图形补充说明书文字部分的描述，使人能够直观地、形象地理解本专利技术的每个技术特征和整体技术方案，但其不能理解为对本专利技术保护范围的限制。在本专利技术的描述中，若干的含义是一个或者多个，多个的含义是两个以上，大于、小于、超过等理解为不包括本数，以上、以下、以内等理解为包括本数。如果有描述到第一、第二只是用于区分技术特征为目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量或者隐含指明所指示的技术特征的先后关系。本专利技术的描述中，除非另有明确的限定，设置、安装、连接等词语应做广义理解，所属
技术人员可以结合技术方案的具体内容合理确定上述词语在本专利技术中的具体含义。参照图1，本专利技术的第一实施例，提供了食品包装生产日期识别方法，包括以下步骤：步骤S100、输入包含生产日期的原始图像；步骤S200、提取原始图像的第一特征图；步骤S300、对原始图像进行去模糊处理得到清晰图像；步骤S400、提取清晰图像的第二特征图；步骤S500、将第一特征图与第二特征图进行特征融合得到融合特征图；步骤S600、将第二特征图进行倾斜文本校正处理得到角度校正图像；步骤S700、提取角度校正图像的校正特征图；步骤S800、将融合特征图和校正特征图拼接得到拼接特征图；步骤S900、对拼接特征图进行场景文本识别处理得到识别结果。在该实施例中，拍摄的包含生产日期的原始图像由于在传输带上快速运动的原因会模糊，以及印刷问题和其他因素影响导致的印刷倾斜问题。对原始图像进行去模糊处理和倾斜文本校正处理，减少干扰；以及对不同的特征图进行融合或拼接，使提取的特征图不失真，从而提高生产日期的识本文档来自技高网...

【技术保护点】
1.食品包装生产日期识别方法，其特征在于，包括以下步骤：/n输入包含生产日期的原始图像；/n提取所述原始图像的第一特征图；/n对所述原始图像进行去模糊处理得到清晰图像；/n提取所述清晰图像的第二特征图；/n将所述第一特征图与所述第二特征图进行特征融合得到融合特征图；/n将所述第二特征图进行倾斜文本校正处理得到角度校正图像；/n提取所述角度校正图像的校正特征图；/n将所述融合特征图和所述校正特征图拼接得到拼接特征图；/n对所述拼接特征图进行场景文本识别处理得到识别结果。/n

【技术特征摘要】
1.食品包装生产日期识别方法，其特征在于，包括以下步骤：
输入包含生产日期的原始图像；
提取所述原始图像的第一特征图；
对所述原始图像进行去模糊处理得到清晰图像；
提取所述清晰图像的第二特征图；
将所述第一特征图与所述第二特征图进行特征融合得到融合特征图；
将所述第二特征图进行倾斜文本校正处理得到角度校正图像；
提取所述角度校正图像的校正特征图；
将所述融合特征图和所述校正特征图拼接得到拼接特征图；
对所述拼接特征图进行场景文本识别处理得到识别结果。


2.根据权利要求1所述的食品包装生产日期识别方法，其特征在于，还包括以下步骤：通过整体损失函数优化，其中所述整体损失函数如下：Lglobal＝λ1LDebluγ+λ2LRotate+λ3LR；其中，LDeblur，LRotote，LR分别是去模糊处理中的第一损失函数、倾斜文本校正处理中的第二损失函数和场景文本识别处理中的第三损失函数，λ1，λ2，λ3均是权衡参数。


3.根据权利要求1或2所述的食品包装生产日期识别方法，其特征在于，所述对原始图像进行去模糊处理得到清晰图像包括以下步骤：
将所述原始图像缩放得到缩放图像；
将所述缩放图像经过卷积层和残差层处理，再经过编码器处理得到第一隐藏状态；
将所述第一隐藏状态经过解码器处理，再经过残差层和反卷积层处理得到锐化图像；
将经过上采样处理的所述锐化图像和所述原始图像连接后作为输入，经过卷积层和残差层处理，再经过编码器处理得到第二隐藏状态；
将所述第二隐藏状态和所述第一隐藏状态连接后，经过解码器处理，再经过残差层和反卷积层处理得到清晰图像。


4.根据权利要求3所述的食品包装生产日期识别方法，其特征在于，所述将第二特征图进行倾斜文本校正处理得到角度校正图像包括以下步骤：
将所述第二特征图经过卷...

【专利技术属性】
技术研发人员：董超俊，李锐铭，翟懿奎，邓文博，
申请(专利权)人：五邑大学，
类型：发明
国别省市：广东;44