一种图像处理方法、装置和电子设备制造方法及图纸

本发明专利技术实施例提供了一种图像处理方法、装置和电子设备，其中，所述方法包括：获取待识别图像；提取所述待识别图像的特征图像，依据所述特征图像确定所述待识别图像中的文本区域；依据所述文本区域确定所述特征图像中的特征区域，将所述特征区域调整至水平；依据调整后的特征区域对对应文本区域进行文本识别，确定对应的文本信息；进而能够提高对非水平文本的识别率，从而提高了对图像中文本识别的准确率。

【技术实现步骤摘要】
一种图像处理方法、装置和电子设备
本专利技术涉及图像处理
，特别是涉及一种图像处理方法、装置和电子设备。
技术介绍
如今，很多场景都需要进行图像识别，比如交通监控系统拍摄到车辆闯红灯后，需要对拍摄图像进行识别确定车辆的车牌号；又比如用户下载的很多资料可能是图片格式的，则需要将图片转换成文档；还比如拍照翻译等等。现有技术进行图像识别的方法是，先定位图像中的文字区域，然后再识别文字区域中的文字，其中，该文字区域是水平区域；通常很多图像中的文字都不是水平的如倾斜，导致从水平区域中检测非水平文字的识别效果差。
技术实现思路
本专利技术实施例提供一种图像处理方法，以提高识别图像中文本的准确率。相应的，本专利技术实施例还提供了一种图像处理装置和一种电子设备，用以保证上述方法的实现及应用。为了解决上述问题，本专利技术实施例公开了一种图像处理方法，具体包括：获取待识别图像；提取所述待识别图像的特征图像，依据所述特征图像确定所述待识别图像中的文本区域；依据所述文本区域确定所述特征图像中的特征区域，将所述特征区域调整至水平；依据调整后的特征区域对对应文本区域进行文本识别，确定对应的文本信息。可选地，所述提取所述待识别图像的特征图像，包括：采用特征金字塔网络，提取所述待识别图像对应的多个尺度的特征图像。可选地，所述依据所述特征图像确定所述待识别图像中的文本区域，包括：依据所述特征图像进行水平框检测，确定目标水平框，所述目标水平框内包含所述待识别图像中的文本；对所述目标水平框框定的区域进行文本分割，确定所述目标水平框中文本的像素点；依据所述目标水平框中文本的像素点，确定所述待识别图像中的文本区域。可选地，所述依据所述特征图像进行水平框检测，确定目标水平框，包括：针对一个尺度的特征图像，采用检测网络在所述尺度的特征图像上进行水平框检测，确定在所述尺度上的水平框；依据在各个尺度上的水平框，确定目标水平框。可选地，所述目标水平框包括多个，所述对所述目标水平框框定的区域进行文本分割，确定所述目标水平框中文本的像素点，包括：针对一个目标水平框，采用分割网络依据所述目标水平框对应尺度的特征图像进行文本分割，确定所述目标水平框中文本的像素点。可选地，所述依据所述目标水平框中文本的像素点，确定所述待识别图像中的文本区域，包括：确定所述目标水平框中文本像素点对应的最小外接矩形；将所述最小外接矩形对应的区域，确定为所述待识别图像中的文本区域。可选地，所述文本区域包括多个，所述依据所述文本区域确定所述特征图像中的特征区域，包括：针对每个文本区域，确定所述文本区域对应尺度的特征图像；从所述文本区域对应尺度的特征图像中，截取所述文本区域对应的特征区域。可选地，所述文本区域包括多个，所述依据所述文本区域确定所述特征图像中的特征区域，包括：针对每个文本区域，从最大尺度的特征图像中截取所述文本区域对应的特征区域。可选地，所述依据调整后的特征区域对对应文本区域进行文本识别，确定对应的文本信息，包括：将调整后的特征区域输入至识别网络中，得到对应文本区域中的文本信息。可选地，所述的方法还包括预处理的步骤：确定所述待识别图像的均值，并对所述待识别图像进行减均值处理。本专利技术实施例还公开了一种图像处理装置，具体包括：图像获取模块，用于获取待识别图像；区域确定模块，用于提取所述待识别图像的特征图像，依据所述特征图像确定所述待识别图像中的文本区域；区域调整模块，用于依据所述文本区域确定所述特征图像中的特征区域，将所述特征区域调整至水平；文本识别模块，用于依据调整后的特征区域对对应文本区域进行文本识别，确定对应的文本信息。可选地，所述区域确定模块包括：特征提取子模块，用于采用特征金字塔网络，提取所述待识别图像对应的多个尺度的特征图像。可选地，所述区域确定模块包括：水平框检测子模块，用于依据所述特征图像进行水平框检测，确定目标水平框，所述目标水平框内包含所述待识别图像中的文本；像素点确定子模块，用于对所述目标水平框框定的区域进行文本分割，确定所述目标水平框中文本的像素点；文本区域确定子模块，用于依据所述目标水平框中文本的像素点，确定所述待识别图像中的文本区域。可选地，所述水平框检测子模块，用于针对一个尺度的特征图像，采用检测网络在所述尺度的特征图像上进行水平框检测，确定在所述尺度上的水平框；依据在各个尺度上的水平框，确定目标水平框。可选地，所述目标水平框包括多个，所述像素点确定子模块，用于针对一个目标水平框，采用分割网络依据所述目标水平框对应尺度的特征图像进行文本分割，确定所述目标水平框中文本的像素点。可选地，所述文本区域确定子模块，用于确定所述目标水平框中文本像素点对应的最小外接矩形；将所述最小外接矩形对应的区域，确定为所述待识别图像中的文本区域。可选地，所述文本区域包括多个，所述区域调整模块包括：第一特征区域调整子模块，用于针对每个文本区域，确定所述文本区域对应尺度的特征图像；从所述文本区域对应尺度的特征图像中，截取所述文本区域对应的特征区域。可选地，所述文本区域包括多个，所述区域调整模块包括：第二特征区域调整子模块，用于针对每个文本区域，从最大尺度的特征图像中截取所述文本区域对应的特征区域。可选地，所述文本识别模块，用于将调整后的特征区域输入至识别网络中，得到对应文本区域中的文本信息。可选地，所述的装置还包括：预处理模块，用于确定所述待识别图像的均值，并对所述待识别图像进行减均值处理。本专利技术实施例还公开了一种可读存储介质，当所述存储介质中的指令由电子设备的处理器执行时，使得电子设备能够执行如本专利技术实施例任一所述的图像处理方法。本专利技术实施例还公开了一种电子设备，包括有存储器，以及一个或者一个以上的程序，其中一个或者一个以上程序存储于存储器中，且经配置以由一个或者一个以上处理器执行所述一个或者一个以上程序包含用于进行以下操作的指令：获取待识别图像；提取所述待识别图像的特征图像，依据所述特征图像确定所述待识别图像中的文本区域；依据所述文本区域确定所述特征图像中的特征区域，将所述特征区域调整至水平；依据调整后的特征区域对对应文本区域进行文本识别，确定对应的文本信息。可选地，所述提取所述待识别图像的特征图像，包括：采用特征金字塔网络，提取所述待识别图像对应的多个尺度的特征图像。可选地，所述依据所述特征图像确定所述待识别图像中的文本区域，包括：依据所述特征图像进行水平框检测，确定目标水平框，所述目标水平框内包含所述待识别图像中的文本；对所述目标水平框框定的区域进行文本分割，确定所述目标水平框中文本的像素点；依据所述目标水平框中文本的像素点，确定所述待识别图像中的文本区域。可选地，所述依据所述特征图像进行水平框检测，确定目标水平框，包括：针对一个尺度的特征图像，采用检测网络在所述尺度的特征图像上进行水平框检测，确定在所述尺度上的水平框；依据在各个尺度上的水平框，确定目标水平框。可选地，所述目标本文档来自技高网...

【技术保护点】
1.一种图像处理方法，其特征在于，包括：/n获取待识别图像；/n提取所述待识别图像的特征图像，依据所述特征图像确定所述待识别图像中的文本区域；/n依据所述文本区域确定所述特征图像中的特征区域，将所述特征区域调整至水平；/n依据调整后的特征区域对对应文本区域进行文本识别，确定对应的文本信息。/n

【技术特征摘要】
1.一种图像处理方法，其特征在于，包括：
获取待识别图像；
提取所述待识别图像的特征图像，依据所述特征图像确定所述待识别图像中的文本区域；
依据所述文本区域确定所述特征图像中的特征区域，将所述特征区域调整至水平；
依据调整后的特征区域对对应文本区域进行文本识别，确定对应的文本信息。


2.根据权利要求1所述的方法，其特征在于，所述提取所述待识别图像的特征图像，包括：
采用特征金字塔网络，提取所述待识别图像对应的多个尺度的特征图像。


3.根据权利要求2所述的方法，其特征在于，所述依据所述特征图像确定所述待识别图像中的文本区域，包括：
依据所述特征图像进行水平框检测，确定目标水平框，所述目标水平框内包含所述待识别图像中的文本；
对所述目标水平框框定的区域进行文本分割，确定所述目标水平框中文本的像素点；
依据所述目标水平框中文本的像素点，确定所述待识别图像中的文本区域。


4.根据权利要求3所述的方法，其特征在于，所述依据所述特征图像进行水平框检测，确定目标水平框，包括：
针对一个尺度的特征图像，采用检测网络在所述尺度的特征图像上进行水平框检测，确定在所述尺度上的水平框；
依据在各个尺度上的水平框，确定目标水平框。


5.根据权利要求4所述的方法，其特征在于，所述目标水平框包括多个，所述对所述目标水平框框定的区域进行文本分割，确定所述目标水平框中文本的像素点，包括：
针对一个目标水平框，采用分割网络依据所述目标水平框对应尺度的特征图像进行文本分割，确定所述目标水平框中文本的像素点。


6.根据权利要求5所述的方法，其特征在于，所述依据所述目标水平框...

【专利技术属性】
技术研发人员：李保俊，韦涛，李斌，
申请(专利权)人：北京搜狗科技发展有限公司，搜狗杭州智能科技有限公司，
类型：发明
国别省市：北京;11