基于图像识别的设备履历本目标信息提取与识别系统及其方法技术方案

本发明专利技术公开了一种基于图像识别的履历本目标信息提取与识别系统，终端设备用于采集设备履历本图像，该图像中包含履历本要识别的目标信息，并将履历本图像信息和终端系统身份信息发送至服务器；服务器用于对终端系统身份信息进行验证，通过验证之后对履历本图像中目标信息进行提取和识别，并在数据库中保存，同时将识别结果发送到终端设备并显示出来。本发明专利技术采集包含备履历本目标信息的图像并进行字符检测和识别，提取其中的目标信息，并在数据库中保存图像信息与识别结果。

Equipment resume information extraction and recognition system and method based on image recognition

【技术实现步骤摘要】
基于图像识别的设备履历本目标信息提取与识别系统及其方法
本专利技术涉及图像字符识别领域，尤其涉及一种基于图像字符识别的设备履历本目标信息提取与识别系统及其方法。
技术介绍
履历本在各型飞机的零件、设备上都广泛使用，现阶段有大量的履历本纸质信息需要登记到计算机系统中。针对人工录入工作繁琐、效率低下、错误率高等问题，本系统以人工智能技术中神经网络算法为核心，结合图像识别和软件开发等技术，实现履历本信息的自动识别和自动录入。
技术实现思路
本专利技术的目的是为了解决以上现有技术的不足，提出了一种基于图像识别的设备履历本目标信息提取与识别系统，包括终端设备和服务器；所述终端设备由高拍仪与控制终端组成，高拍仪用于采集图像信息，控制终端用于将图像信息连同终端设备的系统身份信息发送至服务器；所述服务器用于对所述终端设备的系统身份信息进行验证，验证通过后对采集的图像信息进行识别，将识别结果转化成文字信息并输出该文字信息，同时将识别的文字信息结果及采集的图像信息保存在服务器数据库中。进一步地，所述终端设备的控制终端与高拍仪能够实时监测高拍仪上摄像头下是否存在指定样式的设备履历本，若存在，则采集设备履历本的图像，并发送给服务器。通过控制终端判断高拍仪获取的图像内是否有履历本，可以实现即放即拍即传的快速连续履历本图像采集，在连续对多本履历本采集的过程中无需对设备和高拍仪进行任何操作，避免了采集与操作过程中易发生的重复采集的错误，效率的提高非常显著。更进一步地，所述终端设备与帐号绑定，所述帐号通过密码登录，所述服务器接收所述终端设备传送的图像，利用图像处理算法对该图像进行处理，并将处理结果与该图像保存在数据库中，同时将识别结果回传给控制终端；所述控制终端能够对回传的识别结果在终端软件上显示。更进一步地，其特征在于，所述系统能够对设备履历本封面上的“名称”、“型号”和“编号”位置信息进行准确检测和识别。更进一步地，其特征在于，所述系统能够对设备履历本封面上的“名称”、“型号”和“编号”后所表示的属性值进行识别。更进一步地，其特征在于，所述系统能够识别的设备履历本封面上的“名称”、“型号”和“编号”后所表示的每一个属性值可以包含中文汉字、英文字母，俄文字母及标点符号。更进一步地，其特征在于，所述系统能够识别的设备履历本封面上的“名称”、“型号”和“编号”后所表示的每一个属性值下方可以有下划线，且下划线可以是实线或者虚线。更进一步地，所述系统能够识别的设备履历本封面上的“名称”、“型号”和“编号”后所表示的每一个属性值可以由单行或者多行文本组成。更进一步地，所述系统能够识别的设备履历本封面上的“名称”、“型号”和“编号”后所表示的每一个属性值可以是中文汉字、英文字母，俄文字母及标点符号的打印体或者手写体。一种基于图像识别的设备履历本目标信息提取与识别系统的方法，包括以下步骤：步骤S1：进行人员身份信息验证，若验证通过，则启动高拍仪至图像采集等待模式，控制终端实时获取高拍仪的拍摄图像并判断是否有履历本类文档；步骤S2：将履历本放置在高拍仪摄像头下，触发高拍仪进行图像采集；步骤S3：控制终端将采集的图像信息发送至服务器；步骤S4：服务器接收终端设备传送的图像，利用图像处理算法对该图像进行处理，并将处理结果与该图像保存在数据库中，同时将识别结果回传给控制终端；步骤S5：控制终端在终端软件上显示回传的识别结果，同时控制高拍仪至图像采集等待模式，等待下一次采集。有益效果：1、本专利技术中采用了登录验证后采集图像的系统，可以保障采集图像的数据安全性且便于数据管理避免错位；2、本专利技术中服务器将图像信息保存于数据库，并将识别结果转化为文字信息输出至终端设备，既降低了终端设备的存储和计算压力，也提高了识别的效率；3、本专利技术中采用控制终端实时获取高拍仪的拍摄图像并判断是否有履历本类文档的方法，可以实现即放即拍即传的快速连续履历本图像采集，在连续对多本履历本采集的过程中无需对设备和高拍仪进行任何操作，有效提高了提取效率。附图说明图1是专利技术一实施例的系统框图；图2是本专利技术的方法流程图；具体实施方式下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。请参阅图1，本实施例提供一种基于图像识别的设备履历本目标信息提取与识别系统，其特征在于，包括终端设备和服务器；所述终端设备由高拍仪与控制终端组成，高拍仪用于采集图像信息，控制终端用于将图像信息连同终端设备的系统身份信息发送至服务器；所述服务器用于对所述终端设备的系统身份信息进行验证，验证通过后对采集的图像信息进行识别，将识别结果转化成文字信息并输出该文字信息，同时将识别的文字信息结果及采集的图像信息保存在服务器数据库中。于本实施例中，控制终端实时获取高拍仪的拍摄图像，并进行二值化处理，然后通过计算黑色像素点的个数来判断是否有履历本类文档，若满足条件则将该图像和终端的身份信息一起发送至服务器，若不存在履历本，则继续获取摄像头当前图像并判断是否有履历本；于本实施例中，服务器上会通过maskrcnn检测算法对关键字符进行检测，从而判定是否是履历本图像。于本实施例中，所述服务器在接收图像和身份验证信息后，首先对身份信息进行验证，若通过验证，则开始进行图像处理。于本实施例中，所述服务器在进行图像处理时，利用maskrcnn算法检测关键字符“名称”、“型号”和“编号”的区域位置。于本实施例中，所述服务器在进行图像处理时，利用得到的关键字符区域位置坐标对图像进行旋转摆正。于本实施例中，所述服务器在进行图像处理时，通过已定位的关键字符位置利用Mser算法定位出目标字符的区域位置。利用Mser算法寻找目标字符区域位置，是对图像的灰度图(灰度值为0～255)取阈值进行二值化处理，阈值从0到255依次递增，在得到的所有二值图像中，图像中的某些连通区域变化很小，甚至没有变化，则该区域就被称为最大稳定极值区域，然后利用NMS算法去除重复区域，遍历将所有的框得分排序，选中其中得分最高的框，然后遍历其余框找到和当前最高分的框的重叠面积(IOU)大于一定阈值的框，删除。然后继续这个过程，找另一个得分高的框，再删除重叠面积大于阈值的框，循环运算下去，最后剩下的就是不包含重叠部分的文本区域。于本实施例中，所述服务器在进行图像处理时，对目标区域字符目标字符的区域位置进行投影判断字符的行数，若为多行字符，则将多行字符进行切分并拼接为单行的字符。于本实施例中，所述服务器在进行图像处理时，对目标区域字符的下划线种类进行判别，将目标区域字符图像进行二值化处理，然后进行hough直线检测，判定是否存在下划线。于本文档来自技高网...

【技术保护点】
1.一种基于图像识别的设备履历本目标信息提取与识别系统，其特征在于，包括终端设备和服务器；所述终端设备由高拍仪与控制终端组成，高拍仪用于采集图像信息，控制终端用于将图像信息连同终端设备的系统身份信息发送至服务器；所述服务器用于对所述终端设备的系统身份信息进行验证，验证通过后对采集的图像信息进行识别，将识别结果转化成文字信息并输出该文字信息，同时将识别的文字信息结果及采集的图像信息保存在服务器数据库中。/n

【技术特征摘要】
1.一种基于图像识别的设备履历本目标信息提取与识别系统，其特征在于，包括终端设备和服务器；所述终端设备由高拍仪与控制终端组成，高拍仪用于采集图像信息，控制终端用于将图像信息连同终端设备的系统身份信息发送至服务器；所述服务器用于对所述终端设备的系统身份信息进行验证，验证通过后对采集的图像信息进行识别，将识别结果转化成文字信息并输出该文字信息，同时将识别的文字信息结果及采集的图像信息保存在服务器数据库中。


2.根据权利要求1所述的基于图像识别的设备履历本目标信息提取与识别系统，其特征在于，所述终端设备的控制终端与高拍仪能够实时监测高拍仪上摄像头下是否存在指定样式的设备履历本，若存在，则采集设备履历本的图像，并发送给服务器。


3.根据权利要求1所述的基于图像识别的设备履历本目标信息提取与识别系统，其特征在于，所述终端设备与帐号绑定，所述帐号通过密码登录，所述服务器接收所述终端设备传送的图像，利用图像处理算法对该图像进行处理，并将处理结果与该图像保存在数据库中，同时将识别结果回传给控制终端；所述控制终端能够对回传的识别结果在终端软件上显示。


4.根据权利要求1所述的基于图像识别的设备履历本目标信息提取与识别系统，其特征在于，所述系统能够对设备履历本封面上的“名称”、“型号”和“编号”位置信息进行准确检测和识别。


5.根据权利要求1所述的基于图像识别的设备履历本目标信息提取与识别系统，其特征在于，所述系统能够对设备履历本封面上的“名称”、“型号”和“编号”后所表示的属性值进行识别。


6.根据权利要求1所述的基于图像识别的设备履历本目标信息提取与识别系统，其特征在于，所述系统能够识别的...

【专利技术属性】
技术研发人员：郑会龙，
申请(专利权)人：杭州测质成科技有限公司，
类型：发明
国别省市：浙江;33