本申请提供一种三线表格图像识别方法及装置，其中所述三线表格图像识别方法包括：获取待识别图像，其中，所述待识别图像包括三线表格；确定所述三线表格的关键点信息，并根据所述关键点信息确定所述三线表格的顶线、底线和栏目线；根据所述顶线、所述底线和所述栏目线对所述三线表格进行文字检测，确定所述三线表格的表格列信息、项目栏信息和表身信息；根据所述表格列信息、所述项目栏信息和所述表身信息生成所述待识别图像对应的表格，通过本方法提高了三线表格图像识别的识别准确性。法提高了三线表格图像识别的识别准确性。法提高了三线表格图像识别的识别准确性。
【技术实现步骤摘要】
一种三线表格图像识别方法及装置
[0001]本申请涉及计算机
，特别涉及一种三线表格图像识别方法及装置、计算设备和计算机可读存储介质。
技术介绍
[0002]三线表是数据表述的一种形式，因具有鲜明的定量变大量化信息的功能而被广泛应用于科技论文、医学文章等方面，三线表的形式简洁、功能分明、阅读方便，三线表通常只有3条线，分别为顶线、底线和栏目线，顶线和栏目线之间的部分叫项目栏，栏目线与底线之间的部分叫表身。
[0003]在日常应用中，三线表经常会以图片的形式存储，当需要三线表中的数据时，需要将三线表中的数据识别输出为对应的表格，但是现有的三线表图片识别大多是基于图像像素对图片进行分析，如特征点检测等，其最终的检测识别结果的准确率不高，实际的转换效果不理想。
[0004]因此，如何提高三线表图像的识别准确率就成为技术人员亟待解决的问题。
技术实现思路
[0005]有鉴于此，本申请实施例提供了一种三线表格图像识别方法及装置、计算设备和计算机可读存储介质，以解决现有技术中存在的技术缺陷。
[0006]根据本申请实施例的第一方面，提供了一种三线表格图像识别方法，包括：
[0007]获取待识别图像，其中，所述待识别图像包括三线表格；
[0008]确定所述三线表格的关键点信息，并根据所述关键点信息确定所述三线表格的顶线、底线和栏目线；
[0009]根据所述顶线、所述底线和所述栏目线对所述三线表格进行文字检测，确定所述三线表格的表格列信息、项目栏信息和表身信息；<br/>[0010]根据所述表格列信息、所述项目栏信息和所述表身信息生成所述待识别图像对应的表格。
[0011]可选的，确定所述三线表格的关键点信息，包括：
[0012]将所述待识别图像输入至预先训练好的关键点定位网络模型；
[0013]所述关键点定位网络模型根据输入的所述待识别图像确定所述三线表格的关键点信息。
[0014]可选的，所述关键点定位网络模型通过下述步骤训练获得，包括：
[0015]获取训练图像和所述训练图像对应的关键点标准信息；
[0016]将所述训练图像输入至关键点定位网络模型；
[0017]所述关键点定位网络模型响应于所述训练图像作为输入而生成所述训练图像的关键点信息；
[0018]基于所述关键点信息和所述关键点标准信息计算损失值；
[0019]通过对所述损失值进行反向传播以训练所述关键点定位网络模型。
[0020]可选的，根据所述顶线、所述底线和所述栏目线对所述三线表格进行文字检测，确定所述三线表格的表格列信息、项目栏信息和表身信息，包括：
[0021]对所述三线表格的项目栏做文字检测，确定所述三线表格的表格列信息和项目栏信息，其中，所述项目栏由所述顶线和所述栏目线确定；
[0022]根据所述表格列信息对所述三线表格的表身做文字检测，确定所述三线表格的表身信息，其中，所述表身由所述栏目线和所述底线确定。
[0023]可选的，对所述三线表格的项目栏做文字检测，确定所述三线表格的表格列信息和项目栏信息，包括：
[0024]对所述三线表格的项目栏做文字检测，获得多个第一区域和每个所述第一区域对应的第一区域信息；
[0025]根据每个所述第一区域信息确定所述三线表格的表格列信息；
[0026]根据每个所述第一区域确定所述三线表格的项目栏信息。
[0027]可选的，所述第一区域信息包括第一区域的第一顶点坐标和第二顶点坐标；
[0028]根据每个所述第一区域信息确定所述三线表格的表格列信息，包括：
[0029]根据每个所述第一区域的第一顶点坐标和第二顶点坐标确定每个所述第一区域的中心点坐标；
[0030]对每个所述第一区域的中心点坐标进行聚类；
[0031]根据聚类结果确定所述三线表格的表格列信息。
[0032]可选的，根据每个所述第一区域确定所述三线表格的项目栏信息，包括：
[0033]对每个所述第一区域做文字识别，获得每个所述第一区域的第一文字信息；
[0034]根据每个所述第一文字信息确定所述三线表格的项目栏信息。
[0035]可选的，根据所述表格列信息对所述三线表格的表身做文字检测，确定所述三线表格的表身信息，包括：
[0036]对所述三线表格的表身做文字检测，获得多个第二区域和每个所述第二区域对应的第二区域信息；
[0037]根据所述表格列信息和每个所述第二区域信息确定每个所述第二区域对应的位置信息；
[0038]对每个所述第二区域做文字识别，获得每个所述第二区域的第二文字信息；
[0039]根据每个所述第二区域对应的位置信息和每个所述第二文字信息确定所述三线表格的表身信息。
[0040]可选的，所述第二区域信息包括第二区域的第一顶点坐标和第二顶点坐标；
[0041]根据所述表格列信息和每个所述第二区域信息确定每个所述第二区域对应的位置信息，包括：
[0042]根据每个所述第二区域的第一顶点坐标和第二顶点坐标确定每个所述第二区域的中心点坐标；
[0043]对每个所述第二区域的中心点坐标进行聚类；
[0044]根据聚类结果和所述表格列信息确定每个所述第二区域对应的位置信息。
[0045]根据本申请实施例的第二方面，提供了一种三线表格图像识别装置，包括：
[0046]获取模块，被配置为获取待识别图像，其中，所述待识别图像包括三线表格；
[0047]确定模块，被配置为确定所述三线表格的关键点信息，并根据所述关键点信息确定所述三线表格的顶线、底线和栏目线；
[0048]检测模块，被配置为根据所述顶线、所述底线和所述栏目线对所述三线表格进行文字检测，确定所述三线表格的表格列信息、项目栏信息和表身信息；
[0049]生成模块，被配置为根据所述表格列信息、所述项目栏信息和所述表身信息生成所述待识别图像对应的表格。
[0050]根据本申请实施例的第三方面，提供了一种计算设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机指令，所述处理器执行所述指令时实现所述三线表格图像识别方法的步骤。
[0051]根据本申请实施例的第四方面，提供了一种计算机可读存储介质，其存储有计算机指令，该指令被处理器执行时实现所述三线表格图像识别方法的步骤。
[0052]根据本申请实施例的第五方面，提供了一种芯片，其存储有计算机指令，该指令被芯片执行时实现所述三线表格图像识别方法的步骤。
[0053]本申请实施例中，通过获取包括三线表格的待识别图像，将三线表格经过关键点定位网络模型确定三线表格的关键点信息，通过神经网络模型的识别可以极大提高关键点的识别准确度，再通过关键点信息确定三线表格的顶线、底线和栏目线，可以进一步推断出更加准确的表格，通过根据所述顶线、底线和栏目线对所述三线表格进行文字检测，确定三线表格本文档来自技高网...
【技术保护点】
【技术特征摘要】
1.一种三线表格图像识别方法，其特征在于，包括：获取待识别图像，其中，所述待识别图像包括三线表格；确定所述三线表格的关键点信息，并根据所述关键点信息确定所述三线表格的顶线、底线和栏目线；根据所述顶线、所述底线和所述栏目线对所述三线表格进行文字检测，确定所述三线表格的表格列信息、项目栏信息和表身信息；根据所述表格列信息、所述项目栏信息和所述表身信息生成所述待识别图像对应的表格。2.如权利要求1所述的三线表格图像识别方法，其特征在于，确定所述三线表格的关键点信息，包括：将所述待识别图像输入至预先训练好的关键点定位网络模型；所述关键点定位网络模型根据输入的所述待识别图像确定所述三线表格的关键点信息。3.如权利要求2所述的三线表格图像识别方法，其特征在于，所述关键点定位网络模型通过下述步骤训练获得，包括：获取训练图像和所述训练图像对应的关键点标准信息；将所述训练图像输入至关键点定位网络模型；所述关键点定位网络模型响应于所述训练图像作为输入而生成所述训练图像的关键点信息；基于所述关键点信息和所述关键点标准信息计算损失值；通过对所述损失值进行反向传播以训练所述关键点定位网络模型。4.如权利要求1所述的三线表格图像识别方法，其特征在于，根据所述顶线、所述底线和所述栏目线对所述三线表格进行文字检测，确定所述三线表格的表格列信息、项目栏信息和表身信息，包括：对所述三线表格的项目栏做文字检测，确定所述三线表格的表格列信息和项目栏信息，其中，所述项目栏由所述顶线和所述栏目线确定；根据所述表格列信息对所述三线表格的表身做文字检测，确定所述三线表格的表身信息，其中，所述表身由所述栏目线和所述底线确定。5.如权利要求4所述的三线表格图像识别方法，其特征在于，对所述三线表格的项目栏做文字检测，确定所述三线表格的表格列信息和项目栏信息，包括：对所述三线表格的项目栏做文字检测，获得多个第一区域和每个所述第一区域对应的第一区域信息；根据每个所述第一区域信息确定所述三线表格的表格列信息；根据每个所述第一区域确定所述三线表格的项目栏信息。6.如权利要求5所述的三线表格图像识别方法，其特征在于，所述第一区域信息包括第一区域的第一顶点坐标和第二顶点坐标；根据每个所述第一区域信息确定所述三线表格的表格列信息，包括：根据每个所述第一区域的第一顶点坐标和第二顶点坐标...
【专利技术属性】
技术研发人员：王洪伟，李长亮，
申请(专利权)人：北京金山数字娱乐科技有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。