表格数据解析方法、装置、计算机设备及存储介质制造方法及图纸

技术编号:22658735 阅读:10 留言:0更新日期:2019-11-28 03:21
本发明专利技术公开了表格数据解析方法、装置、计算机设备及存储介质。方法包括:根据相似度计算模型获取待解析表格中每一行数据与必要字段对应的相似度信息,并对相似度信息进行判断以确定表头行数据,根据解析映射集中与表头行数据对应的解析映射关系对待解析表格进行解析得到标准数据表,或根据相似度计算模型获取预置解析策略库中与表头行数据对应的标准解析字段,根据标准解析字段对应的解析策略对待解析表格进行解析以得到标准数据表。通过上述方法,可避免因传统方法中解析代码难以进行维护而影响解析效率,可快速确定待解析表格的表头行数据,并获取与待解析表格对应的解析映射关系或标准解析字段,大幅提高了对表格数据进行解析的效率。

Table data analysis method, device, computer equipment and storage medium

The invention discloses a table data analysis method, a device, a computer device and a storage medium. Methods include: according to the similarity calculation model, obtain the similarity information of each row of data in the table to be resolved and the necessary fields, judge the similarity information to determine the header row data, analyze the table to be resolved according to the corresponding analytical mapping relationship between the analytical mapping set and the header row data to obtain the standard data table, or obtain the preset according to the similarity calculation model The standard parsing field corresponding to the header row data in the parsing policy library is parsed according to the parsing strategy corresponding to the standard parsing field to get the standard data table. Through the above method, the resolution efficiency can be avoided because the resolution code in the traditional method is difficult to maintain, the header row data of the table to be resolved can be quickly determined, and the corresponding resolution mapping relationship or standard resolution field of the table to be resolved can be obtained, which greatly improves the efficiency of the analysis of the table data.

【技术实现步骤摘要】
表格数据解析方法、装置、计算机设备及存储介质
本专利技术涉及计算机
,尤其涉及一种表格数据解析方法、装置、计算机设备及存储介质。
技术介绍
交易信息可记载于银行流水文件中,流水文件以表格的形式进行呈现,但不同银行所提供的表格中数据格式存在差异,为对企业的资产进行核算需获取多个银行所提供的流水文件,而在对格式繁多的流水文件进行处理时耗时耗力。为方便对不同格式的流水文件进行处理,可对流水文件中的数据进行解析以得到格式统一的数据,传统的解析方法通过解析代码对流水文件进行解析,若某一格式的流水文件无法通过解析代码进行解析,则需根据该格式对解析代码进行更新,解析代码增加至一定量后导致复杂度过高而难以进行更新维护,将直接影响对流水文件进行解析的效率。因而,现有的表格数据解析方法存在解析效率不高的问题。
技术实现思路
本专利技术实施例提供了一种表格数据解析方法、装置、计算机设备及存储介质,旨在解决现有技术方法中表格数据解析方法所存在的解析效率不高的问题。第一方面,本专利技术实施例提供了一种表格数据解析方法,其包括:若接收到用户所输入的待解析表格,根据预置的相似度计算模型获取所述待解析表格中每一行数据的数据信息与预置的必要字段之间的相似度以得到相似度信息;根据预置的相似度判断规则对所述相似度信息进行判断,以将满足所述相似度判断规则的行数据作为表头行数据;判断预置的解析映射集中是否包含与所述表头行数据相匹配的解析映射关系;若预置的解析映射集中包含与所述表头行数据相匹配的解析映射关系,根据与所述表头行数据相匹配的解析映射关系及所述表头行数据对所述待解析表格中所包含的数据信息进行解析以得到标准数据表;若预置的解析映射集中不包含与所述表头行数据相匹配的解析映射关系,根据所述相似度计算模型获取预置解析策略库中与所述表头行数据的数据字段相匹配的标准解析字段;根据所述标准解析字段对应的解析策略及所述表头行数据对所述待解析表格中所包含的数据信息进行解析以得到标准数据表。第二方面,本专利技术实施例提供了一种表格数据解析装置,其包括:相似度信息获取单元,用于若接收到用户所输入的待解析表格,根据预置的相似度计算模型获取所述待解析表格中每一行数据的数据信息与预置的必要字段之间的相似度以得到相似度信息;相似度信息判断单元,用于根据预置的相似度判断规则对所述相似度信息进行判断,以将满足所述相似度判断规则的行数据作为表头行数据;解析映射关系匹配单元,用于判断预置的解析映射集中是否包含与所述表头行数据相匹配的解析映射关系;第一表格解析单元,用于若预置的解析映射集中包含与所述表头行数据相匹配的解析映射关系,根据与所述表头行数据相匹配的解析映射关系及所述表头行数据对所述待解析表格中所包含的数据信息进行解析以得到标准数据表;标准解析字段匹配单元,用于若预置的解析映射集中不包含与所述表头行数据相匹配的解析映射关系,根据所述相似度计算模型获取预置解析策略库中与所述表头行数据的数据字段相匹配的标准解析字段;第二表格解析单元,用于根据所述标准解析字段对应的解析策略及所述表头行数据对所述待解析表格中所包含的数据信息进行解析以得到标准数据表。第三方面,本专利技术实施例又提供了一种计算机设备,其包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述第一方面所述的表格数据解析方法。第四方面,本专利技术实施例还提供了一种计算机可读存储介质,其中所述计算机可读存储介质存储有计算机程序,所述计算机程序当被处理器执行时使所述处理器执行上述第一方面所述的表格数据解析方法。本专利技术实施例提供了一种表格数据解析方法、装置、计算机设备及存储介质。根据相似度计算模型获取待解析表格中每一行数据与必要字段对应的相似度信息,并对相似度信息进行判断以确定表头行数据,根据解析映射集中与表头行数据对应的解析映射关系对待解析表格进行解析得到标准数据表,或根据相似度计算模型获取预置解析策略库中与表头行数据对应的标准解析字段,根据标准解析字段对应的解析策略对待解析表格进行解析以得到标准数据表。通过上述方法,可避免因传统方法中解析代码难以进行维护而影响解析效率,可快速确定待解析表格的表头行数据,并获取与待解析表格对应的解析映射关系或标准解析字段,大幅提高了对表格数据进行解析的效率。附图说明为了更清楚地说明本专利技术实施例技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本专利技术的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。图1为本专利技术实施例提供的表格数据解析方法的流程示意图;图2为本专利技术实施例提供的表格数据解析方法的子流程示意图;图3为本专利技术实施例提供的表格数据解析方法的另一流程示意图;图4为本专利技术实施例提供的表格数据解析方法的另一子流程示意图;图5为本专利技术实施例提供的表格数据解析方法的另一子流程示意图;图6为本专利技术实施例提供的表格数据解析装置的示意性框图;图7为本专利技术实施例提供的计算机设备的示意性框图。具体实施方式下面将结合本专利技术实施例中的附图,对本专利技术实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本专利技术一部分实施例,而不是全部的实施例。基于本专利技术中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本专利技术保护的范围。应当理解,当在本说明书和所附权利要求书中使用时,术语“包括”和“包含”指示所描述特征、整体、步骤、操作、元素和/或组件的存在,但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。还应当理解,在此本专利技术说明书中所使用的术语仅仅是出于描述特定实施例的目的而并不意在限制本专利技术。如在本专利技术说明书和所附权利要求书中所使用的那样,除非上下文清楚地指明其它情况,否则单数形式的“一”、“一个”及“该”意在包括复数形式。还应当进一步理解,在本专利技术说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合,并且包括这些组合。请参阅图1,图1是本专利技术实施例提供的表格数据解析方法的流程示意图。该表格数据解析方法应用于用户终端中,该方法通过安装于用户终端中的应用软件进行执行,用户终端即是用于执行表格数据解析方法以对表格中的数据进行解析的终端设备,例如台式电脑、笔记本电脑、平板电脑或手机等。如图1所示,该方法包括步骤S110~S160。S110、若接收到用户所输入的待解析表格,根据预置的相似度计算模型获取所述待解析表格中每一行数据的数据信息与预置的必要字段之间的相似度以得到相似度信息。若接收到用户所输入的待解析表格,根据预置的相似度计算模型获取所述待解析表格中每一行数据的数据信息与预置的必要字段之间的相似度以得到相本文档来自技高网...

【技术保护点】
1.一种表格数据解析方法,应用于用户终端,其特征在于,包括:/n若接收到用户所输入的待解析表格,根据预置的相似度计算模型获取所述待解析表格中每一行数据的数据信息与预置的必要字段之间的相似度以得到相似度信息;/n根据预置的相似度判断规则对所述相似度信息进行判断,以将满足所述相似度判断规则的行数据作为表头行数据;/n判断预置的解析映射集中是否包含与所述表头行数据相匹配的解析映射关系;/n若预置的解析映射集中包含与所述表头行数据相匹配的解析映射关系,根据与所述表头行数据相匹配的解析映射关系及所述表头行数据对所述待解析表格中所包含的数据信息进行解析以得到标准数据表;/n若预置的解析映射集中不包含与所述表头行数据相匹配的解析映射关系,根据所述相似度计算模型获取预置解析策略库中与所述表头行数据的数据字段相匹配的标准解析字段;/n根据所述标准解析字段对应的解析策略及所述表头行数据对所述待解析表格中所包含的数据信息进行解析以得到标准数据表。/n

【技术特征摘要】
1.一种表格数据解析方法,应用于用户终端,其特征在于,包括:
若接收到用户所输入的待解析表格,根据预置的相似度计算模型获取所述待解析表格中每一行数据的数据信息与预置的必要字段之间的相似度以得到相似度信息;
根据预置的相似度判断规则对所述相似度信息进行判断,以将满足所述相似度判断规则的行数据作为表头行数据;
判断预置的解析映射集中是否包含与所述表头行数据相匹配的解析映射关系;
若预置的解析映射集中包含与所述表头行数据相匹配的解析映射关系,根据与所述表头行数据相匹配的解析映射关系及所述表头行数据对所述待解析表格中所包含的数据信息进行解析以得到标准数据表;
若预置的解析映射集中不包含与所述表头行数据相匹配的解析映射关系,根据所述相似度计算模型获取预置解析策略库中与所述表头行数据的数据字段相匹配的标准解析字段;
根据所述标准解析字段对应的解析策略及所述表头行数据对所述待解析表格中所包含的数据信息进行解析以得到标准数据表。


2.根据权利要求1所述的表格数据解析方法,其特征在于,所述相似度计算模型包括编辑距离获取规则及相似度计算公式,所述根据预置的相似度计算模型获取所述待解析表格中每一行数据的数据信息与预置的必要字段之间的相似度以得到相似度信息,包括:
根据所述编辑距离获取规则获取所述数据信息与所述必要字段之间的编辑距离ED;
获取所述数据信息与所述必要字段中字符数较多的字段的字符数Lmax;
根据相似度计算公式S=1-ED/Lmax计算得到所述数据信息与所述必要字段之间的相似度S。


3.根据权利要求1所述的表格数据解析方法,其特征在于,所述解析映射关系包括多个解析字段及与每一所述解析字段对应的解析策略,所述根据与所述表头行数据相匹配的解析映射关系及所述表头行数据对所述待解析表格中所包含的数据信息进行解析以得到标准数据表,包括:
根据所述解析策略中的字段转换映射生成与所述表头行数据中每一数据字段对应的标准字段;
根据所述解析策略中的数据转换映射生成与每一所述数据字段的字段值对应的标准字段值;
将所述标准字段值添加至对应标准字段所在列以得到标准数据表。


4.根据权利要求1所述的表格数据解析方法,其特征在于,所述根据所述相似度计算模型获取预置解析策略库中与所述表头行数据的数据字段相匹配的标准解析字段,包括:
根据所述相似度计算模型获取所述表头行数据中每一数据字段与预置解析字段库中标准解析字段之间的相似度;
判断与所述数据字段之间相似度大于预置相似度阈值的标准解析字段的数量是否大于零,以得到每一所述数据字段的数量判断结果;
若所述数据字段的数量判断结果为是,将与所述数据字段之间相似度最高的标准解析字段作为与所述数据字段相匹配的标准解析字段。


5.根据权利要求1所述的表格数据解析方法,其特征在于...

【专利技术属性】
技术研发人员:李健青
申请(专利权)人:深圳前海环融联易信息科技服务有限公司
类型:发明
国别省市:广东;44

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1