The invention discloses a table data analysis method, a device, a computer device and a storage medium. Methods include: according to the similarity calculation model, obtain the similarity information of each row of data in the table to be resolved and the necessary fields, judge the similarity information to determine the header row data, analyze the table to be resolved according to the corresponding analytical mapping relationship between the analytical mapping set and the header row data to obtain the standard data table, or obtain the preset according to the similarity calculation model The standard parsing field corresponding to the header row data in the parsing policy library is parsed according to the parsing strategy corresponding to the standard parsing field to get the standard data table. Through the above method, the resolution efficiency can be avoided because the resolution code in the traditional method is difficult to maintain, the header row data of the table to be resolved can be quickly determined, and the corresponding resolution mapping relationship or standard resolution field of the table to be resolved can be obtained, which greatly improves the efficiency of the analysis of the table data.
【技术实现步骤摘要】
表格数据解析方法、装置、计算机设备及存储介质
本专利技术涉及计算机
,尤其涉及一种表格数据解析方法、装置、计算机设备及存储介质。
技术介绍
交易信息可记载于银行流水文件中,流水文件以表格的形式进行呈现,但不同银行所提供的表格中数据格式存在差异,为对企业的资产进行核算需获取多个银行所提供的流水文件,而在对格式繁多的流水文件进行处理时耗时耗力。为方便对不同格式的流水文件进行处理,可对流水文件中的数据进行解析以得到格式统一的数据,传统的解析方法通过解析代码对流水文件进行解析,若某一格式的流水文件无法通过解析代码进行解析,则需根据该格式对解析代码进行更新,解析代码增加至一定量后导致复杂度过高而难以进行更新维护,将直接影响对流水文件进行解析的效率。因而,现有的表格数据解析方法存在解析效率不高的问题。
技术实现思路
本专利技术实施例提供了一种表格数据解析方法、装置、计算机设备及存储介质,旨在解决现有技术方法中表格数据解析方法所存在的解析效率不高的问题。第一方面,本专利技术实施例提供了一种表格数据解析方法,其包括:若接收到用户所输入的待解析表格,根据预置的相似度计算模型获取所述待解析表格中每一行数据的数据信息与预置的必要字段之间的相似度以得到相似度信息;根据预置的相似度判断规则对所述相似度信息进行判断,以将满足所述相似度判断规则的行数据作为表头行数据;判断预置的解析映射集中是否包含与所述表头行数据相匹配的解析映射关系;若预置的解析映射集中包含与所述表头行数据相匹配的 ...
【技术保护点】
1.一种表格数据解析方法,应用于用户终端,其特征在于,包括:/n若接收到用户所输入的待解析表格,根据预置的相似度计算模型获取所述待解析表格中每一行数据的数据信息与预置的必要字段之间的相似度以得到相似度信息;/n根据预置的相似度判断规则对所述相似度信息进行判断,以将满足所述相似度判断规则的行数据作为表头行数据;/n判断预置的解析映射集中是否包含与所述表头行数据相匹配的解析映射关系;/n若预置的解析映射集中包含与所述表头行数据相匹配的解析映射关系,根据与所述表头行数据相匹配的解析映射关系及所述表头行数据对所述待解析表格中所包含的数据信息进行解析以得到标准数据表;/n若预置的解析映射集中不包含与所述表头行数据相匹配的解析映射关系,根据所述相似度计算模型获取预置解析策略库中与所述表头行数据的数据字段相匹配的标准解析字段;/n根据所述标准解析字段对应的解析策略及所述表头行数据对所述待解析表格中所包含的数据信息进行解析以得到标准数据表。/n
【技术特征摘要】
1.一种表格数据解析方法,应用于用户终端,其特征在于,包括:
若接收到用户所输入的待解析表格,根据预置的相似度计算模型获取所述待解析表格中每一行数据的数据信息与预置的必要字段之间的相似度以得到相似度信息;
根据预置的相似度判断规则对所述相似度信息进行判断,以将满足所述相似度判断规则的行数据作为表头行数据;
判断预置的解析映射集中是否包含与所述表头行数据相匹配的解析映射关系;
若预置的解析映射集中包含与所述表头行数据相匹配的解析映射关系,根据与所述表头行数据相匹配的解析映射关系及所述表头行数据对所述待解析表格中所包含的数据信息进行解析以得到标准数据表;
若预置的解析映射集中不包含与所述表头行数据相匹配的解析映射关系,根据所述相似度计算模型获取预置解析策略库中与所述表头行数据的数据字段相匹配的标准解析字段;
根据所述标准解析字段对应的解析策略及所述表头行数据对所述待解析表格中所包含的数据信息进行解析以得到标准数据表。
2.根据权利要求1所述的表格数据解析方法,其特征在于,所述相似度计算模型包括编辑距离获取规则及相似度计算公式,所述根据预置的相似度计算模型获取所述待解析表格中每一行数据的数据信息与预置的必要字段之间的相似度以得到相似度信息,包括:
根据所述编辑距离获取规则获取所述数据信息与所述必要字段之间的编辑距离ED;
获取所述数据信息与所述必要字段中字符数较多的字段的字符数Lmax;
根据相似度计算公式S=1-ED/Lmax计算得到所述数据信息与所述必要字段之间的相似度S。
3.根据权利要求1所述的表格数据解析方法,其特征在于,所述解析映射关系包括多个解析字段及与每一所述解析字段对应的解析策略,所述根据与所述表头行数据相匹配的解析映射关系及所述表头行数据对所述待解析表格中所包含的数据信息进行解析以得到标准数据表,包括:
根据所述解析策略中的字段转换映射生成与所述表头行数据中每一数据字段对应的标准字段;
根据所述解析策略中的数据转换映射生成与每一所述数据字段的字段值对应的标准字段值;
将所述标准字段值添加至对应标准字段所在列以得到标准数据表。
4.根据权利要求1所述的表格数据解析方法,其特征在于,所述根据所述相似度计算模型获取预置解析策略库中与所述表头行数据的数据字段相匹配的标准解析字段,包括:
根据所述相似度计算模型获取所述表头行数据中每一数据字段与预置解析字段库中标准解析字段之间的相似度;
判断与所述数据字段之间相似度大于预置相似度阈值的标准解析字段的数量是否大于零,以得到每一所述数据字段的数量判断结果;
若所述数据字段的数量判断结果为是,将与所述数据字段之间相似度最高的标准解析字段作为与所述数据字段相匹配的标准解析字段。
5.根据权利要求1所述的表格数据解析方法,其特征在于...
【专利技术属性】
技术研发人员:李健青,
申请(专利权)人:深圳前海环融联易信息科技服务有限公司,
类型:发明
国别省市:广东;44
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。