一种数据处理方法和装置制造方法及图纸

技术编号:38013298 阅读:11 留言:0更新日期:2023-06-30 10:36
本发明专利技术公开了一种数据处理方法和装置,涉及计算机技术领域、大数据领域和金融科技领域。该方法的一具体实施方式包括获取指令请求,解析得到第一标识信息、第二标识信息和映射规则信息;根据第一标识信息查找到第一表格;根据第二标识信息创建相应的空表格,根据映射规则信息对第一表格处理得到目标数据并填充至空表格以得到第二表格;根据第一表格与第二表格的关系,关联第一标识信息与第二标识信息并存储至数据库表;获取查询请求,解析得到查询标识;在数据库表中筛选得到与查询标识关联的目标标识,将目标标识导入指定模板以生成展示界面。从而,本发明专利技术的实施方式能够解决现有梳理数据依赖关系效率低、缺乏数据依赖关系可视化展示的技术问题。系可视化展示的技术问题。系可视化展示的技术问题。

【技术实现步骤摘要】
一种数据处理方法和装置


[0001]本专利技术涉及计算机
、大数据领域和金融科技领域,尤其涉及一种数据处理方法和装置。

技术介绍

[0002]目前,数据映射工具的应用十分普遍,为用户提供了方便、快捷的数据生成功能。
[0003]在实现本专利技术过程中,专利技术人发现现有技术中至少存在如下问题:
[0004]用户在享受便捷、高效的数据映射、生成功能时,数据之间的依赖关系记录缺失的问题普遍存在,为数据依赖关系的梳理造成了很大的困难。现有技术中仅包括人工梳理数据依赖关系和程序代码识别数据依赖关系两种方法。人工梳理的方法效率低、准确率无法保证,且无法对梳理结果进行直观的可视化展示。程序梳理的方法对程序语言的兼容处理性能要求较高,通常因为程序语言不兼容影响梳理结果的准确率,且同样无法对梳理结果进行直观的可视化展示。

技术实现思路

[0005]有鉴于此,本专利技术实施例提供一种数据处理方法和装置,能够解决现有梳理数据依赖关系效率低、缺乏数据依赖关系的可视化展示的技术问题。
[0006]为实现上述目的,根据本专利技术实施例的一个方面,提供了一种数据处理方法,包括获取指令请求,解析得到第一标识信息、第二标识信息和映射规则信息;根据所述第一标识信息查找得到对应的第一表格;根据所述第二标识信息创建相应的空表格,根据所述映射规则信息对第一表格进行处理得到目标数据并对应填充至所述空表格中得到第二表格;根据第一表格与第二表格的依赖关系,关联第一标识信息与第二标识信息并结构化存储至数据库表;获取查询请求,解析得到查询标识;在数据库表中筛选得到与所述查询标识具有关联的目标标识,将所述目标标识导入至预设的模板,以生成相应的依赖关系展示界面。
[0007]可选地,包括:
[0008]所述指令请求包括顺序执行的多个分指令请求,其中,每个分指令请求包括对应的第一标识信息、对应的第二标识信息和对应的映射规则信息。
[0009]可选地,所述映射规则信息包括:
[0010]第一表格列标识、第一表格行标识、第一表格数据类型、映射模型、第二表格列标识和第二表格数据类型。
[0011]可选地,根据所述映射规则信息对第一表格进行处理得到目标数据并对应填充至所述空表格中得到第二表格,包括:基于映射规则信息中的第一表格列标识和第一表格行标识,在所述第一表格中筛选得到对应的源数据;基于映射规则信息中的第一表格数据类型、映射模型和第二表格数据类型,确定相应的映射模型;根据映射模型对源数据进行处理,得到目标数据;根据映射规则信息中的第二表格列标识在空表格中创建对应的列标识,以将目标数据填充至所述列标识的对应列。
[0012]可选地,在所述第一表格中筛选得到对应的源数据,包括:
[0013]读取所述第一表格行标识的指定属性,判断所述指定属性是否为第一目标值,若是则更新源数据为所述第一表格中第一表格列标识对应的全部数据。
[0014]可选地,关联第一标识信息与第二标识信息并结构化存储至数据库表,包括:
[0015]将第一标识信息存储至数据库表的第一集合中,将第二标识信息存储至数据库表的第二集合中,并在数据库表中关联第一标识信息和第二标识信息。
[0016]可选地,在数据库表中筛选得到与所述查询标识具有关联的目标标识,包括:
[0017]在数据库表的第一集合和第二集合中分别查找所述查询标识,并分别获取第一集合和第二集合存在的查询标识对应的在第二集合和第一集合中关联的标识,得到目标标识。
[0018]可选地,还包括:
[0019]所述查询请求包括顺序执行的多个分查询请求,将每个分查询请求查询得到的目标标识作为下个分查询请求对应的查询标识。
[0020]可选地,还包括:
[0021]监听到所述第一表格更新,确定对应于所述第一表格的第一标识信息;在数据库表的中查找第一标识信息,确定所述第一标识信息关联的第二标识信息,并通过所述第二标识信息查找得到对应的第二表格;筛选得到第一表格中更新后的数据,调取对应于所述第一表格的映射模型,以根据所述映射模型对所述更新后的数据进行处理,以对第二表格进行相应的更新。
[0022]另外,本专利技术还提供了一种数据处理装置,包括映射模块,用于获取指令请求,解析得到第一标识信息、第二标识信息和映射规则信息;根据所述第一标识信息查找得到对应的第一表格;根据所述第二标识信息创建相应的空表格,根据所述映射规则信息对第一表格进行处理得到目标数据并对应填充至所述空表格中得到第二表格;数据库表模块,用于根据第一表格与第二表格的依赖关系,关联第一标识信息与第二标识信息并结构化存储至数据库表;用于在数据库表中筛选得到与所述查询标识具有关联的目标标识;查询模块,用于获取查询请求,解析得到查询标识;用于将目标标识导入至预设的模板,以生成相应的依赖关系展示界面。
[0023]可选地,还包括:映射模块,还用于确定所述指令请求包括顺序执行的多个分指令请求,其中,每个分指令请求包括对应的第一标识信息、对应的第二标识信息和对应的映射规则信息。
[0024]可选地,还包括:映射模块,还用于确定所述映射规则信息包括第一表格列标识、第一表格行标识、第一表格数据类型、映射模型、第二表格列标识和第二表格数据类型。
[0025]可选地,还包括:映射模块,还用于基于映射规则信息中的第一表格列标识和第一表格行标识,在所述第一表格中筛选得到对应的源数据;基于映射规则信息中的第一表格数据类型、映射模型和第二表格数据类型,确定相应的映射模型;根据映射模型对源数据进行处理,得到目标数据;根据映射规则信息中的第二表格列标识在空表格中创建对应的列标识,以将目标数据填充至所述列标识的对应列。
[0026]可选地,还包括:映射模块,还用于在所述第一表格中筛选得到对应的源数据时,读取所述第一表格行标识的指定属性,判断所述指定属性是否为第一目标值,若是则更新
源数据为所述第一表格中第一表格列标识对应的全部数据。
[0027]可选地,还包括:数据库表模块,还用于在关联第一标识信息与第二标识信息并结构化存储至数据库表时,将第一标识信息存储至数据库表的第一集合中,将第二标识信息存储至数据库表的第二集合中,并在数据库表中关联第一标识信息和第二标识信息。
[0028]可选地,还包括:数据库表模块,还用于在数据库表中筛选得到与所述查询标识具有关联的目标标识时,在数据库表的第一集合和第二集合中分别查找所述查询标识,并分别获取第一集合和第二集合存在的查询标识对应的在第二集合和第一集合中关联的标识,得到目标标识。
[0029]可选地,还包括:查询模块,还用于确定所述查询请求包括顺序执行的多个分查询请求,将每个分查询请求查询得到的目标标识作为下个分查询请求对应的查询标识。
[0030]可选地,还包括:映射模块,还用于监听到所述第一表格更新,确定对应于所述第一表格的第一标识信息。
[0031]可选地,还包括:数据库表模块,还用于在数据库表的中查找第一标识本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种数据处理方法,其特征在于,包括:获取指令请求,解析得到第一标识信息、第二标识信息和映射规则信息;根据所述第一标识信息查找得到对应的第一表格;根据所述第二标识信息创建相应的空表格,根据所述映射规则信息对第一表格进行处理得到目标数据并对应填充至所述空表格中得到第二表格;根据第一表格与第二表格的依赖关系,关联第一标识信息与第二标识信息并结构化存储至数据库表;获取查询请求,解析得到查询标识;在数据库表中筛选得到与所述查询标识具有关联的目标标识,将所述目标标识导入至预设的模板,以生成相应的依赖关系展示界面。2.根据权利要求1所述的方法,其特征在于,包括:所述指令请求包括顺序执行的多个分指令请求,其中,每个分指令请求包括对应的第一标识信息、对应的第二标识信息和对应的映射规则信息。3.根据权利要求1所述的方法,其特征在于,所述映射规则信息包括:第一表格列标识、第一表格行标识、第一表格数据类型、映射模型、第二表格列标识和第二表格数据类型。4.根据权利要求1或3所述的方法,其特征在于,根据所述映射规则信息对第一表格进行处理得到目标数据并对应填充至所述空表格中得到第二表格,包括:基于映射规则信息中的第一表格列标识和第一表格行标识,在所述第一表格中筛选得到对应的源数据;基于映射规则信息中的第一表格数据类型、映射模型和第二表格数据类型,确定相应的映射模型;根据映射模型对源数据进行处理,得到目标数据;根据映射规则信息中的第二表格列标识在空表格中创建对应的列标识,以将目标数据填充至所述列标识的对应列。5.根据权利要求4所述的方法,其特征在于,在所述第一表格中筛选得到对应的源数据,包括:读取所述第一表格行标识的指定属性,判断所述指定属性是否为第一目标值,若是则更新源数据为所述第一表格中第一表格列标识对应的全部数据。6.根据权利要求1所述的方法,其特征在于,关联第一标识信息与第二标识信息并结构化存储至数据库表,包括:将第一标识信息存储至数据库表的第一集合中,将第二标识信息存储至数据库表的第二集合中,并在数据库表中关联第一标识信息和第二标识信息。7.根据权利要求6所述的方法,其特征在于,在数据库表中筛选得到与所述查询标识具有关联的目标标识,包括:在数据库表的第一集合和第二集合中分别查找所述查询标识,并分别获取第一集合和第二集合存在的查询标识对应的在第二集合和第一集合中关联的标识,得到目标标识。8.根据权利要求1所述的方法,其特征在于,包括:所述查询请求包括顺序执行的多个分查询请求,将每个分查询请求查询得到的目标标
识作为下个分查询请求对应的查询标识。9.根据权利要求3或4所述的方法,其特征在于,包括:监听到所述第一表格更新,确定对应于所述第一表格的第一标识信息;在数据库表的中查找第一标识信息,确定所述第一标识信息关联的第二标识信息,并通过所述第二标识信息查找得到对应的第二表格;筛选得到第一表格中更新后的数据,调取对应于所述第一表格的映射模型,以根据所述映射模型对所述更新后的数据进行处理,以对第二表格进行相应的更新。10.一种数据处理装置,其特征在于,还包括:映射模块,用于获取指令请求,解析得到第一标识信息、第二标识信息和映射规则信息;根据所述第一标识信息查找得到对应的第一表格;根据所述第二标识信息创建相应的空表格,根据所述映射规则信息对第一表格进行处理得到目标数据并对应填充至所述空表格中得到第二表格;数据库表模块,用于根据第一表格与第二表格的依赖关系,关联第一标识信息与第二标识信息并结构化存储至数据库表;用于在数据库表中筛选得到与所述查询标识具有关联的目标标识;查询模...

【专利技术属性】
技术研发人员:林宜领朱富荣庄佳和涂霖英江永建吴博
申请(专利权)人:建信金融科技有限责任公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1