一种数据关系处理方法及系统技术方案

技术编号:36691677 阅读:35 留言:0更新日期:2023-02-27 19:59
本申请实施例提供一种数据关系处理方法及系统,涉及计算机技术领域。该数据关系处理方法包括:获取待梳理数据;根据所述待梳理数据获得主键信息;获取预设主题表数据;根据所述预设主题表数据和所述主键信息遍历所述待梳理数据,生成所述待梳理数据的实体关系图数据。该数据关系处理方法可以实现提高检索效率的技术效果。的技术效果。的技术效果。

【技术实现步骤摘要】
一种数据关系处理方法及系统


[0001]本申请涉及计算机
,具体而言,涉及一种数据关系处理方法、系统、电子设备及计算机可读存储介质。

技术介绍

[0002]目前,在企业信息化建设过程中,各种业务系统和工具应用越来越多,数据量呈现指数级增加,建立企业级数据仓库(数仓)有利于打通系统间数据孤岛,提高商业决策水平。从接入数据时效性来分,数仓可分成离线数仓和实时数仓。离线数仓主要用于处理批数据,即历史大数据。实时数仓主要用于处理流数据,即实时大数据。在早期数仓技术没这么成熟的时候,企业数仓建设以离线数仓为主,随着数仓技术不断演进,实时数仓日益成熟,对数据时效性要求高的企业纷纷建立起自家的实时数仓,现在大部分企业采用批流一体化的架构。
[0003]现有技术中,在大数据数仓下,面对复杂业务及成千上万张表,当需要找到与某个主题相关的所有表时,即使有数仓的支持,仍要花费很长的人工时间,检索效率低下。

技术实现思路

[0004]本申请实施例的目的在于提供一种数据关系处理方法、系统、电子设备及计算机可读存储介质,可以实现提高检索效率的本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种数据关系处理方法,其特征在于,包括:获取待梳理数据;根据所述待梳理数据获得主键信息;获取预设主题表数据;根据所述预设主题表数据和所述主键信息遍历所述待梳理数据,生成所述待梳理数据的实体关系图数据。2.根据权利要求1所述的数据关系处理方法,其特征在于,在所述根据所述待梳理数据获得主键信息的步骤之后,所述方法还包括:根据所述主键信息获取类型信息、长度信息、主键别名信息和匹配规则信息。3.根据权利要求1所述的数据关系处理方法,其特征在于,所述待梳理数据中包括多个表数据,所述根据所述预设主题表数据和所述主键信息遍历所述待梳理数据,生成所述待梳理数据的实体关系图数据的步骤,包括:以所述主题表数据为中心向周围扩散,依次匹配所述待梳理数据中的每个表数据,根据匹配到的表数据执行以下处理:根据所述主键信息进行所述主题表数据与所述表数据的匹配处理,生成匹配结果数据;根据所述匹配结果数据生成所述实体关系图数据。4.根据权利要求3所述的数据关系处理方法,其特征在于,所述根据所述主键信息进行所述主题表数据与所述表数据的匹配处理,生成匹配结果数据的步骤,包括:判断所述主题表数据的主键信息与所述表数据的主键信息是否一致,若是,则匹配成功并生成匹配度信息;若否,遍历所述表数据的所有字段,并对遍历到的字段进行以下处理:根据所述字段的类型、长度匹配所述主题表数据的主键信息,生成匹配度信息;根据所述匹配度信息生成匹配结果数据。5.根据权利...

【专利技术属性】
技术研发人员:吴海燕周鹏程
申请(专利权)人:创新奇智重庆科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1