一种数据治理的方法、装置、设备及存储介质制造方法及图纸

技术编号:39314020 阅读:10 留言:0更新日期:2023-11-12 15:58
本申请提供一种数据治理的方法、装置、设备及存储介质。该方法包括:获取数据标准组件中的目标数据标准;控制数据标准组件将目标数据标准发送至数据质量组件,以使数据质量组件根据目标数据标准检测数据库表中的元数据,数据库表为数据模型组件创建的表;若检测结果表征元数据与目标数据标准未匹配,则控制数据标准组件将目标数据标准发送至数据模型组件;数据模型组件根据目标数据标准,对数据库表中的元数据进行处理,得到处理后的目标数据库表。本申请的方法,解决了数据标准版本更新如何引导数据治理各组件的协同变动,以及如何保障版本一致性的问题,实现了数据标准在数据治理中的实时统一。的实时统一。的实时统一。

【技术实现步骤摘要】
一种数据治理的方法、装置、设备及存储介质


[0001]本申请涉及数据治理
,尤其涉及一种数据治理的方法、装置、设备及存储介质。

技术介绍

[0002]数据治理是使数据格式化、规范化的处理方式,通过数据治理的处理方式,使数据的质量更高、更具有价值。
[0003]目前数据治理组件层出不穷,为数据治理提供了标准、规范的治理流程。
[0004]然而,目前的数据治理组件缺乏联动关系,导致数据标准在数据治理中无法保持实时一致性。

技术实现思路

[0005]本申请提供一种数据治理的方法、装置、设备及存储介质,用以解决数据标准在数据治理中无法保持实时一致性的问题。
[0006]第一方面,本申请提供数据治理的方法,包括:
[0007]获取数据标准组件中的目标数据标准;
[0008]控制数据标准组件将目标数据标准发送至数据质量组件,以使数据质量组件根据目标数据标准检测数据库表中的元数据,数据库表为数据模型组件创建的表;
[0009]若检测结果表征元数据与目标数据标准未匹配,则控制数据标准组件将目标数据标准发送至数据模型组件;
[0010]数据模型组件根据目标数据标准,对数据库表中的元数据进行处理,得到处理后的目标数据库表。
[0011]在本申请中,在控制数据标准组件将目标数据标准发送至数据质量组件,以使数据质量组件根据目标数据标准检测数据库表中的元数据之前,方法还包括:
[0012]获取处于绑定状态的数据标准,其中,处于绑定状态的数据标准为元数据组件中与元数据有绑定关系的数据标准,元数据组件为设置在数据治理系统中的组件;
[0013]若处于绑定状态的数据标准与目标数据标准一致,则表征元数据与目标数据标准匹配,并执行控制数据标准组件将目标数据标准发送至数据质量组件,以使数据质量组件根据目标数据标准检测数据库表中的元数据的步骤。
[0014]在本申请中,获取处于绑定状态的数据标准之后,方法还包括:
[0015]若处于绑定状态的数据标准与目标数据标准不一致,则表征元数据与目标数据标准未匹配,并执行数据模型组件根据目标数据标准,对数据库表中的元数据进行处理,得到处理后的目标数据库表的步骤。
[0016]在本申请中,在获取数据标准组件中的目标数据标准之后,控制数据标准组件将目标数据标准发送至数据质量组件,以使数据质量组件根据目标数据标准检测数据库表中的元数据之前,方法还包括:
[0017]控制数据标准组件将目标数据标准发送至数据模型组件,以使数据模型组件根据目标数据标准创建数据库表;
[0018]确定数据库表中的元数据集合,其中,元数据集合包括目标元数据,目标元数据为与目标数据标准建立绑定关系的元数据;
[0019]将绑定关系信息同步至元数据组件,以执行获取元数据组件中与数据库表中待检测的元数据绑定的数据标准,得到处于绑定状态的数据标准的步骤,其中,绑定关系信息表征建立绑定关系的目标元数据与目标数据标准处于绑定状态的数据标准。
[0020]在本申请中,控制数据标准组件将目标数据标准发送至数据模型组件,以使数据模型组件根据目标数据标准创建数据库表,包括:
[0021]控制数据标准组件将目标数据标准发送至数据模型组件,以使数据模型组件根据目标数据标准,得到目标元数据;
[0022]数据模型组件根据目标元数据,生成数据库表。
[0023]在本申请中,数据模型组件根据目标数据标准,对数据库表中的元数据进行处理,得到处理后的目标数据库表,包括:
[0024]判断数据库表中的元数据是否存在重要数据,其中,重要数据表征元数据与目标数据标准未匹配,且处于锁定状态的元数据;
[0025]若判断结果表征数据库表中含有重要数据,则控制数据模型组件根据目标数据标准,新建符合目标数据标准的目标数据库表。
[0026]在本申请中,判断数据库表中的元数据是否存在重要数据,包括:
[0027]若判断结果表征数据库表中未含有重要数据,则控制数据模型根据目标数据标准,调整目标数据库表的表结构,得到目标数据库表。
[0028]第二方面,本申请提供一种数据治理的装置,包括:
[0029]获取模块,用于获取数据标准组件中的目标数据标准;
[0030]控制模块,用于控制数据标准组件将目标数据标准发送至数据质量组件,以使数据质量组件根据目标数据标准检测数据库表中的元数据,数据库表为数据模型组件创建的表;
[0031]检测模块,用于若检测结果表征元数据与目标数据标准未匹配,则控制数据标准组件将目标数据标准发送至数据模型组件;
[0032]处理模块,用于数据模型组件根据目标数据标准,对数据库表中的元数据进行处理,得到处理后的目标数据库表。
[0033]第三方面,本申请提供一种电子设备,包括:处理器,以及与处理器通信连接的存储器;
[0034]存储器存储计算机执行指令;
[0035]处理器执行存储器存储的计算机执行指令,以实现如本申请的方法。
[0036]第四方面,本申请提供一种计算机可读存储介质,计算机可读存储介质中存储有计算机执行指令,计算机可读存储介质中存储有计算机执行指令,计算机执行指令被处理器执行时用于实现本申请的方法。
[0037]本申请提供的一种数据治理的方法、装置、设备及存储介质,数据模型组件根据目标数据标准创建数据库表,绑定目标数据标准和目标元数据,并将绑定信息同步至元数据
组件;当对数据进行检测时,获取最新的数据标准,判断目标数据标准是否与最新的数据标准一致,若目标数据标准与最新的数据标准不一致,则记录检测结果为目标元数据与最新的数据标准不匹配;数据质量组件检测目标元数据是否符合最新的数据标准,若目标元数据与最新的数据标准不匹配,则检测数据库表中是否含有重要数据,若含有重要数据,则数据模型组件按照最新的数据标准,新建符合最新数据标准的目标数据库表,若未含有重要数据,则数据模型组件根据最新的数据标准,调整数据库表的表结构,得到目标数据库表,实现数据标准在数据治理中保持实时统一的效果。
附图说明
[0038]此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本申请的实施例,并与说明书一起用于解释本申请的原理。
[0039]图1为本申请实施例提供的一种数据治理的方法的流程示意图;
[0040]图2为本申请实施例提供的另一种数据治理的方法的流程示意图;
[0041]图3为本申请实施例提供的一种数据治理的装置的结构示意图;
[0042]图4为本申请实施例提供的电子设备的结构示意图。
[0043]通过上述附图,已示出本申请明确的实施例,后文中将有更详细的描述。这些附图和文字描述并不是为了通过任何方式限制本申请构思的范围,而是通过参考特定实施例为本领域技术人员说明本申请的概念。
具体实施方式
[0044]这里将详细地对示例性实施例进行说明,其示例表本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种数据治理的方法,其特征在于,应用于数据治理系统,所述数据治理系统包括数据标准组件、数据模型组件、以及数据质量组件,所述方法为:获取所述数据标准组件中的目标数据标准;控制所述数据标准组件将所述目标数据标准发送至所述数据质量组件,以使所述数据质量组件根据所述目标数据标准检测数据库表中的元数据,所述数据库表为所述数据模型组件创建的表;若所述检测结果表征所述元数据与所述目标数据标准未匹配,则控制所述数据标准组件将所述目标数据标准发送至所述数据模型组件;所述数据模型组件根据所述目标数据标准,对所述数据库表中的元数据进行处理,得到处理后的目标数据库表。2.根据权利要求1所述的方法,其特征在于,在控制所述数据标准组件将所述目标数据标准发送至所述数据质量组件,以使所述数据质量组件根据所述目标数据标准检测数据库表中的元数据之前,所述方法还包括:获取处于绑定状态的数据标准,其中,所述处于绑定状态的数据标准为元数据组件中与元数据绑定有绑定关系的数据标准,所述元数据组件为设置在所述数据治理系统中的组件;若所述处于绑定状态的数据标准与所述目标数据标准一致,则表征所述元数据与所述目标数据标准匹配,并执行所述控制所述数据标准组件将所述目标数据标准发送至所述数据质量组件,以使所述数据质量组件根据所述目标数据标准检测数据库表中的元数据的步骤。3.根据权利要求2所述的方法,其特征在于,所述获取处于绑定状态的数据标准之后,所述方法还包括:若所述处于绑定状态的数据标准与所述目标数据标准不一致,则表征所述元数据与所述目标数据标准未匹配,并执行所述数据模型组件根据所述目标数据标准,对所述数据库表中的元数据进行处理,得到处理后的目标数据库表的步骤。4.根据权利要求2所述的方法,其特征在于,在所述获取所述数据标准组件中的目标数据标准之后,控制所述数据标准组件将所述目标数据标准发送至所述数据质量组件,以使所述数据质量组件根据所述目标数据标准检测数据库表中的元数据之前,所述方法还包括:控制所述数据标准组件将所述目标数据标准发送至数据模型组件,以使所述数据模型组件根据所述目标数据标准创建数据库表;确定所述数据库表中的元数据集合,其中,所述元数据集合包括目标元数据,所述目标元数据为与所述目标数据标准建立绑定关系的元数据;将绑定关系信息同步至所述元数据组件,以执行获取所述元数据组件中与所述数据库表中待检测的元数据绑定的数据标准,得到处于绑定状...

【专利技术属性】
技术研发人员:刘鑫伦张芬王庆宋雨伦李大中谭晟中茅矛
申请(专利权)人:联通数字科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1