数据治理的方法、装置、电子设备和介质制造方法及图纸

技术编号:42624408 阅读:20 留言:0更新日期:2024-09-06 01:27
本申请提出一种数据治理的方法、装置、电子设备和介质。该方法包括:根据数据加载规则从多个业务单元的源数据中拉取匹配的数据,确定各业务单元的任务之间的调度关系,根据监控规则和所述调度关系分批动态监控各任务,在各任务对所述数据执行计算后,根据计算结果构建数据质量图谱。本申请技术方案由于数据加载规则与业务单元的业务场景相匹配,因此能够适用不同场景下的数据治理,应用性更强,而且基于监控规则和调度关系动态监控任务,提高了数据质量的稳定性。

【技术实现步骤摘要】

本申请涉及大数据,尤其涉及一种数据治理的方法、装置、电子设备和介质


技术介绍

1、数据治理(data governance)是对数据资产管理行使权力和控制的活动集合,包括制定和实施针对整个企业内部数据的商业应用和技术管理的一整套管理行为。数据治理是企业实现数字战略的基础,其最终目标是提升数据的价值,为支持良好的业务决策提供可信、及时且相关的信息。

2、目前,数据治理多数采用固定策略管理的方式,基于预先设置好的策略监控计算任务的执行以完成对数据的管理。但是,这种方式普遍应用性不足,无法及时应对企业组织架构以及数据链路的变动,影响数据质量的稳定性。


技术实现思路

1、本申请实施例提供一种数据治理的方法、装置、电子设备和介质,以提升数据质量的稳定性,技术方案如下:

2、第一方面,本申请实施例提供了一种数据治理的方法,包括:

3、根据数据加载规则从多个业务单元的源数据中拉取匹配的数据;

4、确定各业务单元的任务之间的调度关系;

5、根据监控规则和所述调度关本文档来自技高网...

【技术保护点】

1.一种数据治理的方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述根据数据加载规则从多个业务单元的源数据中拉取匹配的数据,包括:

3.根据权利要求1所述的方法,其特征在于,所述根据监控规则和所述调度关系分批动态监控各任务,包括:

4.根据权利要求3所述的方法,其特征在于,所述根据监控规则和所述调度关系将各业务单元的任务划分为多组,包括:

5.根据权利要求3所述的方法,其特征在于,所述任务节点属性包括任务节点的计算位置和/或任务节点的隶属部门。

6.根据权利要求1所述的方法,其特征在于,所述在各任务对所述数...

【技术特征摘要】

1.一种数据治理的方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述根据数据加载规则从多个业务单元的源数据中拉取匹配的数据,包括:

3.根据权利要求1所述的方法,其特征在于,所述根据监控规则和所述调度关系分批动态监控各任务,包括:

4.根据权利要求3所述的方法,其特征在于,所述根据监控规则和所述调度关系将各业务单元的任务划分为多组,包括:

5.根据权利要求3所述的方法,其特征在于,所述任务节点属性包括任务节点的计算位置和/或任务节点的隶属部门。

...

【专利技术属性】
技术研发人员:石重
申请(专利权)人:华人运通上海云计算科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1