一种基于数据血缘的链路异常告警方法及装置制造方法及图纸

技术编号:40174499 阅读:12 留言:0更新日期:2024-01-26 23:43
本发明专利技术涉及数据中台技术领域,具体提供了一种基于数据血缘的链路异常告警方法及装置,包括:对被监测API或表进行数据血缘初始化,得到被监测API或表对应的数据血缘链路模型;对所述数据血缘链路模型进行异常数据识别;当发现所述数据血缘链路模型存在异常时,向所述数据血缘链路模型中的发生异常的对象对应的下游API、表或节点推送异常告警。本发明专利技术提供的技术方案,可达到问题快速定位,数据异常变化告警,简单故障自动化处理,数据及时更新、保障系统图表功能有效等效果。

【技术实现步骤摘要】

本专利技术涉及数据中台,具体涉及一种基于数据血缘的链路异常告警方法及装置


技术介绍

1、随着数据时代的来临,数据接入、数据治理、cim模型设计和落模等工作尤为重要。基于总部数据中台服务构建的应用系统,其数据链路较长,任务节点多,对于突发的数据问题需要花费较长时间对问题进行定位和处理,这导致应用端面对业务部门发现的数据异常变化、数据延迟更新、系统图表功能失效等问题时十分被动。

2、为支持基于中台的应用建设和运维,亟需一种基于数据血缘的链路异常告警方法。


技术实现思路

1、为了克服上述缺陷,本专利技术提出了一种基于数据血缘的链路异常告警方法及装置。

2、第一方面,提供一种基于数据血缘的链路异常告警方法,所述基于数据血缘的链路异常告警方法包括:

3、对被监测api或表进行数据血缘初始化,得到被监测api或表对应的数据血缘链路模型;

4、对所述数据血缘链路模型进行异常数据识别;

5、当发现所述数据血缘链路模型存在异常时,向所述数据血缘链路模型中的发生异常的本文档来自技高网...

【技术保护点】

1.一种基于数据血缘的链路异常告警方法,其特征在于,所述方法包括:

2.如权利要求1所述的方法,其特征在于,所述被监测API或表对应的数据血缘链路模型中节点的属性包括:依赖关系、调度时间,平均开始时间、平均运行时间。

3.如权利要求1所述的方法,其特征在于,所述异常数据识别,包括:节点异常识别、数据异常识别、链路异常识别、表结构变更异常识别。

4.如权利要求3所述的方法,其特征在于,所述节点异常识别包括:

5.如权利要求3所述的方法,其特征在于,所述数据异常识别包括:

6.如权利要求3所述的方法,其特征在于,所述链路异常识别包括...

【技术特征摘要】

1.一种基于数据血缘的链路异常告警方法,其特征在于,所述方法包括:

2.如权利要求1所述的方法,其特征在于,所述被监测api或表对应的数据血缘链路模型中节点的属性包括:依赖关系、调度时间,平均开始时间、平均运行时间。

3.如权利要求1所述的方法,其特征在于,所述异常数据识别,包括:节点异常识别、数据异常识别、链路异常识别、表结构变更异常识别。

4.如权利要求3所述的方法,其特征在于,所述节点异常识别包括:

5.如权利要求3所述的方法,其特征在于,...

【专利技术属性】
技术研发人员:王家凯李勇乐盛爽郭学良黄佩卓王洁王哲
申请(专利权)人:国家电网有限公司大数据中心
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1