【技术实现步骤摘要】
本专利技术涉及数据中台,具体涉及一种基于数据血缘的链路异常告警方法及装置。
技术介绍
1、随着数据时代的来临,数据接入、数据治理、cim模型设计和落模等工作尤为重要。基于总部数据中台服务构建的应用系统,其数据链路较长,任务节点多,对于突发的数据问题需要花费较长时间对问题进行定位和处理,这导致应用端面对业务部门发现的数据异常变化、数据延迟更新、系统图表功能失效等问题时十分被动。
2、为支持基于中台的应用建设和运维,亟需一种基于数据血缘的链路异常告警方法。
技术实现思路
1、为了克服上述缺陷,本专利技术提出了一种基于数据血缘的链路异常告警方法及装置。
2、第一方面,提供一种基于数据血缘的链路异常告警方法,所述基于数据血缘的链路异常告警方法包括:
3、对被监测api或表进行数据血缘初始化,得到被监测api或表对应的数据血缘链路模型;
4、对所述数据血缘链路模型进行异常数据识别;
5、当发现所述数据血缘链路模型存在异常时,向所述数据血缘链
...【技术保护点】
1.一种基于数据血缘的链路异常告警方法,其特征在于,所述方法包括:
2.如权利要求1所述的方法,其特征在于,所述被监测API或表对应的数据血缘链路模型中节点的属性包括:依赖关系、调度时间,平均开始时间、平均运行时间。
3.如权利要求1所述的方法,其特征在于,所述异常数据识别,包括:节点异常识别、数据异常识别、链路异常识别、表结构变更异常识别。
4.如权利要求3所述的方法,其特征在于,所述节点异常识别包括:
5.如权利要求3所述的方法,其特征在于,所述数据异常识别包括:
6.如权利要求3所述的方法,其特征在于,
...【技术特征摘要】
1.一种基于数据血缘的链路异常告警方法,其特征在于,所述方法包括:
2.如权利要求1所述的方法,其特征在于,所述被监测api或表对应的数据血缘链路模型中节点的属性包括:依赖关系、调度时间,平均开始时间、平均运行时间。
3.如权利要求1所述的方法,其特征在于,所述异常数据识别,包括:节点异常识别、数据异常识别、链路异常识别、表结构变更异常识别。
4.如权利要求3所述的方法,其特征在于,所述节点异常识别包括:
5.如权利要求3所述的方法,其特征在于,...
【专利技术属性】
技术研发人员:王家凯,李勇乐,盛爽,郭学良,黄佩卓,王洁,王哲,
申请(专利权)人:国家电网有限公司大数据中心,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。