基于Flink指标的告警方法、设备及存储介质技术

技术编号:40248884 阅读:17 留言:0更新日期:2024-02-02 22:43
本申请提供一种基于Flink指标的告警方法、设备及存储介质,涉及监控告警技术领域。该方法包括:响应于Flink任务,确定Flink任务对应的任务ID和应用程序ID;基于任务ID和应用程序ID确定Flink任务对应的任务信息、性能属性指标、性能动态指标;基于任务信息和性能属性指标确定第一关系型数据库表,基于任务信息和性能动态指标确定第二关系型数据库表;基于第一关系型数据库表和第二关系型数据库表确定符合预设条件的目标任务,向目标任务对应的用户终端发出告警信息。本申请的方法,实现了Stream Park平台对Flink作业指标的多维度集中监控告警和自动化调优的技术效果。

【技术实现步骤摘要】

本申请涉及监控告警,尤其涉及一种基于flink指标的告警方法、设备及存储介质。


技术介绍

1、随着大数据的发展,对实时监控和处理数据的需求越来越高,apache flink作为一种强大的流式处理框架,提供了分布式、高性能和容错的流式计算解决方案,随之出现了较为实用的流处理应用开发管理框架stream park,该开源框架为flink作业提供了专业的作业管理平台。基于stream park平台,开发者可以轻松构建和管理流处理应用程序,更好地使用apache flink编写流处理应用程序的开发框架。由于flink作业的资源利用率是非常重要的,因此结合stream park平台对flink作业任务的监控和调优成为一个具有应用前景的方向。

2、在现有技术中,stream park平台通过作业管理解决了责任人不明确,分支不可追溯的问题;通过作业管理对配置进行了集中化,避免了脚本太过于分散;通过对作业启动和停止权限进行严格地控制,避免了脚本化权限不可控的状态。此外,stream park平台以接口的方式与集群进行交互来获取apache flink作业信息,本文档来自技高网...

【技术保护点】

1.一种基于Flink指标的告警方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,在所述基于所述第一关系型数据库表和所述第二关系型数据库表确定符合预设条件的目标任务之后,包括:

3.根据权利要求2所述的方法,其特征在于,所述调用Stream Park平台相应的目标接口,基于所述内存调整值和所述状态托管内存调整值对所述目标任务进行调优重启,包括:

4.根据权利要求3所述的方法,其特征在于,所述调用所述Stream Park平台相应的停用接口、编辑配置接口和启动任务接口,基于所述内存调整值和所述状态托管内存调整值对所述目标任务进行调优重启...

【技术特征摘要】

1.一种基于flink指标的告警方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,在所述基于所述第一关系型数据库表和所述第二关系型数据库表确定符合预设条件的目标任务之后,包括:

3.根据权利要求2所述的方法,其特征在于,所述调用stream park平台相应的目标接口,基于所述内存调整值和所述状态托管内存调整值对所述目标任务进行调优重启,包括:

4.根据权利要求3所述的方法,其特征在于,所述调用所述stream park平台相应的停用接口、编辑配置接口和启动任务接口,基于所述内存调整值和所述状态托管内存调整值对所述目标任务进行调优重启,包括:

5.根据权利要求1所述的方法,其特征在于,所述基于所述任务id和所述应用程序id确定所述flink任务对应的任务信息、性能属性指标、...

【专利技术属性】
技术研发人员:姜雨彤穆纯进王云朋
申请(专利权)人:中国联合网络通信集团有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1