一种数据监控方法、设备、介质及程序产品技术

技术编号:46036699 阅读:17 留言:0更新日期:2025-08-05 19:40
本申请实施例公开了一种数据监控方法、设备、介质及程序产品。该方法应用于分布式流数据处理引擎时包括:实时通过分布式发布订阅消息系统获取由业务平台产生的目标数据流;根据所述目标数据流进行实时监控计算,确定对所述目标数据流的监控结果;若所述监控结果满足告警结果,则将所述监控结果存储于数据库中,以便于业务平台按照预设频率对所述数据库中的监控结果进行查询并进行告警。上述方案能够利用分布式流数据处理引擎平台的低延迟、高吞吐的特性,实时持续地对实时传输的目标数据流快速进行多种类和方式的计算分析,从而决策得出是否生成并发出预警信息,提高了数据监控的实时性和速度。

【技术实现步骤摘要】

本申请涉及数据监控,尤其涉及一种数据监控方法、设备、介质及程序产品


技术介绍

1、通常业务平台具有大吞吐量,高并发,高可用,且外联系统众多等特点,因此在业务平台日常运维中,对业务平台的异常能进行尽早、尽快、尽量准确的监控预警是运维人员一直在努力追求的。一般业务平台在进行都会把实时产生的信息登记到业务平台系统信息表中,而对业务平台的监控预警需要对业务平台的信息及时地进行分析,计算,因此要对信息及时地进行分析计算的前提是需要采集业务平台数据,而采集数据传统的方式是频繁地访问系统信息表以获取数据。对于大吞吐量的业务平台来说,业务平台系统信息表是绝对的热表,每时每刻都有大量的数据被写入到系统信息表内,如果仅仅只是为了监控预警的目的采集待计算的数据就要在业务平台对客服务期间频繁的访问系统信息表这种热表,必然会大大的影响原有业务平台的对客性能,起到本末倒置的效果。

2、进行系统监控预警的核心技术主要由两个:一是能方便、快捷、稳定地采集到系统所有的数据;二是能在短时间内及时对采集到的大量数据进行计算和分析从而形成是否进行预警的决策。现在流行的数据采集技术是本文档来自技高网...

【技术保护点】

1.一种数据监控方法,其特征在于,应用于分布式流数据处理引擎,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,根据所述目标数据流进行实时监控计算,确定对所述目标数据流的监控结果,包括:

3.根据权利要求2所述的方法,其特征在于,根据所述目标数据流确定所述监控指标对应的监控数值,包括:

4.根据权利要求1所述的方法,其特征在于,实时通过分布式发布订阅消息系统获取由业务平台产生的目标数据流,包括:

5.根据权利要求1所述的方法,其特征在于,若所述监控结果满足告警结果,则将所述监控结果存储于数据库中,包括:

<p>6.根据权利要求...

【技术特征摘要】

1.一种数据监控方法,其特征在于,应用于分布式流数据处理引擎,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,根据所述目标数据流进行实时监控计算,确定对所述目标数据流的监控结果,包括:

3.根据权利要求2所述的方法,其特征在于,根据所述目标数据流确定所述监控指标对应的监控数值,包括:

4.根据权利要求1所述的方法,其特征在于,实时通过分布式发布订阅消息系统获取由业务平台产生的目标数据流,包括:

5.根据权利要求1所述的方法,其特征在于,若所述监...

【专利技术属性】
技术研发人员:王浩
申请(专利权)人:中国农业银行股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1