一种基于Flink实现的隐私网络监控平台制造技术

技术编号:34566467 阅读:32 留言:0更新日期:2022-08-17 12:56
本发明专利技术公开了一种基于Flink实现的隐私网络监控平台,包括与应用程序连接的第一kafka处理单元、与第一kafka处理单元连接的第一flink指标处理单元、以及与第一flink指标处理单元连接的数据存储层;其中,第一kafka处理单元用于写入应用程序的数据资源,并对数据资源进行消息的定义;第一flink指标处理单元用于根据其定义的模型处理消息,并根据定义的模型对数据资源进行执行处理后,将执行处理后的数据保存到数据存储层中。本发明专利技术数据可靠性强、支持大数据量和复杂的数据分析,并且,可扩展的分析项设置。的分析项设置。的分析项设置。

【技术实现步骤摘要】
一种基于Flink实现的隐私网络监控平台


[0001]本专利技术涉及计算机软件领域,尤其涉及的是一种基于Flink实现的隐私网络监控平台。

技术介绍

[0002]目前业界常用的监控系统包括Zabbix、Prometheus等,但是对于复杂的数据分析,丰富的数据展示,数据可靠性等要求显得力不从心。
[0003]因此,现有技术存在缺陷,需要改进。

技术实现思路

[0004]本专利技术所要解决的技术问题是:提供一种数据可靠性强、支持大数据量和复杂的数据分析,并且,可扩展的分析项设置的基于Flink实现的隐私网络监控平台。
[0005]本专利技术的技术方案如下:一种基于Flink实现的隐私网络监控平台,包括与应用程序连接的第一kafka处理单元、与第一kafka处理单元连接的第一flink指标处理单元、以及与第一flink指标处理单元连接的数据存储层;其中,第一kafka处理单元用于写入应用程序的数据资源,并对数据资源进行消息的定义;第一flink指标处理单元用于根据其定义的模型处理消息,并根据定义的模型对数据资源进行执本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于Flink实现的隐私网络监控平台,其特征在于,包括与应用程序连接的第一kafka处理单元、与第一kafka处理单元连接的第一flink指标处理单元、以及与第一flink指标处理单元连接的数据存储层;其中,第一kafka处理单元用于写入应用程序的数据资源,并对数据资源进行消息的定义;第一flink指标处理单元用于根据其定义的模型处理消息,并根据定义的模型对数据资源进行执行处理,将执行处理后的数据保存到数据存储层中。2.根据权利要求1所述的基于Flink实现的隐私网络监控平台,其特征在于:还包括一数据展示层,用于展示存储在数据存储层的数据。3.根据权利要求2所述的基于Flink实现的隐私网络监控平台,其特征在于:在第一kafka处理单元写入应用程序的数据资源时,是通过应用程序将其数据资源输入到第一kafka处理单元的对应主题中。4.根据权利要求3所述的基于Flink实现的隐私网络监控平台,其特征在于:第一kafka处理单元在对数据资源进行消息的定义时,其具体是定义消息的key和消息的value。5.根据权利要求4所述的基于Flink实现的隐私网络监控平台,其特征在于:所述消息的key为组织id或任务id,所述消息的value为资源信息或任务信息。6.根据权利...

【专利技术属性】
技术研发人员:陈岱吕晓一
申请(专利权)人:上海阵方科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1