【技术实现步骤摘要】
一种大数据计算平台监控系统
本专利技术属于平台监控
,具体的说是一种大数据计算平台监控系统。
技术介绍
大数据,指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合,是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产,由于数据量庞大因此数据在分析时需要借助分布式计算机集群来共同工作从而产生了大数据平台。随着集群的数据日趋庞大,用户的应用越来越多,使用的模型也越来越复杂大数据平台作业运行和查询分析都会出现瓶颈,计算量指数级上升,并且对实时性的要求越来越高,大数据平台需要监控系统对各个计算机集群进行实时监控。中国专利公开了一种大数据平台的监控系统,专利申请号为2019102690112,大数据平台监控系统包括集群监控单元、节点性能监控单元、作业运行监控单元和告警单元,其中所述群监控单元、所述节点性能监控单元和所述作业运行监控单元均包括监控代理模块和监控插件模块。虽然上述专利可以全面的监控到大数据平台工作中各部分的工作状态;但现有的平台的监控 ...
【技术保护点】
1.一种大数据计算平台监控系统,其特征在于:包括数据采集模块、数据处理模块、数据存储模块和数据展示模块;/n所述数据采集模块建立在大数据平台上,以至少3种方式采集监控信息,如分布式文件系统信息、计算资源使用信息和作业运行状态信息,并对这些运行状态信息进行解析统计,存放至数据库中;/n所述数据处理模块通过对Hadoop组件的运行信息进行处理和分析,从而获取大数据平台运行状态监控信息;所述数据处理模块还能够在统计分析数据过程中进行异常监测,当发现异常后,调用报警模块,向用户和管理员发送报警信息;/n所述数据存储模块包括命令执行数据库、执行信息实时数据库、实时作业数据库、监控信息 ...
【技术特征摘要】
1.一种大数据计算平台监控系统,其特征在于:包括数据采集模块、数据处理模块、数据存储模块和数据展示模块;
所述数据采集模块建立在大数据平台上,以至少3种方式采集监控信息,如分布式文件系统信息、计算资源使用信息和作业运行状态信息,并对这些运行状态信息进行解析统计,存放至数据库中;
所述数据处理模块通过对Hadoop组件的运行信息进行处理和分析,从而获取大数据平台运行状态监控信息;所述数据处理模块还能够在统计分析数据过程中进行异常监测,当发现异常后,调用报警模块,向用户和管理员发送报警信息;
所述数据存储模块包括命令执行数据库、执行信息实时数据库、实时作业数据库、监控信息数据库和统计信息数据库;
所述数据展示模块采用多块相互连接的LED显示装置形成的LED显示大屏,使得LED显示大屏能够展示监控信息及用户交互管理,并提供异常报警功能;
所述报警模块用于对监控到的异常数据进行报警,同时还能够对出现异常的LED显示板(2)管理员发送报警信息;
其中,LED显示装置包括LED安装架(1)、LED显示板(2)、固定板(3)和调整更换装置(4);所述LED安装架(1)固定安装到监控室内,且LED安装架(1)上排列开设有多个阶梯插接槽(11);所述LED显示板(2)固定到固定板(3)上,且LED显示板(2)插接安装到阶梯插接槽(11)内;所述LED安装架(1)的显示端面通过柔性LED膜相互连通到LED显示板(2)的端面;所述调整更换装置(4)设置在LED安装架(1)的背面,且调整更换装置(4)用于对LED安装架(1)上设置的多个LED显示板(2)进行维修更换;每个所述固定板(3)上均设置有标记灯。
2.根据权利要求1所述的一种大数据计算平台监控系统,其特征在于:所述调整更换装置(4)包括转动丝杆(41)、丝杆滑块(42)、U型固定架(43)、转动轴(44)、转动套(45)、输送带(46)、电动伸缩杆(47)、固定推板(48)和橡胶吸盘(49);所述转动丝杆(41)对称转动设置在LED安装架(1)的背面,且转动丝杆(41)上套接有丝杆滑块(42);所述转动丝...
【专利技术属性】
技术研发人员:许良云,汪彬彬,
申请(专利权)人:合肥易知谷信息科技有限公司,
类型:发明
国别省市:安徽;34
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。