一种大数据中心监控数据可视化系统及方法技术方案

本发明专利技术涉及数据可视化技术领域，具体公开了一种大数据中心数据可视化系统，其中，包括：数据采集模块，数据采集模块用于实时采集多个被监控设备的状态信息；数据处理模块，数据处理模块用于处理状态信息，并生成处理结果；数据管理模块，数据管理模块用于存储状态信息和处理结果；数据可视化模块，数据可视化模块用于根据运维实际业务场景分别以不同的web页面显示处理结果和状态信息种。本发明专利技术还公开了一种大数据中心数据可视化方法。本发明专利技术提供的大数据中心数据可视化系统从多个视角对被监控设备进行组织和集中可视化展现，方便了不同人员在不同场景下完成业务时，能够快速获取和确认状况，及时发现故障。

【技术实现步骤摘要】
一种大数据中心监控数据可视化系统及方法
本专利技术涉及数据可视化
，尤其涉及一种大数据中心监控数据可视化系统及一种大数据中心监控数据可视化方法。
技术介绍
随着大数据技术发展，各类大数据中间件运用于大数据中心，为多源异构的海量数据提供存储管理服务。软件设施种类和数量的增加，使得监控数据的种类随着提高，从而提高了运维监控工作的难度。现有技术中公开了一些监控系统，如公开号为CN106549829A的专利文献《大数据计算平台监控系统及方法》；公开号为CN103001806A的专利文献《用于IT系统的分布式运维监控系统》、公开号为CN106375119A的专利文献《运维监控系统及方法》等等，分析其中的技术细节可知，其对由多种大数据中间件组成并提供存储管理服务的数据中心，缺乏对监控数据的有效整理，主要体现在以下几个方面：第一方面，当前工作缺乏对中间件软件，尤其是各类分布式文件系统、数据库系统、内存数据库等大数据中间件缺乏全面监控；第二方面，当前工作缺乏对监控数据的组织以及与实际业务的结合，运维人员需要依靠经验整理这些数据。
技术实现思路
本专利技术旨在至少解决现有技术中存在的技术问题之一，提供一种大数据中心监控数据可视化系统及一种大数据中心监控数据可视化方法，以解决现有技术中的问题。作为本专利技术的第一个方面，提供一种大数据中心数据可视化系统，其中，所述大数据中心数据可视化系统包括：数据采集模块，所述数据采集模块用于实时采集多个被监控设备的状态信息，其中所述被监控设备包括硬件设备和中间件软件；数据处理模块，所述数据处理模块用于处理所述状态信息，并生成处理结果；数据管理模块，所述数据管理模块用于存储所述状态信息和所述处理结果；数据可视化模块，所述数据可视化模块用于根据运维实际业务场景分别以不同的web页面显示所述处理结果和所述状态信息，其中所述运维实际业务场景包括网络状况监控场景、集群状态监控场景、高负载任务监控场景、日常巡检场景和重点监控场景中的任意一种。优选地，所述数据可视化模块包括：网络状况单元，所述网络状况单元用于以网络拓扑图的方式集中显示所述被监控设备的网络资源运行状态、网络资源运行能力和网络故障信息；集群状态单元，所述集群状态单元用于集中显示所述被监控设备的中间件软件运行状态、中间件软件运行能力和存储资源；故障状态单元，所述故障状态单元用于发现发生故障的被监控设备；日常巡检单元，所述日常巡检单元用于以表格的形式显示被监控设备的运行状态；重点监控单元，所述重点监控单元用于选择所述网络状态单元、集群状态单元和故障状态单元中的与被监控设备相关的状态信息的显示结果，并用于在同一个web页面上显示。优选地，所述网络状态单元包括：硬件连接显示单元，所述硬件连接显示单元用于显示网络设备信息；软件连接显示单元，所述软件连接显示单元用于显示软件之间的调用情况；软硬件连接显示单元，所述软硬件连接显示单元用于显示软件输入输出信息。优选地，所述网络设备信息包括网络传输速度、网络占用率和网络丢包率。优选地，所述软件之间的调用情况包括中间件软件之间接收请求总量、发送请求总量、返回结果的数量和请求成功率。优选地，所述软件输入输出信息包括中间件软件占用的网络带宽、硬盘吞吐量和硬盘读写数据量。优选地，所述集群状态显示单元包括：集群基础信息显示单元，所述集群基础信息显示单元用于显示不同集群间共有的监控信息；分布式文件系统监控显示单元，所述分布式文件系统监控显示单元用于实现多种分布式文件系统集群监控指标的可视化；内存数据库系统监控显示单元，所述内存数据库系统监控显示单元用于实现多种内存数据库系统监控指标的可视化；分布式列是存储系统监控显示单元，所述分布式列是存储系统监控显示单元用于实现存储系统集群监控指标的可视化；分布式数据库系统监控显示单元，所述分布式数据库系统监控显示单元用于实现多种分布式数据库系统集群监控指标的可视化。优选地，所述故障状态单元包括：高危设备监控显示和易损设备监控显示。优选地，所述日常巡检单元包括：容量巡检显示单元，所述容量巡检显示单元用于实现所述被监控设备的容量占用情况的监控指标的可视化；网络巡检信息显示单元，所述网络巡检信息显示单元用于实现所述被监控设备的网络情况的监控指标的可视化；设备巡检信息显示单元，所述设备巡检信息显示单元用于实现硬件设备监控指标的可视化。作为本专利技术的第二个方面，提供一种大数据中心数据可视化方法，其中，所述大数据中心数据可视化方法包括：实时采集多个被监控设备的状态信息；处理所述状态信息，并生成处理结果；存储所述状态信息和所述处理结果；根据运维实际业务场景分别以不同的web页面显示所述处理结果和所述状态信息，其中所述运维实际业务场景包括网络状况监控场景、集群状态监控场景、高负载任务监控场景、日常巡检场景和重点监控场景中的任意一种。本专利技术提供的大数据中心数据可视化系统，通过数据采集模块实时采集被监控设备的状态信息，并对其进行处理和存储，最终根据运维实际业务场景通过数据可视化模块进行可视化显示，从多个视角对被监控设备进行组织和集中可视化展现，方便了不同人员在不同场景下完成业务时，能够快速获取和确认状况，及时发现故障。附图说明附图是用来提供对本专利技术的进一步理解，并且构成说明书的一部分，与下面的具体实施方式一起用于解释本专利技术，但并不构成对本专利技术的限制。在附图中：图1为本专利技术提供的大数据中心数据可视化系统的结构框图。图2为本专利技术提供的大数据中心数据可视化方法的流程图。具体实施方式以下结合附图对本专利技术的具体实施方式进行详细说明。应当理解的是，此处所描述的具体实施方式仅用于说明和解释本专利技术，并不用于限制本专利技术。作为本专利技术的第一个方面，提供一种大数据中心数据可视化系统，其中，如图1所示，所述大数据中心数据可视化系统100包括：数据采集模块110，所述数据采集模块110用于实时采集多个被监控设备的状态信息，其中所述被监控设备包括硬件设备和中间件软件；数据处理模块120，所述数据处理模块120用于处理所述状态信息，并生成处理结果；数据管理模块130，所述数据管理模块130用于存储所述状态信息和所述处理结果；数据可视化模块140，所述数据可视化模块140用于根据运维实际业务场景分别以不同的web页面显示所述处理结果和所述状态信息，其中所述运维实际业务场景包括网络状况监控场景、集群状态监控场景、高负载任务监控场景、日常巡检场景和重点监控场景中的任意一种。本专利技术提供的大数据中心数据可视化系统，通过数据采集模块实时采集被监控设备的状态信息，并对其进行处理和存储，最终根据运维实际业务场景通过数据可视化模块进行可视化显示，从多个视角对被监控设备进行组织和集中可视化展现，方便了不同人员在不同场景下完成业务时，能够快速获取和确认状况，及时发现故障。具体地，所述数据采集模块110用于采集和汇聚多个被监控设备的状态信息，其中所述被监控设备包括硬件设备和中间件软件，所述硬件设备包括网络设备、计算设备和存储设备，所述中间件软件包括分布式文件系统、内存数据库系统、分布式列式存储系统和分布式数据库系统等。具体地，所述数据可视化模块140从运维实际业务场景出发，整理监控指标，并以不同的web页面进行结果显示。运维人员在执行某个大数据中心监控本文档来自技高网...

【技术保护点】
1.一种大数据中心数据可视化系统，其特征在于，所述大数据中心数据可视化系统包括：数据采集模块，所述数据采集模块用于实时采集多个被监控设备的状态信息，其中所述被监控设备包括硬件设备和中间件软件；数据处理模块，所述数据处理模块用于处理所述状态信息，并生成处理结果；数据管理模块，所述数据管理模块用于存储所述状态信息和所述处理结果；数据可视化模块，所述数据可视化模块用于根据运维实际业务场景分别以不同的web页面显示所述处理结果和所述状态信息，其中所述运维实际业务场景包括网络状况监控场景、集群状态监控场景、高负载任务监控场景、日常巡检场景和重点监控场景中的任意一种。

【技术特征摘要】
1.一种大数据中心数据可视化系统，其特征在于，所述大数据中心数据可视化系统包括：数据采集模块，所述数据采集模块用于实时采集多个被监控设备的状态信息，其中所述被监控设备包括硬件设备和中间件软件；数据处理模块，所述数据处理模块用于处理所述状态信息，并生成处理结果；数据管理模块，所述数据管理模块用于存储所述状态信息和所述处理结果；数据可视化模块，所述数据可视化模块用于根据运维实际业务场景分别以不同的web页面显示所述处理结果和所述状态信息，其中所述运维实际业务场景包括网络状况监控场景、集群状态监控场景、高负载任务监控场景、日常巡检场景和重点监控场景中的任意一种。2.根据权利要求1所述的大数据中心数据可视化系统，其特征在于，所述数据可视化模块包括：网络状况单元，所述网络状况单元用于以网络拓扑图的方式集中显示所述被监控设备的网络资源运行状态、网络资源运行能力和网络故障信息；集群状态单元，所述集群状态单元用于集中显示所述被监控设备的中间件软件运行状态、中间件软件运行能力和存储资源；故障状态单元，所述故障状态单元用于发现发生故障的被监控设备；日常巡检单元，所述日常巡检单元用于以表格的形式显示被监控设备的运行状态；重点监控单元，所述重点监控单元用于选择所述网络状态单元、集群状态单元和故障状态单元中的与被监控设备相关的状态信息的显示结果，并用于在同一个web页面上显示。3.根据权利要求2所述的大数据中心数据可视化系统，其特征在于，所述网络状态单元包括：硬件连接显示单元，所述硬件连接显示单元用于显示网络设备信息；软件连接显示单元，所述软件连接显示单元用于显示软件之间的调用情况；软硬件连接显示单元，所述软硬件连接显示单元用于显示软件输入输出信息。4.根据权利要求3所述的大数据中心数据可视化系统，其特征在于，所述网络设备信息包括网络传输速度、网络占用率和网络丢包率。5.根据权利要求3所述的大数据中心数据可视化系统，其特征在于，所述软件之间的调用情况包括...

【专利技术属性】
技术研发人员：崔光霁，王艳军，赵旦谱，台宪青，
申请(专利权)人：江苏物联网研究发展中心，
类型：发明
国别省市：江苏,32