一种智慧运维数据管理系统技术方案

本发明专利技术涉及运维数据管理技术领域，尤其涉及一种智慧运维数据管理系统，包括智慧数据集成模块，该模块主要实现了从IT运维管控平台、IT集中运行运维数据管理监控抽取结构化实时数据、结构化实时数据、非结构化数据，并完成运维数据清洗、校验和处理；运维数据管理权限机制，根据运维数据管理权限分级，按使用户类型，分为运维数据管理者和运维数据管理普通用户管理者，运维数据管理的权限主要包括设备信息管理、用户管理、管理员信息管理，上传的图片、文本文件管理、审核，普通用运维数据管理户权限主要包括通过二维码查看设备信息、设备搜索、个人信息件上传，使得信息运维数据管理更加安全稳定。加安全稳定。加安全稳定。

【技术实现步骤摘要】
一种智慧运维数据管理系统


[0001]本专利技术涉及运维数据管理
，具体为一种智慧运维数据管理系统。

技术介绍

[0002]使用运维管理工具可以完成两件重要的数据运维管理工作：一是协助开展数据管理体系的日常评估；二是执行数据质量的日常监测。以下结合中翰数据评估监测平台(DAM，数据运维管理工具，也称中翰数据保养平台)进行相关功能的介绍。
[0003]其中公开号为“CN115760477A”所公开的具有一种运维数据管理方法、系统、设备和存储介质“其中包括响应接收到的运维数据传输请求，获取运维数据传输请求携带的历史运维数据并进行存储；当接收到建立关联请求时，匹配建立关联请求确定对应的发送端，建立与发送端的传输关系；匹配成功后，发送历史运维数据至发送端并获取当前时刻的数据校验码；通过数据校验码判断历史运维数据是否完整发送；若否，则跳转执行匹配所述建立关联请求确定对应的发送端，建立与发送端的传输关系的步骤。解决了现有现代电网管理系统中运维数据保存分散的技术问题。本专利技术将运行设备历史试验记录集中管理，有利于现场数据分析，给试验人员和管理部门有效综合相关信息评估设备运行状态提供了便利”，同时其中公开号为“CN111930599B”所公开一种云服务系统的运维数据处理方法、装置及存储介质，多个云服务器、多个用户端、多个网络交换机及多个磁盘存储阵列的空间分布关系设置对应的运维数据管理服务器；实时采集多个云服务器、多个用户端、多个网络交换机及多个磁盘存储阵列的运维数据，将所述运维数据传输至对应的运维数据管理服务器；所述运维数据管理服务器对所述运维数据进行处理，判断对应的云服务器、用户端、网络交换机及磁盘存储阵列是否存在故障，如果是，则向用户发出警报。本专利技术根据空间分布关系，设置对应的运维数据管理服务器，在计算f(bi)时，在计算时可将bi2的计算后，保存在寄存器中，提高了计算速度，由于采用椭圆加密计算，安全性大为提高。
[0004]在现有的技术中还存在一下缺陷：现有的智慧运维数据管理较为单一，无法对访问者进行权限的设置，同时运维数据管理单一的方向进行管理，导致数据在应用的过程中，管理效果较差。

技术实现思路

[0005]针对现有技术的不足，本专利技术提供了供一种智慧运维数据管理系统，解决了上述
技术介绍
中的问题。
[0006]为实现上述目的，本专利技术提供如下技术方案：一种智慧运维数据管理系统，包括智慧数据集成模块，该模块主要实现了从IT运维管控平台、IT集中运行运维数据管理监控抽取结构化实时数据、结构化实时数据、非结构化数据，并完成运维数据清洗、校验和处理；
[0007]所述数据存储模块，该模块使用了运维数据管理文件系统、数据库多种运维数据管理库，数据集成模块按照数据类型、数据应用需求将数据存储到不同的运维数据管理系统中，从功能上将运维数据存储层划分为缓冲区、视图区、数据仓库、数据集市和进行数据
存储区；
[0008]所述数据计算模块，该模块用于对数据进行加工处理，为满足各类数据分析应用的不同时效性需求，计算模块采用线下运维计算和在智慧运维计算方式；
[0009]所述数据应用模块，该模块用于将智慧运维数据中清洗后的数据，智慧运维处理后的结果数据需求分配使用运维系统权限。
[0010]优选的，所述数据集成模块主要实现对智慧运维数据管控平台、智慧运维数据集中运行监控系统监控智慧运维数据集成，按照智慧运维数据质量规则对海量数据进行检验、对智慧运维数据清洗，运维信息系统的IT智慧运维数据具有多样性特征，有结构化实时监智慧运维数据、非结构化日志文本智慧运维数据，针对不同类型的智慧运维数据采用了不同的智慧运维数据集成方式，系统结构化设备台账类智慧运维数据进行数据集成，完成结构化实时监控智慧运维数据的集成，采用非结构化文本智慧运维数据进行集成，实现全类型数据的集成，各类智慧运维数据集中管理是为后期计算、分析使用，智慧运维数据质量的优劣直接影响到后期智慧运维数据应用的准确性与真实性，针对智慧运维数据集成过程按照智慧运维数据质量规则检测出数据，如智慧运维数据值明显错误、值异常、值缺失，选用数据整改，使智慧运维数据系统中的数据进行无用数据清理数据，保障了智慧运维数据中数据在后期应用。
[0011]优选的，所述数据存储模块采用智慧运维数据系统存储方式，智慧运维数据分布式存储具有高扩展性，不仅为海量智慧运维数据存储提供了保障，同时也为大智慧运维数据系统其他插件的使用提供了支撑数据库，数据系统库目的是构建面向分析的集成化数据环境,其采用了结构化数据存储媒介，可以用来进行智慧运维数据提取转化加载，集存储、查询和分析于一身存储在智慧运维数据系统的数据管理机制。
[0012]优选的，所述数据计算模块为数据分析及其他数据引用提供分布式运行引擎和协同智慧运维数据运维的功能，采用智慧运维数据平台的智能计算模块，该智慧运维数据模块基于Map和Reduce的数据处理过程，支持大批量智慧运维数据的离线计算、分析，智慧运维数据基于内存并行智慧运维数据处理框架，存放到内存中，对于选代智慧运维数据的效率更高，智慧运维数据优化整体数据处理流程大数据查询的延迟计算。
[0013]优选的，所述运维数据管理实时在线计算，采用了运维数据管理平台流计算引擎组件，该storm优化封装，运维数据管理流式计算是一种高实时性的计算模式，其将一定时间窗口内运维数据管理系统产生的流动数据直接导入内存进行实时计算，并从流动无序的运维数据管理中进行分析获取信息，满足现有的运维数据管理运行。
[0014]优选的，所述运维数据管理是整体项目数据资源，从运维数据管理整体结构上划分，项目运维数据管理资源分为基础的结构型资源和非结构型资源，对于运维数据管理将通过基础内容平台进行管理，供用户有效的查询浏览，运维数据管理具体包括设备资源库、故障处理记录资源库、分析统计资源库、内部运维数据管理资源库，通过对运维数据管理的有效分类，建立完善的运维数据管理。
[0015]优选的，所述运维数据管理为了保护网内的数据、文件、口令和控制信息，保护网上传输的数据，必须采取加密，网络传输采用加密方式，确保源端用户到目的端用户的运维数据管理安全，通过运用运维数据管理虚拟专用网，网络之间建立运维数据管理虚拟的专用通道，VPN运维数据管理的安全性通过加密保护，实现安全的公共网络上建立安全方便，
从而实现对智能运维数据管理运用。
[0016]优选的，所述运维数据管理权限机制，根据运维数据管理权限分级，按使用户类型，分为运维数据管理者和运维数据管理普通用户管理者，运维数据管理的权限主要包括设备信息管理、用户管理、管理员信息管理，上传的图片、文本文件管理、审核，普通用运维数据管理户权限主要包括通过二维码查看设备信息、设备搜索、个人信息件上传，使得信息运维数据管理更加安全稳定。
[0017]优选的，所述运维数据管理日常使用与维护操作用户通过终端扫描，进入个人运维数据管理信息页面，经注册完成后为合法用户，即可查询运维数据管理相关信息，以及修改使用人员的信本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种智慧运维数据管理系统，包括智慧数据集成模块，该模块主要实现了从IT运维管控平台、IT集中运行运维数据管理监控抽取结构化实时数据、结构化实时数据、非结构化数据，并完成运维数据清洗、校验和处理；所述数据存储模块，该模块使用了运维数据管理文件系统、数据库多种运维数据管理库，数据集成模块按照数据类型、数据应用需求将数据存储到不同的运维数据管理系统中，从功能上将运维数据存储层划分为缓冲区、视图区、数据仓库、数据集市和进行数据存储区；所述数据计算模块，该模块用于对数据进行加工处理，为满足各类数据分析应用的不同时效性需求，计算模块采用线下运维计算和在智慧运维计算方式；所述数据应用模块，该模块用于将智慧运维数据中清洗后的数据，智慧运维处理后的结果数据需求分配使用运维系统权限。2.根据权利要求1所述的一种智慧运维数据管理系统，其特征在于：所述数据集成模块主要实现对智慧运维数据管控平台、智慧运维数据集中运行监控系统监控智慧运维数据集成，按照智慧运维数据质量规则对海量数据进行检验、对智慧运维数据清洗，运维信息系统的IT智慧运维数据具有多样性特征，有结构化实时监智慧运维数据、非结构化日志文本智慧运维数据，针对不同类型的智慧运维数据采用了不同的智慧运维数据集成方式，系统结构化设备台账类智慧运维数据进行数据集成，完成结构化实时监控智慧运维数据的集成，采用非结构化文本智慧运维数据进行集成，实现全类型数据的集成，各类智慧运维数据集中管理是为后期计算、分析使用，智慧运维数据质量的优劣直接影响到后期智慧运维数据应用的准确性与真实性，针对智慧运维数据集成过程按照智慧运维数据质量规则检测出数据，如智慧运维数据值明显错误、值异常、值缺失，选用数据整改，使智慧运维数据系统中的数据进行无用数据清理数据，保障了智慧运维数据中数据在后期应用。3.根据权利要求1所述的一种智慧运维数据管理系统，其特征在于：所述数据存储模块采用智慧运维数据系统存储方式，智慧运维数据分布式存储具有高扩展性，不仅为海量智慧运维数据存储提供了保障，同时也为大智慧运维数据系统其他插件的使用提供了支撑数据库，数据系统库目的是构建面向分析的集成化数据环境，其采用了结构化数据存储媒介，可以用来进行智慧运维数据提取转化加载，集存储、查询和分析于一身存储在智慧运维数据系统的数据管理机制。4.根据权利要求1所述的一种智慧运维数据管理系统，其特征在于：所述数据计算模块为数据分析及其他数据引用提供分布式运行引擎和协同智慧运维数据运维的功能，采用智慧运维数据平台的智能计算模块，该智慧运维数据模块基于Map和Reduce的数据处理过程，支持大批量智慧运维数据的离线计算、分析，智慧运维数据基于内存并行智慧运维数据处理框架，存放到内存中，对于选代智慧运维数据的效率更高，智慧运维数据优化整体数据处理流程大数据查询的延迟计算。5.根据权利要求1所述的一种智慧运维数据管理系统，其特征在于：所述运维数据管理实时在线计算，采用了运维数据管理平台流计算引擎组件，该stor...

【专利技术属性】
技术研发人员：赵先明，
申请(专利权)人：北京红山信息科技研究院有限公司，
类型：发明
国别省市：