一种数据智能可视化系统及方法技术方案

一种数据智能可视化系统及方法，包括数据源配置管理模块，用于对数据源进行包括添加、删除和编辑的操作；数据格式化管理模块，用于实现对数据源中的表、字段中数据的抽取、转换和清洗并保存到系统后台的数据库中；数据分析处理模块，接收经数据格式化管理模块格式化处理后的数据并进行包括数据计算、分析、统计的操作，同时将分析处理后的数据再次存数据库；可视化配置管理模块，用于实现数据动态的可视化展现，同时提供包括数据查询、挖掘、分析的功能，本申请提供一种数据智能可视化系统及方法，提升海量数据的处理速度，管理人员可以通过丰富的视觉展现来获取和掌握当前IT系统的健康状况，直观高效。

A Data Intelligent Visualization System and Method

An intelligent data visualization system and method includes a data source configuration management module, which is used to add, delete and edit data sources, and a data formatting management module, which is used to extract, transform and clean data from tables and fields in data sources and save them to the database in the background of the system. Data analysis and processing module receives data formatted by data formatting management module and carries out operations including data calculation, analysis and statistics. At the same time, the data after analysis and processing are stored in the database again. Visual configuration management module is used to realize the visualization of data dynamics, and provides the number of data included. According to the functions of query, mining and analysis, this application provides an intelligent data visualization system and method to improve the processing speed of massive data. Managers can acquire and master the health status of current IT system through rich visual presentation, which is intuitive and efficient.

【技术实现步骤摘要】
一种数据智能可视化系统及方法
本专利技术涉及数据可视化
，具体涉及一种数据智能可视化系统及方法。
技术介绍
近些年来，随着IT技术的高速发展，企业机房内的IT设备无论从类型还是数量上来说，都呈现出爆发式的增长，为了管理好这些IT设备，管理人员势必要收集这些设备的性能和可用性数据来做分析和维护，那么怎样利用好这些数据，成为了当前企业IT运维工作中异常重要的一个环节，数据可视化软件就在这种大环境下应运而生。现有的可视化软件平台由于利用的是较早的技术和算法，这些软件平台更多的只是在做传统数据统计、数据分析和展现的工作，那么在信息爆炸的今天，企业IT设备和业务系统的数据量正在以TB级别的量级迅猛增长，传统的可视化软件平台已经无法满足现有企业对数据的智能分析和展现需求，无法适应当前信息技术的发展和企业的需求，主要的不足有以下几点：1、技术水平落后、操作使用复杂；2、展现界面单一、灵活度低、控件丰富度不够；3、只能满足单维度的数据查询、分析和展现；4、可扩展性弱，无法支持多数据源；5、数据处理性能较弱；6、无法支持移动端的查询和展现。
技术实现思路
针对现有技术的不足，本公司提供一种数据智能可视化系统，提升海量数据的处理速度，管理人员可以通过丰富的视觉展现来获取和掌握当前IT系统的健康状况，直观高效，同时也提供对应该系统的可视化方法，其技术方案如下：一种数据智能可视化系统，包括：数据源配置管理模块，包括数据源添加模块、数据源删除模块和数据源编辑模块，用于对数据源进行包括添加、删除和编辑的操作；数据格式化管理模块，用于实现对数据源中的表、字段中数据的抽取、转换和清洗并保存到系统后台的数据库中；数据分析处理模块，接收经数据格式化管理模块格式化处理后的数据并进行包括数据计算、分析、统计的操作，同时将分析处理后的数据再次存数据库；可视化配置管理模块，包括可视化展现模块、数据查询模块、数据挖掘模块和数据分析模块，用于实现数据动态的可视化展现，同时提供包括数据查询、挖掘、分析的功能。进一步地，所述数据格式化管理模块包括数据抽取模块、数据转换模块、数据清洗模块和数据保存模块，分别对应地用于对表、字段中数据进行抽取、转换和清洗操作。进一步地，所述数据分析处理模块包括数据计算模块、数据分析模块、数据统计模块和数据保存模块，分别对应地用于对经数据格式化管理模块格式化处理后的数据进行数据计算、分析、统计和保存操作。一种数据智能可视化方法，包括以下步骤：S1、配置数据源：管理人员将IT系统和业务系统的数据库中的数据作为分析和展现对象，配置好对应的数据源；S2、配置展现表和字段：根据已配置的数据源，筛选需要用的表和字段，同时定义好表与表、字段与字段之间的关联关系；S3、数据关联分析处理：将已经筛选好的数据利用系统内部的智能分析算法，自动计算和分析来实现动态基线、智能预测，并将处理完的数据保存到系统后台的数据库中；S4、定制可视化展现:利用可视化展现模块中的数据展现控件，管理人员通过拖拉拽控件的方式，结合已经处理的数据定制出丰富的可视化展现，同时根据IT系统和业务系统实际的情况进行动态的更新、预测。进一步地，步骤S1中支持的数据源包括文本、表格、JSON数据、关系型数据库。研究表明，人类对外获取的信息80%以上是通过视觉方式获得的，为了帮助企业IT运维人员更有效的使用设备的数据，本公司结合前端展现技术和大数据技术，开发出本套智能可视化软件平台，提升了海量数据的处理速度，使得每天产生的数据都能够得到充分的利用，可以方便管理人员快速高效的管理和展现各类IT数据。附图说明下面通过具体实施方式结合附图对本专利技术作进一步详细说明。图1为本专利技术的功能模块图；图2为本专利技术的工作流程图。其中，1、数据源配置管理模块；11、数据源添加模块；12、数据源编辑模块；13、数据源删除模块；2、数据格式化管理模块；21、数据抽取模块；22、数据转化模块；23、数据清洗模块；24、数据保存模块；3、数据分析处理模块；31、数据计算模块；32、数据分析模块；33、数据统计模块；34、数据保存模块；4、可视化配置管理模块；41、可视化展现模块；42、数据查询模块；43、数据挖掘模块；44、数据分析模块。具体实施方式下面通过具体实施方式结合附图对本专利技术作进一步详细说明。如图2所示，一种数据智能可视化方法，包括以下步骤：S1、配置数据源：管理人员将IT系统和业务系统的数据库中的数据作为分析和展现对象，配置好对应的数据源；作为智能可视化软件平台，数据源是整个平台的根本，本申请可以支持多种类型的数据源，包括文本、表格、JSON数据、关系型数据库等，管理人员可以将IT系统和业务系统的数据库中的数据作为分析和展现的对象，在使用本申请产品前，必须要配置好对应的数据源。S2、配置展现表和字段：根据已配置的数据源，筛选需要用的表和字段，同时定义好表与表、字段与字段之间的关联关系；根据已配置的数据源，筛选需要用的表和字段，同时定义好表与表、字段与字段之间的关联关系，方便后续进行计算和处理。S3、数据关联分析处理：将已经筛选好的数据利用系统内部的智能分析算法，自动计算和分析来实现动态基线、智能预测，并将处理完的数据保存到系统后台的数据库中；S4、定制可视化展现:利用可视化展现模块41中的数据展现控件，管理人员通过拖拉拽控件的方式，结合已经处理的数据定制出丰富的可视化展现，同时根据IT系统和业务系统实际的情况进行动态的更新、预测。本申请产品的可视化定制具有高度的灵活性，管理人员可以通过拖拉拽数据展现控件的方式，结合已经处理的数据定制出丰富的可视化展现，同时这些可视化的展现页面均可以根据IT系统和业务系统实际的情况动态地进行更新、预测。步骤S1中支持的数据源包括文本、表格、JSON数据、关系型数据库。如图1所示，本专利技术的数据智能可视化系统由以下四个功能模块构成，包括：数据源配置管理模块1，包括数据源添加模块11、数据源删除模块13和数据源编辑模块12，用于对数据源进行包括添加、删除和编辑的操作；数据源配置管理模块1用于实现对数据源添加、删除和编辑等功能，通过该功能模块，管理人员可以快速简洁的配置相应的IT系统和业务系统的数据库作为可视化系统的数据源，利于后续的数据处理和展现。数据格式化管理模块2，用于实现对数据源中的表、字段中数据的抽取、转换和清洗并保存到系统后台的数据库中；数据格式化管理模块2是实现对表、字段中数据的抽取、转换、清洗和保存，通过该功能模块，管理人员可以配置数据表、字段，同时将有效数据进行格式化处理，统一数据的格式并保存到系统后台的数据库。数据分析处理模块3，接收经数据格式化管理模块2格式化处理后的数据并进行包括数据计算、分析、统计的操作，同时将分析处理后的数据再次存数据库；可视化配置管理模块4，包括可视化展现模块41、数据查询模块42、数据挖掘模块43和数据分析模块44，用于实现数据动态的可视化展现，同时提供包括数据查询、挖掘、分析的功能。可视化配置管理模块4是通过拖拉拽的方式将数据展现控件配置到Dashboard中，实现数据动态智能的可视化展现，同时提供数据查询、数据挖掘、数据分析、性能预测查询、决策查询等功能。其中，所述数据格式化管理模块2包括数据抽取模块21、数据本文档来自技高网...

【技术保护点】
1.一种数据智能可视化系统，其特征在于，包括：数据源配置管理模块，包括数据源添加模块、数据源删除模块和数据源编辑模块，用于对数据源进行包括添加、删除和编辑的操作；数据格式化管理模块，用于实现对数据源中的表、字段中数据的抽取、转换和清洗并保存到系统后台的数据库中；数据分析处理模块，接收经数据格式化管理模块格式化处理后的数据并进行包括数据计算、分析、统计的操作，同时将分析处理后的数据再次存数据库；可视化配置管理模块，包括可视化展现模块、数据查询模块、数据挖掘模块和数据分析模块，用于实现数据动态的可视化展现，同时提供包括数据查询、挖掘、分析的功能。

【技术特征摘要】
1.一种数据智能可视化系统，其特征在于，包括：数据源配置管理模块，包括数据源添加模块、数据源删除模块和数据源编辑模块，用于对数据源进行包括添加、删除和编辑的操作；数据格式化管理模块，用于实现对数据源中的表、字段中数据的抽取、转换和清洗并保存到系统后台的数据库中；数据分析处理模块，接收经数据格式化管理模块格式化处理后的数据并进行包括数据计算、分析、统计的操作，同时将分析处理后的数据再次存数据库；可视化配置管理模块，包括可视化展现模块、数据查询模块、数据挖掘模块和数据分析模块，用于实现数据动态的可视化展现，同时提供包括数据查询、挖掘、分析的功能。2.如权利要求1所述的一种数据智能可视化系统，其特征在于，所述数据格式化管理模块包括数据抽取模块、数据转换模块、数据清洗模块和数据保存模块，分别对应地用于对表、字段中数据进行抽取、转换和清洗操作。3.如权利要求1所述的一种数据智能可视化系统，其特征在于，所述数据分析处理模块包括数据计算模块、数据分析模块、数据统计模块和数据...

【专利技术属性】
技术研发人员：周松，杨远生，
申请(专利权)人：上海宏时数据系统有限公司，
类型：发明
国别省市：上海,31