一种海量数据智能决策分析系统技术方案

本发明专利技术提供一种海量数据智能决策分析系统，所述系统包括数据采集模块、数据模型建立模块、数据监测模块、决策分析模块、协调调度模块、报警管理模块和报表管理模块；所述系统用于实时接收互联网端的海量数据，根据所获得的数据进行数据建模、智能计算分析，实时收发各服务器的数据信息并根据各服务器的运行状态进行控制。本发明专利技术海量数据智能决策分析系统对每个服务器进行按需分配，在前端对海量数据信息先进行数据抽取归类、重新撰写排版，再对各服务器进行数据筛选条件生成选项清单，然后对各服务器进行对应数据分配，从而缩短数据处理周期，节约时间成本。

【技术实现步骤摘要】
一种海量数据智能决策分析系统
本专利技术涉及大数据
，具体涉及一种海量数据智能决策分析系统。
技术介绍
近年来，随着网络的发展，在网络上流通的各类数据更是增长惊人，随着数据量的增加，大部分公司都创建了数据信息化存储处理系统，但数据也与日俱增，如何有效的整合这些数据，从而帮助快速、准确地做出决策，提高工作效率，是目前急需解决的问题。
技术实现思路
为至少在一定程度上克服相关技术中存在的问题，本申请提供一种海量数据智能决策分析系统。本专利技术的目的是采用下述技术方案实现的：本专利技术提供一种海量数据智能决策分析系统，其改进之处在于，所述系统包括数据采集模块、数据模型建立模块、数据监测模块、决策分析模块、协调调度模块、报警管理模块和报表管理模块；所述系统用于实时接收互联网端的海量数据，根据所获得的数据进行数据建模、智能计算分析，实时收发各服务器的数据信息并根据各服务器的运行状态进行控制。进一步地，所述数据采集模块用于系统建模提供数据，包括采集海量数据和各服务器的数据信息保存至临时数据库中。进一步地，所述数据模型建立模块，根据海量数据建立模型，根据各服务器的数据信息来分析每个服务器的存储状态，进行每个服务器的任务分配。进一步地，所述根据海量数据建立模型包括对临时数据库中的数据进行统一结构化处理；以按照内容和/或要闻将数据抽取归类，对数据重新撰写排版输出结果并录入系统数据库。进一步地，所述将数据抽取归类包括按照标签规则将数据进行分类处理，按照设定规则从所述抽取内容中抽取出关键内容并归类；所述数据重新撰写排版输出结果并录入系统数据库包括按照智能撰文算法将数据重新排版撰写，将重新排版撰写后数据源的数据，按照不同类别整理存放至系统数据库。进一步地，所述决策分析模块用于对各服务器进行决策分析并下发控制指令，其包括分析每个服务器的存储状态，从每个服务器选取要进行数据分析的选项组合，填写数据筛选条件，生成一份选项清单；将选项清单及对应的属性信息、数据筛选条件存储至数据模型建立模块；所述决策分析模块还包括，对各服务器的历史数据曲线、预测数据曲线、实际数据曲线、运行情况和计划执行情况进行分析。进一步地，所述协调调度模块根据选项清单及对应的属性信息、数据筛选条件，执行海量数据分析算法，遍历并校验海量数据分析算法，完成校验后将数据根据选项清单及对应的属性信息、数据筛选结果下发至各服务器。进一步地，所述数据监测模块，用于系统实时收集互联网端的海量数据，并以图表形式进行展示；所述以图表形式进行展示包括进行数据分发展示，并根据不同数据的应用场景进行不同图表形式的展示；所述报警管理模块，用于系统在接收互联网端的海量数据执行期间，如果数据为不良信息，则发出报警信息，及时进行信息回馈并对该数据信息处理分析并执行；所述报表管理模块，系统接收互联网端的海量数据的同时快速生成报告报表，生成的报告报表可直接存入系统，系统决策分析模块对报告报表上报表数据集合进行多维分析，生成决策分析报告。进一步地，所述服务器与系统建立实时在线的网络连接，所述服务器与系统进行双向通讯，上报各服务器的数据信息和接收系统下发的数据和调度指令，与系统的通讯经加密和校验。进一步地，所述服务器包括本地存储和数据断点续传，即便临时网络中断，仍能按计划执行调控任务，并记录调控结果；将网络中断时的数据自动存储下来，并及时上传到系统，以确保数据信息的完整性。为了对披露的实施例的一些方面有一个基本的理解，下面给出了简单的概括。该概括部分不是泛泛评述，也不是要确定关键/重要组成元素或描绘这些实施例的保护范围。其唯一目的是用简单的形式呈现一些概念，以此作为后面的详细说明的序言。与最接近的现有技术相比，本专利技术提供的技术方案具有的优异效果是：本专利技术海量数据智能决策分析系统对每个服务器进行按需分配，在前端对海量数据信息先进行数据抽取归类、重新撰写排版，再对各服务器进行数据筛选条件生成选项清单，然后对各服务器进行对应数据分配，从而缩短数据处理周期，节约时间成本。本专利技术还进行数据监测、报警管理和报表管理，实时监控数据的进度及确保数据的安全性。为了上述以及相关的目的，下面的说明以及附图详细说明某些示例性方面，并且其指示的仅仅是各个实施例的原则可以利用的各种方式中的一些方式。其它的益处和新颖性特征将随着下面的详细说明结合附图考虑而变得明显，所公开的实施例是要包括所有这些方面以及它们的等同。附图说明此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本申请的实施例，并与说明书一起用于解释本申请的原理。图1是本专利技术提供的一种海量数据智能决策分析系统结构示意图。具体实施方式下面结合附图对本专利技术的具体实施方式作进一步的详细说明。以下描述和附图充分地示出本专利技术的具体实施方案，以使本领域的技术人员能够实践它们。其他实施方案可以包括结构的、逻辑的、电气的、过程的以及其他的改变。实施例仅代表可能的变化。除非明确要求，否则单独的组件和功能是可选的，并且操作的顺序可以变化。一些实施方案的部分和特征可以被包括在或替换其他实施方案的部分和特征。本专利技术的实施方案的范围包括权利要求书的整个范围，以及权利要求书的所有可获得的等同物。在本文中，本专利技术的这些实施方案可以被单独地或总地用术语“专利技术”来表示，这仅仅是为了方便，并且如果事实上公开了超过一个的专利技术，不是要自动地限制该应用的范围为任何单个专利技术或专利技术构思。如图1所示，本专利技术提供一种海量数据智能决策分析系统，所述系统包括数据采集模块、数据模型建立模块、数据监测模块、决策分析模块、协调调度模块、报警管理模块和报表管理模块；所述系统用于实时接收互联网端的海量数据，根据所获得的数据进行数据建模、智能计算分析，实时收发各服务器的数据信息并根据各服务器的运行状态进行控制。上述技术方案中，所述数据采集模块用于系统建模提供数据，包括采集海量数据和各服务器的数据信息；上述技术方案中，所述采集海量数据和各服务器的数据信息包括用以根据网络爬虫抓取得到数据信息储放至临时数据库中。上述技术方案中，所述数据模型建立模块，根据海量数据建立模型，根据各服务器的数据信息来分析每个服务器的存储状态，进行每个服务器的任务分配，作适当的存储准备。上述技术方案中，所述根据海量数据建立模型包括对所述临时数据库中的数据进行统一结构化处理；用以按照内容和/或要闻将数据抽取归类，对数据重新撰写排版输出结果并录入系统数据库。上述技术方案中，所述将数据抽取归类包括按照标签规则将数据进行分类处理，按照设定规则从所述抽取内容中抽取出关键内容并归类；所述数据重新撰写排版输出结果并录入系统数据库包括按照智能撰文算法将数据重新排版撰写，将重新排版撰写后数据源的数据并按照不同类别整理存放至系统数据库。上述技术方案中，所述系统数据库可对数据进行数据查询、数据修改、实时数据采样规则编辑。上述技术方案中，所述决策分析模块用于对各服务器进行决策分析并下发控制指令，其包括分析每个服务器的存储状态，从每个服务器选取要进行数据分析的选项组合，填写数据筛选条件，生成一份选项清单；将选项清单及对应的属性信息、数据筛选条件存储至数据模型建立模块。上述技术方案中，所述决策分析模块还包括，对各服务器的历史数据曲线、预测数据曲线、实际数据曲线、运行情况和计划执行情况本文档来自技高网...

【技术保护点】
1.一种海量数据智能决策分析系统，其特征在于，所述系统包括数据采集模块、数据模型建立模块、数据监测模块、决策分析模块、协调调度模块、报警管理模块和报表管理模块；所述系统用于实时接收互联网端的海量数据，根据所获得的数据进行数据建模、智能计算分析，实时收发各服务器的数据信息并根据各服务器的运行状态进行控制。

【技术特征摘要】
1.一种海量数据智能决策分析系统，其特征在于，所述系统包括数据采集模块、数据模型建立模块、数据监测模块、决策分析模块、协调调度模块、报警管理模块和报表管理模块；所述系统用于实时接收互联网端的海量数据，根据所获得的数据进行数据建模、智能计算分析，实时收发各服务器的数据信息并根据各服务器的运行状态进行控制。2.如权利要求1所述的一种海量数据智能决策分析系统，其特征在于，所述数据采集模块用于系统建模提供数据，包括采集海量数据和各服务器的数据信息保存至临时数据库中。3.如权利要求1所述的一种海量数据智能决策分析系统，其特征在于，所述数据模型建立模块，根据海量数据建立模型，根据各服务器的数据信息来分析每个服务器的存储状态，进行每个服务器的任务分配。4.如权利要求3所述的一种海量数据智能决策分析系统，其特征在于，所述根据海量数据建立模型包括对临时数据库中的数据进行统一结构化处理；以按照内容和/或要闻将数据抽取归类，对数据重新撰写排版输出结果并录入系统数据库。5.如权利要求4所述的一种海量数据智能决策分析系统，其特征在于，所述将数据抽取归类包括按照标签规则将数据进行分类处理，按照设定规则从所述抽取内容中抽取出关键内容并归类；所述数据重新撰写排版输出结果并录入系统数据库包括按照智能撰文算法将数据重新排版撰写，将重新排版撰写后数据源的数据，按照不同类别整理存放至系统数据库。6.如权利要求1所述的一种海量数据智能决策分析系统，其特征在于，所述决策分析模块用于对各服务器进行决策分析并下发控制指令，其包括分析每个服务器的存储状态，从每个服务器选取要进行数据分析的选项组合，填写数据筛选条件，生成一份选项清单；将选...

【专利技术属性】
技术研发人员：何烈军，何宇亮，
申请(专利权)人：广州奥佳软件技术有限公司，
类型：发明
国别省市：广东,44