一种大数据运算过程处理系统及其方法技术方案

本发明专利技术公开了一种大数据运算过程处理系统及其方法，包括：服务端和解析端，所述服务端内还包括一个用于存储全部原始数据的存储模块，所述解析端内包括缓存模块、函数编辑模块、方言解析模块、数据实时采集模块、数据实时处理模块和执行引擎，所述缓存模块分别与函数编辑模块和方言解析模块电性连接，所述函数编辑模块和方言解析模块均与执行引擎电性连接，所述服务端与若干个解析端通讯连接，所述数据实时采集模块与数据实时处理模块电性连接，所述数据实时处理模块与缓存模块电性连接。该大数据运算过程处理系统大大降低了用户搜索信息所花费的时间，降低了处理实时数据的响应延迟，保证了用户获取数据的时效性，进而提高用户体验。户体验。户体验。

【技术实现步骤摘要】
一种大数据运算过程处理系统及其方法


[0001]本专利技术属于大数据处理
，具体涉及一种大数据运算过程处理系统及其方法。

技术介绍

[0002]随着互联网的发展，基于互联网的营销业务生命周期越来越短，业务发展变化越来越快，许多业务数据量以指数级增长，这都要求对大量的数据做实时处理，并要求保证数据准确可靠。
[0003]在信息爆炸的时代实时数据处理技术的成熟度直接关系到产业转型升级及发展。目前最流行的莫过于Apache的开源项目Hadoop分布式计算平台，Hadoop专注于大规模数据存储和处理。这种模型对以往的许多情形虽已足够，如系统日志分析、网页索引建立，但是在大数据实时处理方面，Hadoop的MapReduce却显得力不从心，而业务场景中需要低延迟的响应，希望在秒级别或者毫秒级别完成分析，得到响应，并希望能够随着数据量的增大而扩展。

技术实现思路

[0004]本专利技术的目的在于提供一种大数据运算过程处理方法及系统，以解决大数据在数据实时处理方面响应延迟高的问题。
[0005]为实现上述目的，本专利技术提本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种大数据运算过程处理系统，其特征在于，包括：服务端（1）、解析端（2）和云服务器（3），所述服务端（1）内还包括一个用于存储全部原始数据的存储模块（101），所述解析端（2）内包括缓存模块（201）、函数编辑模块（202）、方言解析模块（203）、数据实时采集模块（204）、数据实时处理模块（205）和执行引擎（206），所述缓存模块（201）分别与函数编辑模块（202）、方言解析模块（203）以及数据实时处理模块（205）电性连接，所述执行引擎（206）分别与函数编辑模块（202）和方言解析模块（203）电性连接，所述数据实时采集模块（204）与数据实时处理模块（205）电性连接，所述服务端（1）至少设有一个，所述解析端（2）共设有若干个，所述服务端（1）与若干个解析端（2）通讯连接，所述服务端（1）包括若干个串联的服务器（11），若干个所述服务器（11）并排设置且均为尺寸相同的长方体结构，首尾两个所述服务器（11）的顶部分别固定有与所述存储模块（101）电性连接的第一信号接收器（111）和第一信号发送器（112），所述第一信号接收器（111）和第一信号发送器（112）均与云服务器（3）通讯连接。2.如权利要求1所述的一种大数据运算过程处理系统，其特征在于，所述解析端（2）为正四棱柱结构，所述解析端（2）上表面的中心处固定有液晶显示屏（225），所述液晶显示屏（225）的下表面电性连接有故障预警模块（226），所述故障预警模块（226）与执行引擎（206）电性连接。3.如权利要求2所述的一种大数据运算过程处理系统，其特征在于，所述液晶显示屏（225）的两侧分别固定有第二信号接收器（221）和第二信号发送器（222），所述第二信号接收器（221）与数据实时采集模块（204）电性连接，所述第二信号发送器（222）与执行引擎（206）电性连接，所述解析端（2）的四周开设有散热...

【专利技术属性】
技术研发人员：薛建波，孙靖，
申请(专利权)人：江苏红网技术股份有限公司，
类型：发明
国别省市：