数据处理服务器及其数据处理方法技术

技术编号:15437334 阅读:115 留言:0更新日期:2017-05-25 19:28
一种数据处理服务器及其数据处理方法。数据处理服务器包含数据库、非即时数据处理模块以及即时数据处理模块。数据库记录第一数据处理函数。非即时数据处理模块用以接收数据串流,并根据第一数据处理函数分析数据串流,以产生至少一第一数据权重。即时数据处理模块用以接收数据串流,并根据第一数据处理函数以及至少一第一数据权重更新即时数据处理组态。即时数据处理模块根据即时数据处理组态分析数据串流,以产生即时数据输出。

Data processing server and data processing method thereof

Data processing server and data processing method thereof. The data processing server contains the database, the non instantaneous data processing module and the real-time data processing module. The database records the first data processing function. The non instantaneous data processing module is used to receive the data stream and analyze the data stream according to the first data processing function to generate at least a first data weight. The instant data processing module is used to receive the data stream and update the immediate data processing configuration according to the first data processing function and at least a first data weight. The real-time data processing module analyzes the data stream according to the real-time data processing configuration so as to generate real-time data output.

【技术实现步骤摘要】
数据处理服务器及其数据处理方法
本专利技术关于一种数据处理服务器及其数据处理方法。更具体而言,本专利技术是关于一种大数据(BigData)的数据处理服务器及其数据处理方法。
技术介绍
已知的数据处理方式,由于其数据量较小,因此,使用者仍可通过一般电脑,于合理的条件下完成数据的分析,并获得想要的输出。然随着科技发展,使用者通过电脑及网络得以使用的数据量已呈现巨幅的成长,因此,若以已知的数据处理方式,使用者将难以即时且有效率地获得期望的输出。据此,大数据(BigData)的数据处理方式因此发展,其中,大数据的数据处理方式目前可分为批次处理以及即时处理。具体而言,批次处理的大数据数据处理方式,主要是针对大数据量的档案先行分拆,并以非即时的方式进行数据处理,惟此种方式仍有输出延迟过大以及运算复杂的缺点。另一方面,即时处理的大数据数据处理方式,主要是直接针对大数据量的档案进行处理并产生输出,惟此种方式将有结果不够准确的疑虑,且若短时间内突发事件的数据占总体数据量比例过小,亦无法针对突发事件做出准确的判断。针对前述大数据处理方式的缺点,目前已有技术针对批次处理的结果以及即时处理的结果进行本文档来自技高网...
数据处理服务器及其数据处理方法

【技术保护点】
一种数据处理服务器,包含:一数据库,用以记录一第一数据处理函数;一非即时数据处理模块,具有:一非即时数据接收单元,用以接收一数据串流;以及一非即时数据分析单元,用以:根据该第一数据处理函数分析该数据串流,以产生至少一第一数据权重;将该至少一第一数据权重储存于该数据库;一即时数据处理模块,具有:一即时数据接收单元,用以接收该数据串流;以及一即时数据分析单元,用以:自该数据库撷取该第一数据处理函数以及该至少一第一数据权重;根据该第一数据处理函数以及该至少一第一数据权重更新一即时数据处理组态,其中,该即时数据处理组态包含该第一数据处理函数以及该至少一第一数据权重;根据该即时数据处理组态分析该数据串流...

【技术特征摘要】
2015.11.18 TW 1041380451.一种数据处理服务器,包含:一数据库,用以记录一第一数据处理函数;一非即时数据处理模块,具有:一非即时数据接收单元,用以接收一数据串流;以及一非即时数据分析单元,用以:根据该第一数据处理函数分析该数据串流,以产生至少一第一数据权重;将该至少一第一数据权重储存于该数据库;一即时数据处理模块,具有:一即时数据接收单元,用以接收该数据串流;以及一即时数据分析单元,用以:自该数据库撷取该第一数据处理函数以及该至少一第一数据权重;根据该第一数据处理函数以及该至少一第一数据权重更新一即时数据处理组态,其中,该即时数据处理组态包含该第一数据处理函数以及该至少一第一数据权重;根据该即时数据处理组态分析该数据串流,以产生一即时数据输出。2.如权利要求1所述的数据处理服务器,更包含一数据整合模块,其特征在于,该非即时数据分析单元更用以:根据该第一数据处理函数以及该至少一第一数据权重分析该数据串流,以产生一非即时数据输出;其中,该数据整合模块用以:撷取该即时数据输出以及该非即时数据输出;根据该即时数据输出以及该非即时数据输出决定一整合数据输出。3.如权利要求1所述的数据处理服务器,其特征在于,该数据库更用以记录一第二数据处理函数,该非即时数据分析单元更用以:根据该第二数据处理函数分析该数据串流,以产生至少一第二数据权重;将该至少一第二数据权重储存于该数据库。4.如权利要求3所述的数据处理服务器,更包含一数据整合模块,其特征在于,该非即时数据分析单元更用以:根据该第一数据处理函数、该第二数据处理函数、该至少一第一数据权重以及该至少一第二数据权重分析该数据串流,以产生一非即时数据输出;其中,该数据整合模块用以:撷取该即时数据输出以及该非即时数据输出;根据该即时数据输出以及该非即时数据输出决定一整合数据输出。5.如权利要求3所述的数据处理服务器,其特征在于,该即时数据分析单元更用以:自该数据库撷取该第二数据处理函数以及该至少一第二数据权重;根据该第一数据处理函数、该第二数据处理函数、该至少一第一数据权重以及该至少一第二数据权重更新该即时数据处理组态,其中,该即时数据处理组态包含该第一数据处理函数、该第二数据处理函数、该至少一第一数据权重以及该至少一第二数据权重;根据该即时数据处理组态分析该数据串流,以产生该即时数据输出。6.如权利要求5所述的数据处理服务器,更包含一数据整合模块,其特征在于,该非即时数据分析单元更用以:根据该第一数据处理函数、该第二数据处理函数、该至少一第一数据权重以及该至少一第二数据权重分析该数据串流,以产生一非即时数据输出;其中,该数据整合模块用以:撷取该即时数据输出以及该非即时数据输出;根据该即时数据输出以及该非即时数据输出决定一整合数据输出。7.如权利要求1所述的数据处理服务器,其特征在于,该至少一第一数据权重是对应于该数据串流的至少一第一数据栏位。8.如权利要求3所述的数据处理服务器,其特征在于,该至少一第一数据权重是对应于该数据串流的至少一第一数据栏位,该至少一第二数据权重是对应于该数据串流的至少一第二数据栏位。9.一种用于一数据处理服务器的数据处理方法,该数据处理服务器包含一数据库、一非即时数据处理...

【专利技术属性】
技术研发人员:赖槿峰赖盈勲侯承育林郁修
申请(专利权)人:财团法人资讯工业策进会
类型:发明
国别省市:中国台湾,71

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1