一种多路并发数据分组挖掘与统计方法技术

本发明专利技术公开了一种多路并发数据分组与统计方法，通过前端可视化的聚合条件配置与挖掘结果数据显示，再辅以后端服务器集群的多任务智能化调度与多路并发数据挖掘运算，大大降低了用户配置复杂挖掘条件的难度，通过智能化和多路并发加成大幅提升了数据挖掘的效率。

A group mining and statistical method of multi-channel concurrent data

【技术实现步骤摘要】
一种多路并发数据分组挖掘与统计方法
本专利技术属于网络流量分析
，尤其涉及一种多路并发数据分组挖掘与统计方法。
技术介绍
随着计算机技术和互联网的发展，宽带速率的提高和费用的降低，使得人们的生活和工作与网络的联系愈发紧密，网络数据包数量呈几何级增长。对于目前的网络流量数据分析，即使是经验丰富的分析员，一天也最多只能分析约1700000个数据包，而据统计一个家庭一周所产生的数据包能够达到1亿级别，已然不是一个可以轻易分析的量级，若是采集一个公司、学校、政府等端点的流量，数据包将是一个天文级别。数据量级大、数据复杂程度高、数据处理慢等严重影响着数据挖掘与统计效率。
技术实现思路
本专利技术的目的就在于为了解决上述问题而提供一种多路并发数据分组挖掘与统计方法，包括如下步骤：S1:系统获取网络流量数据包；S2:中心服务器进行负载均衡后将数据包拆分发送至分布式服务器集群；S3:用户配置数据聚合挖掘条件，分布式服务器集群中各个服务器节点分别根据数据聚合挖掘条件对数据进行匹配挖掘，得到分组数据；S4:本文档来自技高网...

【技术保护点】
1.一种多路并发数据分组挖掘与统计方法，其特征在于，包括如下步骤：/nS1:系统获取网络流量数据包；/nS2:中心服务器进行负载均衡后将数据包拆分发送至分布式服务器集群；/nS3:用户配置数据聚合挖掘条件，分布式服务器集群中各个服务器节点分别根据数据聚合挖掘条件对数据进行匹配挖掘，得到分组数据；/nS4:分布式服务器分别获取分组数据副本；/nS5:用户配置数据统计条件，分布式服务器按统计条件进行计算；/nS6:分布式服务器汇总分布式服务器分组数据统计计算结果；/nS7:中心服务器合并所有分组统计结果；/nS8:输出聚合挖掘数据结果。/n

【技术特征摘要】
1.一种多路并发数据分组挖掘与统计方法，其特征在于，包括如下步骤：
S1:系统获取网络流量数据包；
S2:中心服务器进行负载均衡后将数据包拆分发送至分布式服务器集群；
S3:用户配置数据聚合挖掘条件，分布式服务器集群中各个服务器节点分别根据数据聚合挖掘条件对数据进行匹配挖掘，得到分组数据；
S4:分布式服务器分别获取分组数据副本；
S5:用户配置数据统计条件，分布式服务器按统计条件进行计算；
S6:分布式服务器汇总分布式服务器分组数据统计计算结果；
S7:中心服务器合并所有分组统计结果；
S8:输出聚合挖掘数据结果。...

【专利技术属性】
技术研发人员：代先勇，王炜，邓金祥，刘洋，谷峰，曾海刚，佘朝裕，
申请(专利权)人：成都深思科技有限公司，
类型：发明
国别省市：四川;51