一种适于大数据的消费信息分析系统技术方案

技术编号:12876317 阅读:78 留言:0更新日期:2016-02-17 12:32
本实用新型专利技术涉及一种适于大数据的消费信息分析系统,包括:主存储阵列,由第一组存储设备并行连接形成;扩充存储阵列,由第二组存储设备并行连接形成;服务器主集群,由第一组运算服务器并联形成;扩充服务器集群,由第二组运算服务器并联形成;所述主存储阵列和服务器主集群通过平台总线彼此连接;并且,扩充存储阵列通过第一并网切换设备连接至所述平台总线,扩充服务器集群通过第二并网切换设备连接至所述平台总线。本系统在非高峰的时段仅利用主存储阵列和服务器主集群,而在大数据运算的高峰时段将扩充存储阵列和扩充服务器集群并入本系统,从而实现了硬件资源的按需合理配置,降低了整个系统的实现成本,并且不会对大数据运算的快速性、实时性产生任何影响。

【技术实现步骤摘要】

本技术涉及一种服务器系统,特别是一种适于大数据的消费信息分析系统
技术介绍
随着网络购物等新型消费方式的迅速发展,对海量用户的消费信息展开大数据分析成为了一种行之有效的手段。通过大数据分析可以从消费信息当中发掘其内在的规律性,从而为广告投放、产品推荐等提供依据。大数据分析能够实现的前提是提供了具备海量存储空间和高速计算能力的系统硬件平台。从平台架构上,大数据系统将存储和运算划分到不同的设备群,以大量存储设备并行连接形成存储阵列,并且同时以大量并行运行的运算服务器形成服务器集群;存储阵列和服务器集群通过总线相互通信,从而进行数据的读、写和分析计算。随着网络消费业务规模的持续扩大,消费信息的数据量也在高速增长,而且各种应用对大数据分析快速性的要求也越来越高,这使得大数据分析系统平台的容量和运算能力需要不断提升。但是,这造成了平台硬件成本的大幅度提升,而且,消费业务在时间上的分布非常不均匀,例如在一天当中绝大部分网上消费行为往往集中在特定时段,如果单纯按照系统的最大峰值负荷配置硬件资源,难免存在闲置浪费的情况;但是如果按照系统平均负荷配置硬件资源,则无法完全满足峰值时期的大数据运算要求。
技术实现思路
鉴于此,本技术提供了一种适于大数据的消费信息分析系统。本系统通过将存储阵列划分为主存储阵列和扩充存储阵列,以及将服务器集群划分为服务器主集群和扩充服务器集群,在非高峰的时段仅利用主存储阵列和服务器主集群,而在大数据运算的高峰时段将扩充存储阵列和扩充服务器集群并入本系统,从而实现了硬件资源的按需合理配置,降低了整个系统的实现成本,并且不会对大数据运算的快速性、实时性产生任何影响。本技术所述适于大数据的消费信息分析系统,其特征在于,包括:主存储阵列,由第一组存储设备并行连接形成;扩充存储阵列,由第二组存储设备并行连接形成;服务器主集群,由第一组运算服务器并联形成;扩充服务器集群,由第二组运算服务器并联形成;所述主存储阵列和服务器主集群通过平台总线彼此连接;并且,扩充存储阵列通过第一并网切换设备连接至所述平台总线,扩充服务器集群通过第二并网切换设备连接至所述平台总线。优选的是,所述第一并网切换设备还连接至第一外部总线,并且所述第二并网切换设备还连接至第二外部总线。优选的是,所述第一组存储设备包括至少十台独立的存储设备,并且第二组存储设备包括至少五台独立的存储设备。优选的是,所述第一组运算服务器包括至少十台独立的运算服务器,并且第二组运算服务器包括至少五台独立的运算服务器。优选的是,所述第一并网切换设备包括设备端口、第一总线端口和第二总线端口,其中设备端口连接所述扩充存储阵列,第一总线端口连接所述平台总线,并且第二总线端口连接所述第一外部总线。优选的是,所述第二并网切换设备包括设备端口、第一总线端口和第二总线端口,其中设备端口连接所述扩充服务器集群,第一总线端口连接所述平台总线,并且第二总线端口连接所述第二外部总线。进一步优选的是,所述第一并网切换设备和第二并网切换设备还各自具有至少一个扩展总线端口。本技术具有如下有益效果:本技术所提供的适于大数据的消费信息分析系统,利用主存储阵列和服务器主集群为常备硬件资源,而且通过第一并网切换设备与第二并网切换设备,实现了扩充存储阵列和扩充服务器集群根据高峰期需求的动态接入,在非高峰的时段,扩充存储阵列和扩充服务器集群可以通过其它总线接入另外的系统;如果高峰时段通过扩充存储阵列和扩充服务器集群的并入仍然不能满足大数据分析之需要,还可以利用第一并网切换设备与第二并网切换设备的扩展总线端口继续并入存储和运算资源。可见,本技术通过设备的复用与动态扩充,实现了硬件资源的按需合理配置,降低了整个系统的实现成本。【附图说明】图1是本技术所述适于大数据的消费信息分析系统拓扑示意图。【具体实施方式】如图1所示,本系统通过将大数据分析平台所必需的存储阵列划分为主存储阵列1和扩充存储阵列2,以及将执行数据运算功能的服务器集群划分为服务器主集群3和扩充服务器集群4。其中,主存储阵列1由第一组存储设备并行连接形成,第一组存储设备包括至少十台独立的存储设备;扩充存储阵列2由第二组存储设备并行连接形成,并且第二组存储设备包括至少五台独立的存储设备。服务器主集群3由第一组运算服务器并联形成,第一组运算服务器包括至少十台独立的运算服务器;扩充服务器集群4由第二组运算服务器并联形成,第二组运算服务器包括至少五台独立的运算服务器。在非高峰的时段,仅利用主存储阵列1和服务器主集群3进行数据的存储以及大数据分析运算,而在大数据运算的高峰时段,进而将扩充存储阵列2和扩充服务器集群4并入本系统,与主存储阵列1和服务器主集群3共同进行数据的存储以及大数据分析运算。如图1所示,所述主存储阵列1和服务器主集群3通过平台总线5彼此连接,为了实现大数据分析运算,通过该平台总线5在服务器主集群3与主存储阵列1之间实现数据传输。...

【技术保护点】
一种适于大数据的消费信息分析系统,其特征在于,包括:主存储阵列,由第一组存储设备并行连接形成;扩充存储阵列,由第二组存储设备并行连接形成;服务器主集群,由第一组运算服务器并联形成;扩充服务器集群,由第二组运算服务器并联形成;所述主存储阵列和服务器主集群通过平台总线彼此连接;并且,扩充存储阵列通过第一并网切换设备连接至所述平台总线,扩充服务器集群通过第二并网切换设备连接至所述平台总线。

【技术特征摘要】

【专利技术属性】
技术研发人员:庄良厉紫阳王智斌沈徐兰岳一涛冯卢梦
申请(专利权)人:汉鼎信息科技股份有限公司
类型:新型
国别省市:浙江;33

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1