一种集群数据统计及导出方法及装置制造方法及图纸

技术编号:14339638 阅读:93 留言:0更新日期:2017-01-04 12:11
本发明专利技术公开了一种集群数据统计及导出方法及装置,用于高效准确地对日志相关数据进行读取与统计,以供在需要对日志进行统计时读取该日志。所述方法包括:令集群的第三级设备在各自的配置范围内读取预设数量的日志,并将读取的所述日志生成统计索引;在接收到所述统计索引的生成完毕报告之后,令集群的第一级设备向所述第三级设备发送导出通知;令所述第三级设备根据所述导出通知将生成的所述统计索引从本地缓存数据库导出至集群数据库。该方案通过对集群内各设备的协调与管理,高效准确地对日志相关数据进行读取与统计,其操作过程简便,提升了工作效率与用户体验。

【技术实现步骤摘要】

本专利技术涉及集群服务器领域,特别涉及一种集群数据统计及导出方法及装置
技术介绍
集群是由一些互相连接在一起的计算机构成的一个并行或者分布式系统,使得多台服务器可以像一台机器一样进行工作。随着集群服务器技术在计算机领域的推广,将产生海量的日志文件,且随着科学技术的发展,对日志文件保存的快速准确程度的需求越来越高;且在保存之后,还需要按照不同的需求进行不同的数据的读取,进而方便进行数据统计;在这些过程中,既要保证程序的高效性,还要保证数据处理过程的简易性和准确性,因此,目前需要一种高效准确的集群数据统计及导出方法。
技术实现思路
本专利技术提供一种集群数据统计及导出方法及装置,通过对集群内各设备的协调与管理,高效准确地对日志相关数据进行读取与统计,其操作过程简便,提升了工作效率与用户体验。根据本专利技术实施例的第一方面,提供一种集群数据统计及导出方法,包括:令集群的第三级设备在各自的配置范围内读取预设数量的日志,并将读取的所述日志生成统计索引;在接收到所述统计索引的生成完毕报告之后,令集群的第一级设备向所述第三级设备发送导出通知;令所述第三级设备根据所述导出通知将生成的所述统计索引从本本文档来自技高网...
一种集群数据统计及导出方法及装置

【技术保护点】
一种集群数据统计及导出方法,其特征在于,包括:令集群的第三级设备在各自的配置范围内读取预设数量的日志,并将读取的所述日志生成统计索引;在接收到所述统计索引的生成完毕报告之后,令集群的第一级设备向所述第三级设备发送导出通知;令所述第三级设备根据所述导出通知将生成的所述统计索引从本地缓存数据库导出至集群数据库。

【技术特征摘要】
1.一种集群数据统计及导出方法,其特征在于,包括:令集群的第三级设备在各自的配置范围内读取预设数量的日志,并将读取的所述日志生成统计索引;在接收到所述统计索引的生成完毕报告之后,令集群的第一级设备向所述第三级设备发送导出通知;令所述第三级设备根据所述导出通知将生成的所述统计索引从本地缓存数据库导出至集群数据库。2.如权利要求1所述的方法,其特征在于,所述令集群的第三级设备在各自的配置范围内读取预设数量的日志,并将读取的所述日志生成统计索引之后,还包括:在将所述统计索引全部生成之后,令所述第三级设备将生成的所述统计索引存储至本地缓存数据库,并向所述第一级设备发送所述统计索引的生成完毕报告。3.如权利要求1所述的方法,其特征在于,所述方法还包括:在将所述统计索引完全导出至所述集群数据库之后,令所述第三级设备继续在其配置范围内读取预设数量的日志,并将读取的所述日志生成统计索引。4.如权利要求1所述的方法,其特征在于,所述方法还包括:在接收到集群内的第三级设备的加入或退出指令时,通过所述第一级设备更新所述集群内的所有第三级设备的配置信息,并将更新的所述配置信息同步至第二级设备;所述配置信息包括各所述第三级设备的配置范围;令所述第三级设备继续在其更新后的配置范围内读取预设数量的日志,并将读取的所述日志生成统计索引。5.如权利要求1所述的方法,其特征在于,所述方法还包括:在接收到所述第一级设备的退出指令时,通过预设的选举算法在所述集群内的多个第二级设备中选举所述第一级设备。6.一种集群数据统计及导...

【专利技术属性】
技术研发人员:孔矾建
申请(专利权)人:无锡天脉聚源传媒科技有限公司
类型:发明
国别省市:江苏;32

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1