一种海量数据浏览的方法和装置制造方法及图纸

技术编号:40980969 阅读:16 留言:0更新日期:2024-04-18 21:27
本发明专利技术涉及本发明专利技术涉及数据存储领域,特别是涉及一种海量数据浏览的方法和装置。主要包括:按照数据的属性,定义用于保存数据的多级目录,方法包括:将数据组织为字段序列格式的文件,将文件组织为相应的压缩包,对每个压缩包生成相应的文件清单,获取数据需存储的目录,将每个压缩包保存至需存储的目录下;根据用户的浏览申请获取需浏览的数据所在的文件,通过文件清单查找文件所在的压缩包,将查找到的压缩包解压至指定目录,将指定目录中解压后的文件中的数据反馈给用户。本发明专利技术可以解决用户在浏览时需要将大量文件下载至本地时,本地文件众多难以管理的问题,以及海量转储文件在查找和浏览时用户体验卡顿的问题。

【技术实现步骤摘要】

本专利技术涉及数据存储领域,特别是涉及一种海量数据浏览的方法和装置


技术介绍

1、当前网络系统中,网管系统中需要管理大量设备,每个设备会持续进行状态信息的上报,上报的海量状态信息需要以文本数据的形式转储至数据库中,以供用户进行浏览查询。实际网络环境中,转储数据量巨大,单历史性能转储数据可以达到1天30gb以上,用户基于对历史问题的回溯需要在这些历史数据中进行查询分析。

2、现有的查询过程中,用户需要手工下载网管转储的文件到本地,再根据数据的上报时间、设备对象或业务类型进行分类查找。由于数据量巨大,下载至本地的文件众多难以管理,且数据的查询检索非常繁琐,浏览数据时也会严重卡顿。

3、鉴于此,如何克服现有技术所存在的缺陷,解决现有系统中海量数据查询浏览困难的现象,是本
待解决的问题。


技术实现思路

1、针对现有技术的以上缺陷或改进需求,本专利技术解决了现有系统中海量数据查询浏览困难的问题。

2、本专利技术实施例采用如下技术方案:

3、第一方面,本专利技术提供本文档来自技高网...

【技术保护点】

1.一种海量数据浏览的方法,其特征在于,按照数据的属性,定义用于保存数据的多级目录,方法包括:

2.根据权利要求1所述的海量数据浏览的方法,其特征在于,所述按照数据的属性,定义用于保存数据的多级目录,具体包括:

3.根据权利要求1所述的海量数据浏览的方法,其特征在于,所述将数据组织为字段序列格式的文件,将文件组织为相应的压缩包,具体包括:

4.根据权利要求3所述的海量数据浏览的方法,其特征在于,所述将数据组织为字段序列格式的文件,还包括:

5.根据权利要求1所述的海量数据浏览的方法,其特征在于,所述根据用户的浏览申请获取需浏览的数据所在的文...

【技术特征摘要】

1.一种海量数据浏览的方法,其特征在于,按照数据的属性,定义用于保存数据的多级目录,方法包括:

2.根据权利要求1所述的海量数据浏览的方法,其特征在于,所述按照数据的属性,定义用于保存数据的多级目录,具体包括:

3.根据权利要求1所述的海量数据浏览的方法,其特征在于,所述将数据组织为字段序列格式的文件,将文件组织为相应的压缩包,具体包括:

4.根据权利要求3所述的海量数据浏览的方法,其特征在于,所述将数据组织为字段序列格式的文件,还包括:

5.根据权利要求1所述的海量数据浏览的方法,其特征在于,所述根据用户的浏览申请获取需浏览的数据所...

【专利技术属性】
技术研发人员:黄亮
申请(专利权)人:烽火通信科技股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1