一种大数据量信息存储与访问方法技术

技术编号:8131047 阅读:218 留言:0更新日期:2012-12-27 03:13
本发明专利技术提供了一种大数据量信息存储与访问方法,包括S1,数据存储:对路测数据进行解码并进行分类组织并存储到索引文件和数据文件;S2,数据访问:查找数据块缓存列表,若查找到所需数据位置,则确定待访问的数据块;若不能查找到所述数据块位置,则通过查找所述索引块对应的数据块确定所述数据块位置,若不能成功查找到所述索引块对应的所述数据块,则结束访问;若成功查找到所述索引块对应的所述数据块位置,则加载所述索引块对应的所述数据块,并将所述数据块添加到数据块缓存列表,确定待访问的数据块。本发明专利技术的方法通过自定义组织数据块与索引块,能够很快地通过索引块对应数据块的长度、精确进行统计,统计出某类信息所有数据块的大小。

【技术实现步骤摘要】

本专利技术涉及数据存储与访问
,尤其涉及一种用于路测数据解码后及统计分析结果后的存储与访问方法。
技术介绍
现有技术中,为实现B/S架构的应用平台对路测数据解码存储与统计分析,需要在服务器端实现解码后数据存储成二进制文件,并要对某些条件下的解码后数据,如一个省份的路测数据、一年时长的路测数据,进行统计分析,把统计分析结果存储成临时文件,客户端请求呈现所需的条件段时,从统计分析结果文件中读取相关数据并传回至客户端。但是现有技术统计数据所需的时间较长,统计的数据结果不够精确。
技术实现思路
本专利技术的目的在于设计一种新型的大数据量信息存储与访问方法,解决上述问题。为了实现上述目的,本专利技术采用的技术方案如下,包括,SI,数据存储对路测数据进行解码,将解码所述路测数据得到的信息进行分类组织并存储到索引文件和数据文件;所述索引文件由不同存储类型的索引块组成,所述索引块包括所述数据文件中的偏移位置、数据块长度、起始索引序号和结束索引序号;所述数据文件由数据块组成,一个所述数据块记录的条数为所述索引块的结束索引序号-起始索引序号+1条;所述索引文件和所述数据文件一一对应;S2,数据访问本文档来自技高网...

【技术保护点】
一种大数据量信息存储与访问方法,其特征在于:包括,S1,数据存储:对路测数据进行解码,将解码所述路测数据得到的信息进行分类组织并存储到索引文件和数据文件;所述索引文件由不同存储类型的索引块组成,所述索引块包括所述数据文件中的偏移位置、数据块长度、起始索引序号和结束索引序号;所述数据文件由数据块组成,一个所述数据块记录的条数为:所述索引块的结束索引序号一起始索引序号+1条;所述索引文件和所述数据文件一一对应;S2,数据访问:查找数据块缓存列表,若查找到所需数据位置,则确定待访问的数据块;若不能查找到所述数据块位置,则通过查找所述索引块对应的数据块确定所述数据块位置,若不能成功查找到所述索引块对应...

【技术特征摘要】

【专利技术属性】
技术研发人员:张勇刘烈山
申请(专利权)人:珠海世纪鼎利通信科技股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1