【技术实现步骤摘要】
一种面向海量气象要素数据存储与查询的方法及系统
[0001]本专利技术涉及一种气象数据处理
,特别是关于一种面向海量气象要素数据存储与查询的方法及系统。
技术介绍
[0002]气候是自然环境的重要组成部分,也是人类活动最重要的环境条件;气象数据资料作为分析气象条件的重要依据,其应用和研究价值非常高;通过对海量气象要素数据进行数据挖掘和分析,能够帮助开展与人民生产活动和日常生活密切相关的气象预报和灾害预警,能够实现气象灾害的风险评估等升值服务功能,能够为人们的衣食住行以及其他行业提供便捷等。
[0003]随着气象信息化进展愈来愈快,通过现有气象观测站点所搜集的海量气象要素数据,正在呈现指数级增长(百万甚至千万级数量),这对海量气象要素数据的存储和查询统计提出了严峻考验。目前,现有的气象数据存储方式主要依赖于集中型关系数据库进行存储,其虽然安全性较高,但数据存储成本较高,且难以满足对海量气象要素数据进行大规模处理的要求,进而无法实现对气象、工业、农业、水文水利、环保、高速公路、机场和港口等领域提供气象综合信息服务; ...
【技术保护点】
【技术特征摘要】
1.一种面向海量气象要素数据存储与查询的方法,其特征在于,包括:逐时获取各个地区气象自动站所采集到的海量气象要素数据,对其数据维度统计划分;提取所述数据维度统计划分后的海量气象要素数据,构建包括主键
‑
子健
‑
键值的气象键值数据库,同时将各个地区气象自动站作为一级索引;其中,所述一级索引与所述气象键值数据库中的主键一一对应;对所述气象键值数据库进行分布式集群存储;对待查询地区的气象自动站名称进行集群存储定位,进行海量气象要素数据查询。2.如权利要求1所述面向海量气象要素数据存储与查询的方法,其特征在于,所述数据维度统计划分,包括:最低气温,包括最高、最低和平均气温;最高气温,包括最高、最低和平均气温;温差,包括最高温差、最低温差和平均温差;降水量,包括平均降水量和累计降水量;湿度,包括最高湿度、最低湿度和平均湿度;风速,包括最高风速、最低风速和平均风速;气压,包括最高气压、最低气压和平均气压;风向,包括角度。3.如权利要求1所述面向海量气象要素数据存储与查询的方法,其特征在于,所述气象键值数据库中的所述主键包含各个地区气象自动站的名称,所述子健包含各个时间维度,所述键值包含各维度气象数据值。4.如权利要求1所述面向海量气象要素数据存储与查询的方法,其特征在于,所述分布式集群包括一个以上的主集群和若干个从集群;所述主集群用于存储一级索引;所述从集群用于按照预先定义存储海量气象要素数据。5.如权利要求4所述面向海量气象要素数据存储与查询的方法,其特征在于,所述主集群包括集群排序表,用于按顺序对若干...
【专利技术属性】
技术研发人员:刘玮,方立群,徐强,陈津津,吕辰龙,蒋宝贵,
申请(专利权)人:中国人民解放军军事科学院军事医学研究院,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。