基于分布式列式存储的云数据中心系统历史数据管理方法技术方案

本发明专利技术公开了基于分布式列式存储的云数据中心系统历史数据管理方法，所述管理方法包括如下步骤：历史数据抽取服务模块从模型库中获取订阅的量测信息；根据所述量测信息来源通过服务总线向所述量测信息来源所在区域调度的历史数据服务请求指定历史数据，所述历史数据抽取服务模块获得数据后直接提交给分布式列式存储数据库HBase；HBase主动采样服务模块负责模型中心私有模型的数据采集，HBase主动采样服务模块提交数据到分布式列式存储数据库HBase；HBase采样查询服务模块为所述上层应用模块提供历史数据查询服务。本发明专利技术提供基于分布式列式存储实现高可靠、高性能、面向列、可伸缩的历史数据集中存储，实现历史数据准实时汇聚，实现历史数据透明访问。实现历史数据透明访问。实现历史数据透明访问。

【技术实现步骤摘要】
基于分布式列式存储的云数据中心系统历史数据管理方法


[0001]本专利技术涉及一种基于分布式列式存储的云数据中心系统历史数据管理方法，属于电力系统自动化电网数据管理


技术介绍

[0002]目前，全国各地调EMS主调建设大部分都采用了D5000系统，针对均采用D5000系统的省调和地调可以建设省地模型中心，完成后各地调及省调与模型中心的联调工作，实现全省模型的模型中心汇集功能。这也为云数据中心系统的建设提供了良好的契机。全省模型中心保证了省调与地调系统相同模型记录的ID一致性，为后续开展省地一体化云数据中心的建设工作，节省大量的时间和人工，为后续云数据中心系统建设打下良好的基础。
[0003]云数据中心系统主要完成纵向和横向的EMS模型，图形，数据集成和发布功能。其中，纵向数据集成指的是数据中心能够汇集省调与地调的数据及相关模型、图形与参数，满足数据中心进行状态估计计算的要求，以及后续省地联合应用交互的桥梁和中心集成展示的需求。
[0004]历史数据管理是云数据中心系统核心功能之一，历史数据管理通过基于云技术的大数据处理本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.基于分布式列式存储的云数据中心系统历史数据管理方法，其特征在于，所述云数据中心系统包括：历史数据抽取服务模块、HBase主动采样服务模块、分布式列式存储数据库HBase、HBase采样查询服务模块、上层应用模块，所述历史数据抽取服务模块、所述HBase主动采样服务模块、所述HBase采样查询服务模块分别与所述分布式列式存储数据库HBase通讯连接，HBase采样查询服务模块与所述上层应用模块通讯连接，所述管理方法包括如下步骤：历史数据抽取服务模块从模型库中获取订阅的量测信息；根据所述量测信息来源通过服务总线向所述量测信息来源所在区域调度的历史数据服务请求指定历史数据，所述历史数据抽取服务模块获得数据后直接提交给分布式列式存储数据库HBase；HBase主动采样服务模块负责模型中心私有模型的数据采集，HBase主动采样服务模块提交数据到分布式列式存储数据库HBase；HBase采样查询服务模块为所述上层应用模块提供历史数据查询服务。2.根据权利要求1所述的基于分布式列式存储的云数据中心系统历史数据管理方法，其特征在于，所述量测信息包括遥测历史数据订阅表，所述遥测历史数据订阅表描述数据中心采样数据的规模，以及为各个量测信息描述直采区域。3.根据权利要求1所述的基于分布式列式存储的云数据中心系统历史数据管理方法，其特征在于，所述云数据中心系统维护遥测历史数据订阅表，标识测点的来源，具体包括：从哪个地调抽取该测点的历史数据，而不是分配存储的位置；如果该测点来源为数据中心，则表示数据由本地的历史采样服务进行采集；如果该测点来源为非数据中心，则从所定义的区域抽取历史数据。4.根据权利要求1所述的基于分布式列式存储的云数据中心系统历史数据管理方法，其特征在于，所述HBase主动采样服务模块包括主动采样定义模块、被动采样定义模块；所述主动采样定义模块用于确定数据源；所述被动采样定义模块用于确定采样周期，所述HBase主动采样服务模块的数据源默认为“云数据中心系统”；所述HBase主动采样服务模块默认按照数据源、厂站、表的策略显示已定义量测点。5.根据权利要求1所述的基于分布式列式存储的云数据中心系统历史数据管理方法，其特征在于，所述管理方法包括：直接采样区域为云数据中心系统，则由HBase主动采样服务模块执行；如果直接采样区域为非云数据中心系统，则由历史数据抽取服务模块执行。6.根据权利要求1所述...

【专利技术属性】
技术研发人员：欧阳宇宏，吴晗，康文倩，史浩秋，车向北，吴涛，邓彬，郑晓露，王玉军，胡亚荣，王汉潮，李雨森，赵虎，崔伟业，张瑞，
申请(专利权)人：国电南瑞南京控制系统有限公司，
类型：发明
国别省市：