一种用于面向工矿企业的安全生产云服务平台的数据存储系统技术方案

技术编号:8325982 阅读:215 留言:0更新日期:2013-02-14 08:55
一种用于面向工矿企业的安全生产云服务平台的数据存储系统,在数据采集设备中设有数据存储层,针对工矿企业中来自各种不同数据源的海量数据,对其进行处理后生成与不同业务对应的统一接口的主题数据,并将这些主题数据存储在分布式文件系统中,在有任务请求时,根据不同的任务请求,对所述分布式文件系统中存储的数据进行多节点、多任务的并行计算和分析,对分析结果根据不同的应用进行相应的展现。

【技术实现步骤摘要】

本专利技术属于工矿系统自动化信息采集与控制领域,涉及电力系统实时数据采集、处理与控制系统,尤其是基于云计算的工矿实时数据一体化处理系统及设计方法。
技术介绍
互联网中已经广泛地使用云技术,主要包括三种不同的类型,软件即服务SaaS,平台即服务PaaS,基础架构即服务IaaS。其中PaaS提供了用户可以访问的完整或部分的应用程序开发,SaaS则提供了完整的可直接使用的应用程序,比如通过Internet管理企业资源。而IaaS中的云技术以海量数据管理技术、海量数据分布存储技术、虚拟化技术、云计算平台管理技术最为关键。其中海量数据管理技术和分布式存储技术是数据处理的重要组成部分,云计算需要对分布的、海量的数据进行处理、分析,因此,数据管理技术必须能够高效 的管理大量的数据,此外还需要冗余存储的方式保证数据的可靠性。云计算系统中广泛使用的数据存储系统是Google的GFS和Hadoop团队开发的GFS的开源实现HDFS。工矿企业的安全生产在实际的生产运行中,必然有海量数据(如各种安全生产标准、监测的数据、教育培训知识等)需要处理,云服务平台采用分布式计算存储方式,将计算任务分配到多台机器上并行处理,以此提高运算速度。云平台将安全生产企业实际生产积累的数据信息进行统一的管理与存储,为生产过程中提供基于数据的预测、异常检测等功能,实现企业的安全生产。传统工矿企业的数据采集功能和具体的逻辑判断功能结合紧密,通常由较为单一的硬件设备完成,因此,完成不同的功能就需要配置不同的设备或系统,这些不同功能的设备或系统都有各自独立的数据采集单元。各个数据采集存在着交叉重复采集、利用率不高、数据及信息内容不一致、时间不统一等问题,形成了以纵向层次多、横向系统多为主要特征的“信息孤岛”,制约了信息的进一步融合和应用,数据及信息的重复采集和重复传输处理势必造成各种资源的浪费。大多数工矿企业中的仪表分成三类保护类,测控类,计量类,他们都有自己的数据采集和处理单元,可与监控显示系统连接,用于基础参数测量。但也存在以下技术问题(I)仪表的精度不同,造成了数据不一致,成本上也不经济。(2)仪表采集频率不同、算法不同造成了同一个量值在不同的仪表中也不同,数据冗余而且混乱。(3)系统与设备,设备与设备之间通讯困难,缺乏统一标准。(4)过程数据缺失,在采样的过程中,产生了大量的过程数据,这些数据对于后期的事故分析或业务扩展都是有价值的,但我们从仪表中取得的都是经过N次运算的“二手数据”,“简化值”。这种独立配置、独立计算、独立功能的装置带来的问题是信息共享差,利用率低和硬、软件资源浪费问题。为解决以上提到的问题,尤其是数据分别采集、数据分别处理与计算、数据难于共享等关键问题,有必要建立一套新的框架与机制,实现同一类型设备的数据一次采集,能在整套统一的软件应用平台下利用云计算技术实现测控、保护、相量测量、计量等多种应用功倉泛。
技术实现思路
本专利技术的目的是提供一种工矿企业的安全生产云服务平台系统,以解决设备独立配置、独立计算、独立功能的装置带来的信息共享差、利用率低和软、硬件资源浪费的问题,实现同一类型设备数据的一次采集,及测控、保护、相量测量、计量等多种应用。所述的工矿企业的安全生产云服务平台系统,包括I)建立面向工矿企业的安全生产云服务平台,该平台集成了支持安全生产服务的 海量数据处理、安全生产管理业务协同以及系统管理等功能,为工矿企业的安全生产与政府监管提供重要的技术支持。2)基于安全事故事件多维关联规则分析技术,能从海量的生产数据中分析挖掘出可能导致事故及未遂事件发生的频繁因素和潜在规律,建立安全生产标准效用及标准缺失情况的动态监测预警分析方法,为政府及行业监管部门制定基于风险的、合理的作业标准提供科学的依据。3)提出了工矿企业安全生产中的海量数据处理方法,具体包括基于支持向量机的安全生产异常检测技术、基于广义规则推理的知识发现技术,能对生产的海量数据进行分析与知识挖掘,从而帮助企业提升事故预防预警和应急处置能力,提高企业安全生产水平。4)开发安全生产管理工具集,方便工矿行业安全生产的安全管理、监督、配置等,实现企业的快速排查、快速响应。其中开发的面向工矿企业的安全生产云服务平台,集成了支持安全生产服务云的海量数据处理、安全生产管理业务协同以及系统管理等功能,实现对企业生产安全的实时监测与预警。具体而言,一种用于面向工矿企业的安全生产云服务平台的数据存储系统,其特征在于所述面向工矿企业的安全生产云服务平台系统,其特征在于包括安全云服务平台门户子系统,系统管理与相关工具集研制子系统,应用服务层子系统,虚拟资源层子系统,平台服务支撑层子系统,接入与适配层子系统,安全服务资源子系统,基础设施服务支撑层子系统,所述应用服务层子系统还包括海量数据处理系统,由数据采集设备、数据整合设备、数据管理设备、标准化服务接口设备以及高速可靠的光纤通信网络五大部分组成,构成基于云计算的工矿企业实时数据一体化处理系统,在所述数据采集设备中设有数据存储层,针对工矿企业中来自各种不同数据源的海量数据,对其进行处理后生成与不同业务对应的统一接口的主题数据,并将这些主题数据存储在分布式文件系统中,在有任务请求时,根据不同的任务请求,对所述分布式文件系统中存储的数据进行多节点、多任务的并行计算和分析,对分析结果根据不同的应用进行相应的展现。所述的用于面向工矿企业的安全生产云服务平台的数据存储系统,其特征在于所述数据存储系统包括至少一个云存储管理节点,至少一个云存储空间以及至少一个虚拟设备,云存储管理节点、云存储空间与虚拟设备构成私有云。所述的用于面向工矿企业的安全生产云服务平台的数据存储系统,其特征在于所述数据存储系统包括两个云存储管理节点、三个云存储空间与多个虚拟设备,三个云存储空间与多个虚拟设备构成一个私有云。所述的用于面向工矿企业的安全生产云服务平台的数据存储系统,其特征在于所述数据存储系统包括两个云存储管理节点a、b,云存储管理节点a与云存储管理节点b相互连接,两个云存储管理节点之间相互接管,两个云存储管理节点之间可以均衡负载并且在其中一个云存储管理节点在发生故障时互为接管,以保证基于该云存储架构的系统运行时的可靠性能。所述的用于面向工矿企业的安全生产云服务平台的数据存储系统,其特征在于所述两个云存储管理节点可分别对三个云存储空间以及多个虚拟设备进行管理,其管理包括对三个云存储空间与多个虚拟设备进行的新建、删除与配置,以进行系统备份、恢复与扩容。每个云存储管理节点中都有数据目录,数据目录用于记录云存储空间及虚拟设备的相关信息,云存储管理节点通过其内部的数据目录中的相关数据找到相对应的云存储空间与虚拟设备;另外,每个云存储管理节点上都设置有统一的应用程序访问入口,该应用程序访问入口为应用程序接口,应用程序/服务通过调用该应用程序访问入口访问云存储空间;外部的应用程序/服务分别与云存储架构中的云存储管理节点a、b相连接,在云存储管理节点上设置有统一的应用程序访问入口,应用程序/服务会通过应用程序访问入口指明访问或存取任意一个云存储空间中的相应信息、或者对云存储空间以及虚拟设备进行管理,应用程序/服务通过调用应用程序访问入口连接上云存储管理节点,接着应用程序/服务会本文档来自技高网
...

【技术保护点】
一种用于面向工矿企业的安全生产云服务平台的数据存储系统,其特征在于所述面向工矿企业的安全生产云服务平台系统,其特征在于:包括安全云服务平台门户子系统,系统管理与相关工具集研制子系统,应用服务层子系统,虚拟资源层子系统,平台服务支撑层子系统,接入与适配层子系统,安全服务资源子系统,基础设施服务支撑层子系统,所述应用服务层子系统还包括海量数据处理系统,由数据采集设备、数据整合设备、数据管理设备、标准化服务接口设备以及高速可靠的光纤通信网络五大部分组成,构成基于云计算的工矿企业实时数据一体化处理系统,在所述数据采集设备中设有数据存储层,针对工矿企业中来自各种不同数据源的海量数据,对其进行处理后生成与不同业务对应的统一接口的主题数据,并将这些主题数据存储在分布式文件系统中,在有任务请求时,根据不同的任务请求,对所述分布式文件系统中存储的数据进行多节点、多任务的并行计算和分析,对分析结果根据不同的应用进行相应的展现。

【技术特征摘要】
1.一种用于面向工矿企业的安全生产云服务平台的数据存储系统,其特征在于所述面向工矿企业的安全生产云服务平台系统,其特征在于包括安全云服务平台门户子系统,系统管理与相关工具集研制子系统,应用服务层子系统,虚拟资源层子系统,平台服务支撑层子系统,接入与适配层子系统,安全服务资源子系统,基础设施服务支撑层子系统,所述应用服务层子系统还包括海量数据处理系统,由数据采集设备、数据整合设备、数据管理设备、标准化服务接口设备以及高速可靠的光纤通信网络五大部分组成,构成基于云计算的工矿企业实时数据一体化处理系统,在所述数据采集设备中设有数据存储层,针对工矿企业中来自各种不同数据源的海量数据,对其进行处理后生成与不同业务对应的统一接口的主题数据,并将这些主题数据存储在分布式文件系统中,在有任务请求时,根据不同的任务请求,对所述分布式文件系统中存储的数据进行多节点、多任务的并行计算和分析,对分析结果根据不同的应用进行相应的展现。2.根据权利要求I所述的用于面向工矿企业的安全生产云服务平台的数据存储系统,其特征在于所述数据存储系统包括至少一个云存储管理节点,至少一个云存储空间以及至少一个虚拟设备,云存储管理节点、云存储空间与虚拟设备构成私有云。3.根据权利要求I所述的用于面向工矿企业的安全生产云服务平台的数据存储系统,其特征在于所述数据存储系统包括两个云存储管理节点、三个云存储空间与多个虚拟设备,三个云存储空间与多个虚拟设备构成一个私有云。4.根据权利要求3所述的用于面向工矿企业的安全生产云服务平台的数据存储系统,其特征在于所述数...

【专利技术属性】
技术研发人员:张峰生王斌王楠陈新
申请(专利权)人:浙江图讯科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1