一种环境测评大数据建设专用云存储系统技术方案

技术编号:17601198 阅读:59 留言:0更新日期:2018-03-31 13:13
本发明专利技术公开一种环境测评大数据建设专用云存储系统,其特征是采用分层结构,整个系统从逻辑上分为五层,分别为设备层、存储层、管理层、接口层、应用层,所述设备层为存储设备,所述存储层上有云存储数据系统,通过数据和标准存储设备之间的通信连接,完成数据写入、读取和调用,所述管理层设备中输入多种管理功能,对上层服务器的指令进行响应,所述接口层为用户应用提供访问接口,所述接口层与应用层连接。本发明专利技术虚拟空间管理高效灵活,数据检索速度快容量大,数据服务可靠性强,可实现连续不间断地持续数据服务,应用支撑的扩展性强,兼容系统开放透明,适合在环境测评大数据建设云存储系统中推广使用。

【技术实现步骤摘要】
一种环境测评大数据建设专用云存储系统
本专利技术涉及大数据建设专用云存储
,具体属于一种环境测评大数据建设专用云存储系统。
技术介绍
近年来优化国内环境建设,改善国内不同地区内的整体环境问题完全符合国家整体发展建设战略方向。为此,国家要求各级项目建设必须先进行环境整体评测,在项目环评整体合格同时满足国家环境相关要求时,项目建设才能持续进行。为了实现国家对各类项目建设环境评测的整体管理,需要建立各类项目的环境评测大数据库,已满足国家及相关政府部门对相关项目的整体跟踪监管,使各级项目建设在推动地区经济建设的同时,顺应地区环境的长远可持续发展。在环境测评大数据建设过程中,云存储是实现环境测评大数据建设中的一个重要组成部分。随着信息技术的不断发展,传统的SAN(StorageArewNetwork)或NAS(NetworkAttachedStorage)存储技术在存储容量和可扩展性上存在瓶颈,并且在硬件设备的部署数量上也存在一定限制,这使得用户升级系统的成本大大增加。云存储系统与传统存储系统相比,具有以下特点:1,从功能需求来看,云存储系统面向多种类型的网络在线存储服务,而传统存储系统则面向如高性能计算、事务处理等应用;2,从性能需求来看,云存储服务首先需要考虑的是数据的安全、可靠、效率等指标,而且由于用户规模大、服务范围广、网络环境复杂多变等特点,实现高质量的云存储服务必将面临更大的技术挑战;第三,从数据管理来看,云存储系统不仅要提供类似于POSIX的传统文件访问,还要能够支持海量数据管理并提供公共服务支撑功能,以方便云存储系统后台数据的维护。云存储采用可扩展的分布式文件系统,并使用廉价的Pc机来进行系统部署,从而使得整体存储架构能够保持极低的成本。云存储是通过集群应用、网格技术、分布式文件系统等,将网络中大量类型各异的存储设备整合起来,并对外提供数据存储和业务访问功能的系统。简单来说,云存储是对虚拟化存储资源的管理和使用。云存储系统以传统的分布式存储技术为基础,利用高吞吐率网络技术为依托。在此过程中经常出现分布式存储技术跟踪监控困难,信息安全查询不方便,虚拟空间管理不灵活,数据检索速度慢,数据服务安全性差,数据服务连续性差,扩展性弱,接口种类不灵活。为此,本专利技术提供了一种环境测评大数据建设专用云存储系统。
技术实现思路
本专利技术目的是提供一种环境测评大数据建设专用云存储系统,可解决上述
技术介绍
中提到的问题,同时本专利技术虚拟空间管理高效灵活,数据检索速度快容量大,数据服务可靠性强,跟踪监控容易,可实现连续不间断地持续数据服务,应用支撑的扩展性强,兼容系统开放透明。本专利技术所采用的技术方案如下:一种环境测评大数据建设专用云存储系统,其特征是采用分层结构,整个系统从逻辑上分为五层,分别为设备层、存储层、管理层、接口层、应用层,所述设备层为存储设备相互连接组成,存储设备为IP-SAN存储设备是SAN架构下存储传输协议下的标准存储设备,所述SAN架构为SAN网络的主要和流行结构,采用专业的光纤通道交换机来实现,所述存储层上有云存储数据系统,通过调用云存储数据系统中存储传输协议下标准存储设备之间的逻辑卷或磁盘阵列的映射,通过数据和标准存储设备之间的通信连接,完成数据写入、读取和调用,所述管理层设备中输入多种管理功能,对标准存储设备进行逻辑虚拟化管理、多链路冗余管理、状态监控和故障维护,对整个存储系统进行虚拟化统一管理,对上层服务器的指令进行响应,所述接口层为用户应用提供统一完善的访问接口,所述接口的类型有WebService接口、API接口、Mibs接口,所述接口层与应用层连接,应用层中有行业平台、智能平台和运维平台,所述行业平台对其它四层进行应用分配计划、配置存储策略、检索资源、重要数据的备份存储指令交互,以及辅助数据的存取,所述智能平台与其它四层对接,进行基础数据读取,对经过存储二次分析后的片段信息文本信息进行写入和检索,所述运维平台具有满足存储传输协议要求的接口,通过接口与其它四层中的设备连接,对设备运行状态及相关服务功能进行监控,将产生的告警信息传递给用户,所述设备层与存储层连接,管理层有监控设备和管理软件,监控设备与设备层存储层连接,管理软件输入存储与设备层存储层硬件设备内,接口层包括接口连接传输设备,接口层将设备层存储层管理层中监控设备相互连接,接口层将设备层存储层应用层之间的设备相互连接。所述管理层具有索引管理、日志管理、调度管理、资源管理、集群管理、设备管理,对标准存储设备进行逻辑虚拟化管理、多链路冗余管理的主动指令下发。所述接口层通过WebService接口进行录像计划和资源存储,通过API接口进行数据管理和资源管理,通过Mibs接口进行设备监控和服务管理。与已有技术相比,本专利技术的有益效果如下:本专利技术通过采用分层式结构,将整个系统从逻辑上分为五层设备层、存储层、管理层、接口层、应用层的整体设计组合,对存储层采用存储全域虚拟化,将具有海量存储需求的用户提供透明存储构架,可持续扩容避免瓶颈限制,更有效的进行资源管理,灵活增减空间,达到最大程度上合理利用空间的效果;在本专利技术整个系统中使用负载均载充分利用各存储节点的性能,提升系统的可靠性和安全性;管理层设备中输入多种管理功能,对标准存储设备进行逻辑虚拟化管理、多链路冗余管理、状态监控和故障维护,确保本专利技术系统的跟踪监控容易,可实现连续不间断地持续数据服务;接口层为用户应用提供统一完善的访问接口,降低对接成本、平台维护成本和用户管理的复杂度。设备层和存储层具有数据备份和容灾技术功能,保证云存储中的数据不丢失,保证云存储服务的安全稳定;接口层与应用层连接,应用层中有行业平台、智能平台和运维平台,采用开放的集成构架,使其可兼容业界各类ISCSI/FC存储设备,保护用户现有存储投资资源,确保用户高效读写同时数据传输的持续性强。本专利技术虚拟空间管理高效灵活,数据检索速度快容量大,数据服务可靠性强,跟踪监控容易,可实现连续不间断地持续数据服务,应用支撑的扩展性强,兼容系统开放透明,适合在环境测评大数据建设云存储系统中推广使用。附图说明图1为本专利技术逻辑架构图;具体实施方式下面将结合本专利技术实施例中的附图,对本专利技术实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本专利技术一部分实施例,而不是全部的实施例。基于本专利技术中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于专利技术保护的范围。下面结合实施例和具体实施方式对本专利技术作进一步详细的说明。一种环境测评大数据建设专用云存储系统,其特征是采用分层结构,整个系统从逻辑上分为五层,分别为设备层、存储层、管理层、接口层、应用层,所述设备层为存储设备相互连接组成,存储设备为IP-SAN存储设备是SAN架构下存储传输协议下的标准存储设备,所述SAN架构为SAN网络的主要和流行结构,采用专业的光纤通道交换机来实现,所述存储层上有云存储数据系统,通过调用云存储数据系统中存储传输协议下标准存储设备之间的逻辑卷或磁盘阵列的映射,通过数据和标准存储设备之间的通信连接,完成数据写入、读取和调用,所述管理层设备中输入多种管理功能,对标准存储设备进行逻辑虚拟化管理、多链路冗余管理、状态监控和故障维护,对整本文档来自技高网
...
一种环境测评大数据建设专用云存储系统

【技术保护点】
一种环境测评大数据建设专用云存储系统,其特征是采用分层结构,整个系统从逻辑上分为五层,分别为设备层、存储层、管理层、接口层、应用层,所述设备层为存储设备相互连接组成,存储设备为IP‑SAN存储设备是SAN架构下存储传输协议下的标准存储设备,所述SAN架构为SAN网络的主要和流行结构,采用专业的光纤通道交换机来实现,所述存储层上有云存储数据系统,通过调用云存储数据系统中存储传输协议下标准存储设备之间的逻辑卷或磁盘阵列的映射,通过数据和标准存储设备之间的通信连接,完成数据写入、读取和调用,所述管理层设备中输入多种管理功能,对标准存储设备进行逻辑虚拟化管理、多链路冗余管理、状态监控和故障维护,对整个存储系统进行虚拟化统一管理,对上层服务器的指令进行响应,所述接口层为用户应用提供统一完善的访问接口,所述接口的类型有Web Service接口、API接口、Mibs接口,所述接口层与应用层连接,应用层中有行业平台、智能平台和运维平台,所述行业平台对其它四层进行应用分配计划、配置存储策略、检索资源、重要数据的备份存储指令交互,以及辅助数据的存取,所述智能平台与其它四层对接,进行基础数据读取,对经过存储二次分析后的片段信息文本信息进行写入和检索,所述运维平台具有满足存储传输协议要求的接口,通过接口与其它四层中的设备连接,对设备运行状态及相关服务功能进行监控,将产生的告警信息传递给用户,所述设备层与存储层连接,管理层有监控设备和管理软件,监控设备与设备层存储层连接,管理软件输入存储与设备层存储层硬件设备内,接口层包括接口连接传输设备,接口层将设备层存储层管理层中监控设备相互连接,接口层将设备层存储层应用层之间的设备相互连接。...

【技术特征摘要】
1.一种环境测评大数据建设专用云存储系统,其特征是采用分层结构,整个系统从逻辑上分为五层,分别为设备层、存储层、管理层、接口层、应用层,所述设备层为存储设备相互连接组成,存储设备为IP-SAN存储设备是SAN架构下存储传输协议下的标准存储设备,所述SAN架构为SAN网络的主要和流行结构,采用专业的光纤通道交换机来实现,所述存储层上有云存储数据系统,通过调用云存储数据系统中存储传输协议下标准存储设备之间的逻辑卷或磁盘阵列的映射,通过数据和标准存储设备之间的通信连接,完成数据写入、读取和调用,所述管理层设备中输入多种管理功能,对标准存储设备进行逻辑虚拟化管理、多链路冗余管理、状态监控和故障维护,对整个存储系统进行虚拟化统一管理,对上层服务器的指令进行响应,所述接口层为用户应用提供统一完善的访问接口,所述接口的类型有WebService接口、API接口、Mibs接口,所述接口层与应用层连接,应用层中有行业平台、智能平台和运维平台,所述行业平台对其它四层进行应用分配计划、配置存储策略、检索资源、重要数据的备份存储指令交...

【专利技术属性】
技术研发人员:吴涛杨小娟邓衍报
申请(专利权)人:安徽伊尔思环境科技有限公司
类型:发明
国别省市:安徽,34

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1