数据存储方法、装置及管理服务器制造方法及图纸

技术编号:20363038 阅读:16 留言:0更新日期:2019-02-16 16:36
本发明专利技术公开了一种数据存储方法,应用于使用情况分析系统中的管理服务器,在接收到客户端发送的待存储的使用情况数据之后,会将使用情况数据按照使用情况类型进行分块,并根据使用情况类型将数据块存储到对应的云存储服务器。可见,本发明专利技术提供的数据存储方法,能够将使用情况数据按照使用情况类型进行分块并存储到对应的云存储服务器上,因此云存储服务器上存储的数据类型较为单一,在对云存储服务器上的数据进行分析计算时,只需要对一种类型的数据进行分析计算,占用的内存资源较少,提高了数据分析计算的效率。此外,本发明专利技术还提供了一种数据存储装置及管理服务器,其作用与上述方法的作用相对应。

【技术实现步骤摘要】
数据存储方法、装置及管理服务器
本专利技术涉及数据存储领域,特别涉及一种数据存储方法、装置及管理服务器。
技术介绍
随着国网公司信息化建设的深入,公司在运信息系统设备数量快速增长,当前各单位信息系统数量已增至百套以上、设备数量超过几千台,而目前信息系统的资源占用率、运行环境交付、升级等运维作业仍然依赖传统手工方式,存在需求响应慢、人员依赖性高、有操作失误风险等问题。同时,运维人员长期陷在重复性、低技术含量的工作中,工作压力沉重,运维成效无法测量,创造能力得不到发挥。在这种情况下,使用情况分析系统应运而生。使用情况分析系统采用分布式系统,包括多个云存储服务器,云存储服务器执行分布式处理任务的体系结构,主要用于存储客户端采集到的使用情况数据,以便于进行后续的分析和计算,最终实现提高系统运维效率的目的。但是,由于使用情况数据包括诸多类型的数据,因此在对云存储服务器上的数据进行分析计算的时候,需要同时对多种类型的数据进行分析计算,占用较多的内存资源,计算效率较低。
技术实现思路
本专利技术的目的是提供一种数据存储方法、装置及管理服务器,用以解决传统使用情况分析系统中的云存储服务器上存储多种类型的数据,导致数据分析计算效率较低的问题。为解决上述技术问题,本专利技术提供了一种数据存储方法,应用于使用情况分析系统中的管理服务器,所述使用情况分析系统还包括客户端和云存储服务器,包括:接收所述客户端发送的待存储的使用情况数据;按照使用情况类型对所述使用情况数据进行分块,得到多个数据块;根据各个所述数据块的使用情况类型,从多个所述云存储服务器中确定用于存储所述数据块的云存储服务器;将所述数据块存储到对应的云存储服务器。其中,所述根据各个所述数据块的使用情况类型,从多个所述云存储服务器中确定用于存储所述数据块的云存储服务器包括:根据各个所述数据块的使用情况类型以及所述云存储服务器的闲忙情况,从多个所述云存储服务器中确定用于存储所述数据块的云存储服务器。其中,在所述根据各个所述数据块的使用情况类型,从多个所述云存储服务器中确定用于存储所述数据块的云存储服务器之后,包括:将所述数据块与用于存储所述数据块的云存储服务器之间的对应关系发送到所述客户端。其中,所述对应关系包括所述云存储服务器的IP地址和端口号。其中,在所述接收所述客户端发送来的待存储的使用情况数据之前,包括:接收所述客户端发送来的连接建立请求,所述连接建立请求包括所述客户端的地理位置或机器类型;根据所述连接建立请求,确定用于存储所述客户端上数据的云存储服务器;所述从多个所述云存储服务器中确定分别用于存储各个所述数据块的云存储服务器包括:从多个所述用于存储所述客户端上数据的云存储服务器中确定分别用于存储各个所述数据块的云存储服务器。其中,所述云存储服务器为采用Hadoop分布式文件系统的计算机。其中,所述使用情况类型包括设备使用情况、数据库使用情况以及用户使用情况中至少两项。此外,本专利技术还提供了一种数据存储装置,应用于使用情况分析系统中的管理服务器,所述使用情况分析系统还包括客户端和云存储服务器,包括:待存储数据接收模块:用于接收所述客户端发送来的待存储的使用情况数据;数据划分模块:用于按照使用情况类型对所述使用情况数据进行分块,得到多个数据块;云存储服务器确定模块:用于根据各个所述数据块的使用情况类型,从多个所述云存储服务器中确定用于存储所述数据块的云存储服务器;数据块存储模块:用于将所述数据块存储到对应的云存储服务器。其中,所述云存储服务器确定模块具体用于:根据各个所述数据块的使用情况类型以及所述云存储服务器的闲忙情况,从多个所述云存储服务器中确定用于存储所述数据块的云存储服务器。最后,本专利技术还提供了一种管理服务器,应用于使用情况分析系统,所述使用情况分析系统包括客户端和云存储服务器,所述管理服务器用于接收所述客户端发送来的待存储的使用情况数据,并按照使用情况类型对所述使用情况数据进行分块,得到多个数据块;还用于根据各个所述数据块的使用情况类型,从多个所述云存储服务器中确定用于存储所述数据块的云存储服务器,并将所述数据块存储到对应的云存储服务器。本专利技术所提供的一种数据存储方法,应用于使用情况分析系统中的管理服务器,在接收到客户端发送的待存储的使用情况数据之后,会将使用情况数据按照使用情况类型进行分块,并根据使用情况类型将数据块存储到对应的云存储服务器。可见,本专利技术提供的数据存储方法,能够将使用情况数据按照使用情况类型进行分块并存储到对应的云存储服务器上,因此云存储服务器上存储的数据类型较为单一,在对数据进行分析计算时,只需要对一种类型的数据进行分析计算,占用的内存资源较少,提高了数据分析计算的效率。此外,本专利技术还提供了一种数据存储装置及管理服务器,其作用与上述方法的作用相对应,这里不再赘述。附图说明为了更清楚的说明本专利技术实施例或现有技术的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单的介绍,显而易见地,下面描述中的附图仅仅是本专利技术的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。图1为本专利技术提供的一种使用情况分析系统的部分结构框图;图2为本专利技术提供的一种数据存储方法实施例的实现流程图;图3为本专利技术提供的一种数据存储装置实施例的结构框图。具体实施方式本专利技术的核心是提供一种数据存储方法、装置及管理服务器,减少了在进行数据分析计算时内存资源的占用,提高了数据分析计算的效率。为了使本
的人员更好地理解本专利技术方案,下面结合附图和具体实施方式对本专利技术作进一步的详细说明。显然,所描述的实施例仅仅是本专利技术一部分实施例,而不是全部的实施例。基于本专利技术中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本专利技术保护的范围。下面对本专利技术提供的一种数据存储方法实施例进行介绍,该数据存储方法实施例的应用场景参见图1,主要包括使用情况分析系统中的管理服务器100,还包括客户端200和云存储服务器300。参见图2,该实施例包括:步骤S201:接收所述客户端200发送的待存储的使用情况数据。在进行数据存储之前,也就是在步骤S101之前,客户端200与管理服务器100之间需要建立连接。建立连接时,可以同时考虑客户端的情形来确定用于存储该客户端200上数据的云存储服务器300,例如,可以在连接形成时或发起连接的时候,就获取客户端200的地址位置,这样就可以根据客户端200的地址位置,为该客户端200分配距离较近的云存储服务器300。此外,还可以基于客户端200的机器类型等因素为其分配云存储服务器300。具体的建立连接的过程可以如下:客户端200向管理服务器100发送连接建立请求,所述连接建立请求包括所述客户端200的地理位置或机器类型等信息,管理服务器100接收到所述客户端发送来的连接建立请求后,根据所述连接建立请求确定用于存储所述客户端上数据的云存储服务器300。步骤S202:按照使用情况类型对所述使用情况数据进行分块,得到多个数据块。本专利技术所涉及的使用情况类型可以包括设备使用情况、数据库使用情况以及用户使用情况中至少两项。步骤S203:根据各个所述数据块的使用情况类型,从多个所述云存储服务器本文档来自技高网
...

【技术保护点】
1.一种数据存储方法,应用于使用情况分析系统中的管理服务器,所述使用情况分析系统还包括客户端和云存储服务器,其特征在于,包括:接收所述客户端发送的待存储的使用情况数据;按照使用情况类型对所述使用情况数据进行分块,得到多个数据块;根据各个所述数据块的使用情况类型,从多个所述云存储服务器中确定用于存储所述数据块的云存储服务器;将所述数据块存储到对应的云存储服务器。

【技术特征摘要】
1.一种数据存储方法,应用于使用情况分析系统中的管理服务器,所述使用情况分析系统还包括客户端和云存储服务器,其特征在于,包括:接收所述客户端发送的待存储的使用情况数据;按照使用情况类型对所述使用情况数据进行分块,得到多个数据块;根据各个所述数据块的使用情况类型,从多个所述云存储服务器中确定用于存储所述数据块的云存储服务器;将所述数据块存储到对应的云存储服务器。2.如权利要求1所述的方法,其特征在于,所述根据各个所述数据块的使用情况类型,从多个所述云存储服务器中确定用于存储所述数据块的云存储服务器包括:根据各个所述数据块的使用情况类型以及所述云存储服务器的闲忙情况,从多个所述云存储服务器中确定用于存储所述数据块的云存储服务器。3.如权利要求1所述的方法,其特征在于,在所述根据各个所述数据块的使用情况类型,从多个所述云存储服务器中确定用于存储所述数据块的云存储服务器之后,包括:将所述数据块与用于存储所述数据块的云存储服务器之间的对应关系发送到所述客户端。4.如权利要求3所述的方法,其特征在于,所述对应关系包括所述云存储服务器的IP地址和端口号。5.如权利要求1所述的方法,其特征在于,在所述接收所述客户端发送来的待存储的使用情况数据之前,包括:接收所述客户端发送来的连接建立请求,所述连接建立请求包括所述客户端的地理位置或机器类型;根据所述连接建立请求,确定用于存储所述客户端上数据的云存储服务器;所述从多个所述云存储服务器中确定分别用于存储各个所述数据块的云存储服务器包括:从多个所述用于存储所述客户端...

【专利技术属性】
技术研发人员:胡聪吴斌王萍张靖李挺吴尚唐轶轩管建徐道磊吴跃
申请(专利权)人:国网安徽省电力有限公司信息通信分公司四川中电启明星信息技术有限公司国家电网有限公司
类型:发明
国别省市:安徽,34

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1