一种集群中数据的缓存方法、系统及存储管理软件技术方案

技术编号:32571849 阅读:15 留言:0更新日期:2022-03-09 16:59
本发明专利技术提供了一种集群中数据的缓存方法、系统及存储管理软件,所述缓存方法包括获取集群中各节点的运行信息,基于所述运行信息计算各节点的运行压力;选取所述运行压力最小的节点作为数据缓存节点;根据用户查询数据的次数及接口的响应时间,调整需要缓存的数据。本发明专利技术通过对集群中个节点的运行压力进行分析,将运行压力最小的节点作为缓存节点,提高数据的缓存效率,另外通过用户对数据的查询次数和接口的响应时间,对需要进行缓存的数据进行调整,在不影响用户体验的前提下,做到资源的节约与合理利用,增强存储系统的鲁棒性。增强存储系统的鲁棒性。增强存储系统的鲁棒性。

【技术实现步骤摘要】
一种集群中数据的缓存方法、系统及存储管理软件


[0001]本专利技术涉及数据存储
,尤其是一种集群中数据的缓存方法、系统及存储管理软件。

技术介绍

[0002]Browser/Server(浏览器/服务器模式,又称B/S架构)结构利用不断成熟的web浏览器技术,实现原来需要专用软件才能实现的强大功能,节约了开发成本。
[0003]现有的存储管理软件基于B/S架构,实现了存储系统的界面化管理,用户能够通过界面操作实现存储的资源管理,并能够通过管理软件界面直观的查看存储信息并进行相关操作。面对越来越多的存储信息,尤其是大规模集群下的硬件信息获取,给管理软件带来了很大的压力,不少信息的获取耗时很长,用户等待时间直接造成了用户体验的不友好。
[0004]解决此类问题的通用办法是对查询耗时长的信息进行缓存,界面查询数据不再直接调用接口,而是从缓存数据库或者缓存文件直接读取。但是此方法过于单一,仅仅是为了实现获取数据的时间要求,但是不同用户,甚至不同的存储系统的缓存要求却未必一样,简单粗暴的缓存有可能也会造成资源的浪费。

技术实现思路

[0005]本专利技术提供了一种集群中数据的缓存方法、系统及存储管理软件,用于解决现有缓存方式单一,造成资源浪费的问题。
[0006]为实现上述目的,本专利技术采用下述技术方案:
[0007]本专利技术第一方面提供了一种集群中数据的缓存方法,所述缓存方法包括以下步骤:
[0008]S1,获取集群中各节点的运行信息,基于所述运行信息计算各节点的运行压力;
[0009]S2,选取所述运行压力最小的节点作为数据缓存节点;
[0010]S3,根据用户查询数据的次数及接口的响应时间,调整需要缓存的数据。
[0011]进一步地,所述运行信息包括若干影响因素,具体为CPU利用率、内存利用率、磁盘利用率和节点的业务压力。
[0012]进一步地,所述基于所述运行信息计算各节点的运行压力的具体过程为:
[0013]为所述运行信息中的每个影响因素分配权重值;
[0014]将运行信息中各影响因素的加权值作为运行压力。
[0015]进一步地,所述根据用户查询数据的次数及接口的响应时间,调整需要缓存的数据的具体过程为:
[0016]计算用户查询数据的次数与对应响应时间的乘积,并取所有接口所述乘积的均值,作为缓存需求值;
[0017]计算所述运行压力与所述缓存需求值的比值,将所述乘积中大于所述比值的数据进行缓存。
[0018]进一步地,当集群中节点的数量发生变更时,重复执行所述步骤S1

步骤S3的操作。
[0019]进一步地,所述方法在调整需要缓存的数据之后,还包括步骤:
[0020]同步缓存数据推送至主节点。
[0021]本专利技术第二方面提供了一种集群中数据的缓存系统,所述系统包括:
[0022]信息采集单元,用于获取集群中各节点的运行信息,基于所述运行信息计算各节点的运行压力;
[0023]节点选取单元,选取所述运行压力最小的节点作为数据缓存节点;
[0024]数据调整单元,根据用户查询数据的次数及接口的响应时间,调整需要缓存的数据。
[0025]进一步地,所述数据调整单元包括:
[0026]计算子单元,用于计算用户查询数据的次数与对应响应时间的乘积,并取所有接口所述乘积的均值,作为缓存需求值;
[0027]比对子单元,用于计算所述运行压力与所述缓存需求值的比值,将所述乘积中大于所述比值的数据进行缓存。
[0028]本专利技术第三方面提供了一种存储管理软件,所述存储管理软件部署在集群中的各节点上,所述存储管理软件中设有所述的缓存系统。
[0029]本专利技术第四方面提供了一种计算机存储介质,所述计算机存储介质中存储有计算机指令,所述计算机指令在所述缓存系统上运行时,使所述缓存系统执行所述缓存方法的步骤。
[0030]本专利技术第二方面的所述集群中数据的缓存系统能够实现第一方面及第一方面的各实现方式中的方法,并取得相同的效果。
[0031]
技术实现思路
中提供的效果仅仅是实施例的效果,而不是专利技术所有的全部效果,上述技术方案中的一个技术方案具有如下优点或有益效果:
[0032]本专利技术通过对集群中个节点的运行压力进行分析,将运行压力最小的节点作为缓存节点,提高数据的缓存效率,另外通过用户对数据的查询次数和接口的响应时间,对需要进行缓存的数据进行调整,在不影响用户体验的前提下,做到资源的节约与合理利用,增强存储系统的鲁棒性。
附图说明
[0033]为了更清楚地说明本专利技术实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,对于本领域普通技术人员而言,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
[0034]图1是本专利技术所述方法实施例的流程示意图;
[0035]图2是本专利技术所述系统实施例的结构示意图。
具体实施方式
[0036]为能清楚说明本方案的技术特点,下面通过具体实施方式,并结合其附图,对本专利技术进行详细阐述。下文的公开提供了许多不同的实施例或例子用来实现本专利技术的不同结
构。为了简化本专利技术的公开,下文中对特定例子的部件和设置进行描述。此外,本专利技术可以在不同例子中重复参考数字和/或字母。这种重复是为了简化和清楚的目的,其本身不指示所讨论各种实施例和/或设置之间的关系。应当注意,在附图中所图示的部件不一定按比例绘制。本专利技术省略了对公知组件和处理技术及工艺的描述以避免不必要地限制本专利技术。
[0037]如图1所示,本专利技术实施例提供了一种集群中数据的缓存方法,其特征是,所述缓存方法包括以下步骤:
[0038]S1,获取集群中各节点的运行信息,基于所述运行信息计算各节点的运行压力;
[0039]S2,选取所述运行压力最小的节点作为数据缓存节点;
[0040]S3,根据用户查询数据的次数及接口的响应时间,调整需要缓存的数据。
[0041]步骤S1中,所述运行信息包括若干影响因素,具体为CPU利用率c1、内存利用率m1、磁盘利用率d1和节点的业务压力p1。
[0042]所述基于所述运行信息计算各节点的运行压力的具体过程为:
[0043]为所述运行信息中的每个影响因素分配权重值;其中CPU利用率、内存利用率、磁盘利用率和业务压力的权重值分别为c2、m2、d2和p2。
[0044]将运行信息中各影响因素的加权值作为运行压力A,则A=c1*c2+m1*m2+d1*d2+p1*p2。
[0045]集群中每个节点对应的计算一个A值。
[0046]步骤S3中,所述根据用户查询数据的次数及接口的响应时间,调整需要缓存的数据的具体过程为:
[0047]计算用户查询数据的次数n1、n2

nm(m表示数据接口)与对应响应时间t1、t2<本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种集群中数据的缓存方法,其特征是,所述缓存方法包括以下步骤:S1,获取集群中各节点的运行信息,基于所述运行信息计算各节点的运行压力;S2,选取所述运行压力最小的节点作为数据缓存节点;S3,根据用户查询数据的次数及接口的响应时间,调整需要缓存的数据。2.根据权利要求1所述集群中数据的缓存方法,其特征是,所述运行信息包括若干影响因素,具体为CPU利用率、内存利用率、磁盘利用率和节点的业务压力。3.根据权利要求2所述集群中数据的缓存方法,其特征是,所述基于所述运行信息计算各节点的运行压力的具体过程为:为所述运行信息中的每个影响因素分配权重值;将运行信息中各影响因素的加权值作为运行压力。4.根据权利要求1所述集群中数据的缓存方法,其特征是,所述根据用户查询数据的次数及接口的响应时间,调整需要缓存的数据的具体过程为:计算用户查询数据的次数与对应响应时间的乘积,并取所有接口所述乘积的均值,作为缓存需求值;计算所述运行压力与所述缓存需求值的比值,将所述乘积中大于所述比值的数据进行缓存。5.根据权利要求1所述集群中数据的缓存方法,其特征是,当集群中节点的数量发生变更时,重复执行所述步骤S1

步骤S3的操作。6.根据权...

【专利技术属性】
技术研发人员:马聪谢鹏
申请(专利权)人:苏州浪潮智能科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1