云存储集群的数据均衡方法、装置、设备和存储介质制造方法及图纸

技术编号:22977427 阅读:37 留言:0更新日期:2020-01-01 00:25
本发明专利技术实施例公开了一种云存储集群的数据均衡方法、装置、设备和存储介质。本发明专利技术实施例一种云存储集群的数据均衡方法包括:当云存储集群中的节点发生变化时,获取云存储集群中的节点的权重值,所述权重值用于表示对应节点的存储能力,权重值越高表示对应节点的存储能力越高;以将数据写入权重值最高者对应的节点为目的,在所述云存储集群的现有节点中均衡存储数据,并根据数据均衡存储后的存储能力调整相应节点的权重值。本发明专利技术实施例实现在云存储集群中的节点发生变化时以最少的数据均衡迁移量达到各节点的平衡,减少网络负荷,提高数据均衡效率。

Data balancing methods, devices, devices and storage media of cloud storage cluster

【技术实现步骤摘要】
云存储集群的数据均衡方法、装置、设备和存储介质
本专利技术实施例涉及云计算存储技术,尤其涉及一种云存储集群的数据均衡方法、装置、设备和存储介质。
技术介绍
在云存储集群中存在物理资源发生变动的情况,具体的原因包括因为某个存储节点损坏导致该节点离线,或者因为存储容量不够需要添加一个存储节点等。目前针对物理资源发生变动,云存储集群的解决策略是更新集群的整体拓扑结构,重新计算集群中的数据的位置,进行重新的均衡操作。但是,上述策略在集群拓扑变动的情况下始终会造成数据的重新均衡移动,即使经过算法的优化可以让大部分数据不需要移动,但在集群中存储了大量数据的情况下,也会使得相当一部分数据的均衡,这会造成网络负载增大,影响服务。
技术实现思路
本专利技术实施例提供一种云存储集群的数据均衡方法、装置、设备和存储介质,以实现在云存储集群中的节点发生变化时以最少的数据均衡迁移量达到各节点的平衡,减少网络负荷,提高数据均衡效率。第一方面,本专利技术实施例提供了一种云存储集群的数据均衡方法,包括:当云存储集群中的节点发本文档来自技高网...

【技术保护点】
1.一种云存储集群的数据均衡方法,其特征在于,包括:/n当云存储集群中的节点发生变化时,获取云存储集群中的节点的权重值,所述权重值用于表示对应节点的存储能力,权重值越高表示对应节点的存储能力越高;/n以将数据写入权重值最高者对应的节点为目的,在所述云存储集群的现有节点中均衡存储数据,并根据数据均衡存储后的存储能力调整相应节点的权重值。/n

【技术特征摘要】
1.一种云存储集群的数据均衡方法,其特征在于,包括:
当云存储集群中的节点发生变化时,获取云存储集群中的节点的权重值,所述权重值用于表示对应节点的存储能力,权重值越高表示对应节点的存储能力越高;
以将数据写入权重值最高者对应的节点为目的,在所述云存储集群的现有节点中均衡存储数据,并根据数据均衡存储后的存储能力调整相应节点的权重值。


2.根据权利要求1所述的方法,其特征在于,当所述云存储集群中加入新节点时,所述新节点为新注册加入所述云存储集群的节点,在所述获取云存储集群中的节点的权重值之前,还包括:
将所述新节点的权重值确定为权重值范围中的最高值。


3.根据权利要求1所述的方法,其特征在于,当所述云存储集群中加入旧节点时,所述旧节点为已加入过所述云存储集群并退出的节点,在所述获取云存储集群中的节点的权重值之前,还包括:
确定所述旧节点中存储的数据;
查询在所述云存储集群的现有节点中是否已经有N个节点备份了所述旧节点中存储的数据,N为设定的数据备份总数;
从所述旧节点中删除已在所述云存储集群的N个节点中备份过的数据,并根据删除数据后的存储能力计算所述旧节点的权重值。


4.根据权利要求2或3所述的方法,其特征在于,所述以将数据写入权重值最高者对应的节点为目的,在所述云存储集群的现有节点中均衡存储数据,并根据数据均衡存储后的存储能力调整相应节点的权重值,包括:
将新传入的数据做N个备份,并将各个备份分别写入所述权重值中的前N个值高者对应的现有节点,并根据写入所述新传入的数据后的存储能力分别调整所述前N个值高者对应的现有节点的权重值。


5.根据权利要求1所述的方法,其特征在于,当所述云存储集群中删除节点时,在所述获取云存储集群中的节点的权重值之前,还包括:
确定删除的节点中存储的数据;
所述以将数据写入权重值最高者对应的节点为目的,在所述云存储集群的现有节点中均衡存储数据,并根据数据均衡存储后的存储能力调整相应节点的权重值,包括:
将所述删除的节点中存储的数据写入所述权重值中的最高者对应的现有节点,并根据写入所述删除的节点中存储的数据后的存储能力调整所述最高者对应的现有节点的权重值。


6.一种云存储集群的数据均...

【专利技术属性】
技术研发人员:刘洋张海杰
申请(专利权)人:北京东土科技股份有限公司
类型:发明
国别省市:北京;11

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1