考虑负载均衡的实时副本调度方法技术

本发明专利技术涉及计算机应用领域，公开了一种考虑负载均衡的实时副本调度方法，包括主管理节点、存储节点，所述存储节点组成存储节点集群，所述主管理节点用于管理所述存储节点集群中的存储节点，所述存储节点负责数据文件的存储，具体步骤包括重载节点检测步骤、重载节点文件排序步骤、副本调度步骤。本发明专利技术的优点在于，考虑了系统的负载均衡，可以快速恢复重载节点的负载，减少重载节点出现的机率，令系统负载更为均衡，提升了系统性能。

【技术实现步骤摘要】

【技术保护点】
一种考虑负载均衡的实时副本调度方法，其特征在于，包括主管理节点、存储节点，所述存储节点组成存储节点集群，所述主管理节点用于管理所述存储节点集群中的存储节点，所述存储节点负责数据文件的存储，具体步骤包括：重载节点检测：所述主管理节点周期性地统计所述存储节点的负载权值，将所述资源使用百分比大于90%的存储节点确定为重载节点，通知所述重载节点执行实时副本调度机制；重载节点文件排序：所述重载节点检测步骤中通知执行实时副本调度机制的重载节点依据所述数据文件的访问热度对所述数据文件进行排序，按照所述访问热度从高到低的顺序分别对所述数据文件执行副本调度，所述访问热度为依据所述数据文件的历史访问记录获得的访问频率；副本调度：包括增加副本步骤和迁移副本步骤，其中，增加副本步骤包括：1）所述重载节点确定所述增加文件的副本数，所述增加文件为所述重载节点文件排序步骤中进行副本调度的数据文件；2）所述重载节点向所述主管理节点发送副本增加请求；3）所述主管理节点接收所述副本增加请求后，选择源节点和目标节点，向所述源节点发送增加副本命令；4）所述源节点接收所述增加副本命令后，向所述目标节点传送目标文件，在完成所述目标文件的传送后，向所述主管理节点发送副本复制完成通知；5）所述主管理节点接收所述副本复制完成通知，通知所述重载节点；迁移副本步骤包括：1’）所述重载节点确定所述迁移文件的副本数，所述迁移文件为所述重载节点文件排序步骤中进行副本调度的数据文件；2’）所述重载节点向所述主管理节点发送副本迁移请求；3’）所述主管理节点接收所述副本迁移请求后，选择源节点和目标节点，向所述源节点发送增加副本命令；4’）所述源节点接收所述增加副本命令后，向所述目标节点传送目标文件，在完成所述目标文件的传送后，向所述主管理节点发送副本复制完成通知；5’）所述主管理节点接收所述副本复制完成通知，通知所述重载节点；6’）所述重载节点接收步骤5’中所述主管理节点的通知，删除所述迁移文件；其中，所述负载权值为所述存储节点集群的性能指标的权值，所述目标文件为所述重载节点文件排序步骤中进行副本调度的数据文件的副本，所述源节点为所存储的数据文件包括所述目标文件的存储节点，所述目标节点为所存储的数据文件不包括所述目标文件的存储节点，所述源节点和目标节点为所述负载权值最大的存储节点。...

【技术特征摘要】

【专利技术属性】
技术研发人员：尹建伟，蒋浩，邓水光，李莹，吴健，吴朝晖，
申请(专利权)人：浙江大学，
类型：发明
国别省市：