数据的修复方法、装置及服务器集群制造方法及图纸

本发明专利技术公开了一种数据的修复方法、装置及服务器集群，涉及数据处理技术领域，其目的在于实现提高超融合存储系统中的用户数据安全性。本发明专利技术的方法包括：当确定存储数据的节点出现故障时，修复节点生成数据修复任务；其中，数据修复任务包含故障数据的待修复信息；修复节点向故障节点对应的备份节点发送携带有数据修复任务的数据修复通知，以便备份节点根据待修复信息向修复节点发送故障数据对应的备份数据；修复节点获取备份节点发送的备份数据，并根据备份数据对故障节点中的故障数据进行数据修复。本发明专利技术应用于在超融合存储系统下，使用备份数据对故障数据进行数据修复过程中。

【技术实现步骤摘要】
数据的修复方法、装置及服务器集群
本专利技术涉及数据处理
，特别是涉及一种数据的修复方法、装置及服务器集群。
技术介绍
随着互联网技术的日益发展，人们在使用互联网的过程中产生了大量的数据，为了能够对这些数据便捷的存储、处理，基于超融合架构(Hyper-convergedInfrastructure，HCI)构建的超融合存储系统应运而生。在超融合架构下的每一个物理服务器(x86服务器)都不仅仅具备计算、网络、存储和服务器虚拟化等资源和技术，而且还包括云管理软件、数据重构、多副本、快照技术等元素，同时多个物理服务器可以通过网络聚合起来，实现模块化的无缝横向扩展，形成统一的资源池。超融合存储系统具体是指基于超融合架构构建的一种分布式存储系统，在超融合存储系统下，保证用户数据的安全尤为重要。为了防止由于物理服务器发生故障而导致用户数据丢失或者受损，在存储用户数据的同时，需要对该用户数据进行冗余备份。当用户数据丢失时，可以通过对应的备份数据对丢失或者受损的用户数据进行修复，以确保用户的数据安全；因此，如何对故障物理服务器中的丢失或者受损数据进行修复是目前亟需解决的问题。
技术实现思路
有鉴于此，本专利技术提供的一种数据的修复方法、装置及服务器集群，主要目的在于在超融合存储系统中，当物理服务器出现故障导致用户数据丢失或者受损时，通过对应的备份数据对丢失或者受损的用户数据进行修复，以便能够实现提高超融合存储系统中的用户数据安全性。为了达到上述效果，本专利技术主要提供如下技术方案：第一方面，本专利技术提供了一种数据的修复方法，该方法包括：当确定存储数据的节点出现故障时，修复节点生成数据修复任务；其中，所述数据修复任务包含故障数据的待修复信息；所述修复节点向故障节点对应的备份节点发送携带有所述数据修复任务的数据修复通知，以便所述备份节点根据所述待修复信息向所述修复节点发送所述故障数据对应的备份数据；所述修复节点获取所述备份节点发送的所述备份数据，并根据所述备份数据对所述故障节点中的故障数据进行数据修复。可选的，在所述修复节点向故障节点对应的备份节点发送携带有所述数据修复任务的数据修复通知之前，所述方法还包括：所述修复节点调用预设构建函数构建修复工作集；所述修复工作集用于对所述故障数据进行修复，并记录所述故障数据的修复进度。可选的，所述修复节点向故障节点对应的备份节点发送携带有所述数据修复任务的数据修复通知包括：判断所述备份节点是否为多个备份节点；若为一个备份节点，则向所述备份节点发送携带有所述数据修复任务的数据修复通知；若为多个备份节点，则分别获取每个备份节点的带宽占用率；根据所述每个备份节点的带宽占用率确定每个备份节点可修复故障数据的数据量，其中，带宽占用率与可修复故障数据的数据量成反比，不同备份节点修复不同存储地址的故障数据；分别向所述每个备份节点发送携带有可修复故障数据的数据量及对应的存储地址的数据修复通知。可选的，所述修复节点获取所述备份节点发送的所述备份数据包括：若为一个备份节点，则接收所述备份节点根据所述待修复信息发送的备份数据；若为多个备份节点，则分别接收所述每个备份节点根据所述可修复故障数据的数据量及对应的存储地址发送的备份数据。可选的，在根据所述备份数据对所述故障节点中的故障数据进行数据修复之前，所述方法还包括：根据所述修复节点的带宽占用率，判断是否满足对所述故障数据进行整体修复的条件；若满足，则将所述数据修复任务添加至所述修复工作集中；若不满足，则将所述数据修复任务根据所述带宽占用率划分为至少两个数据修复子任务，将所述至少两个数据修复子任务添加至所述修复工作集中。可选的，若对所述故障数据进行整体修复，根据所述备份数据对所述故障节点中的故障数据进行数据修复包括：在所述修复工作集中，将所述故障数据的存储地址与所述备份数据的存储地址进行匹配；匹配成功后，使用所述备份数据替换所述故障数据。可选的，若不对所述故障数据进行整体修复，根据所述备份数据对所述故障节点中的故障数据进行数据修复包括：在所述修复工作集中，确定执行一次数据修复子任务对应的预置数据量大小；根据所述预置数据量大小，确定所述数据修复子任务对应的故障数据的第一存储地址，以及所述故障数据对应的备份数据的第二存储地址；使用第二存储地址对应的数据替换第一存储地址对应的数据。可选的，所述方法还包括：根据数据修复任务或至少两个数据修复子任务的完成进度，对所述修复工作集的修复进度进行更新。可选的，在根据所述备份数据对所述故障节点中的故障数据进行数据修复之后，所述方法还包括：所述修复节点接收修复进度查询指令；从所述修复工作集中获取当前修复进度，并将所述当前修复进度进行输出显示。可选的，在修复节点生成数据修复任务之前，所述方法还包括：基于状态检测程序对所述节点的状态进行检测；若确定所述节点出现故障，则所述修复节点创建并启动数据修复进程，所述数据修复进程用于触发生成所述数据修复任务。可选的，所述故障节点与所述修复节点可以为同一节点。第二方面，本专利技术提供了一种数据的修复装置，该装置包括：生成单元，用于当确定存储数据的节点出现故障时，修复节点生成数据修复任务；其中，所述数据修复任务包含故障数据的待修复信息；发送单元，用于所述修复节点向故障节点对应的备份节点发送携带有所述生成单元生成的所述数据修复任务的数据修复通知，以便所述备份节点根据所述待修复信息向所述修复节点发送所述故障数据对应的备份数据；获取单元，用于所述修复节点获取所述备份节点根据所述发送单元发送的所述数据修复通知发送的所述备份数据；修复单元，用于所述修复节点根据所述获取单元获取的所述备份数据对所述故障节点中的故障数据进行数据修复。可选的，所述装置还包括：构建单元，用于在所述修复节点通过所述发送单元向故障节点对应的备份节点发送携带有所述数据修复任务的数据修复通知之前，所述修复节点调用预设构建函数构建修复工作集；所述修复工作集用于对所述故障数据进行修复，并记录所述故障数据的修复进度。可选的，所述发送单元包括：判断模块，用于判断所述备份节点是否为多个备份节点；第一发送模块，用于当所述判断模块判断所述备份节点为一个备份节点时，向所述备份节点发送携带有所述数据修复任务的数据修复通知；获取模块，用于当所述判断模块判断所述备份节点为多个备份节点时，分别获取每个备份节点的带宽占用率；第一确定模块，用于根据所述获取模块获取的所述每个备份节点的带宽占用率确定每个备份节点可修复故障数据的数据量，其中，带宽占用率与可修复故障数据的数据量成反比，不同备份节点修复不同存储地址的故障数据；第二发送模块，用于分别向所述每个备份节点发送携带有所述第一确定模块确定的可修复故障数据的数据量及对应的存储地址的数据修复通知。可选的，所述获取单元包括：第一接收模块，用于当所述备份节点为一个备份节点时，接收所述备份节点根据所述待修复信息发送的备份数据；第二接收模块，用于当所述备份节点为多个备份节点时，分别接收所述每个备份节点根据所述可修复故障数据的数据量及对应的存储地址发送的备份数据。可选的，所述装置还包括：判断单元，用于在所述修复单元根据所述备份数据对所述故障节点中的故障数据进行数据修复之前，根据所述修复节点的带宽占用率，判断是否满足对所述故障数据进行整本文档来自技高网...

【技术保护点】
一种数据的修复方法，其特征在于，包括：当确定存储数据的节点出现故障时，修复节点生成数据修复任务；其中，所述数据修复任务包含故障数据的待修复信息；所述修复节点向故障节点对应的备份节点发送携带有所述数据修复任务的数据修复通知，以便所述备份节点根据所述待修复信息向所述修复节点发送所述故障数据对应的备份数据；所述修复节点获取所述备份节点发送的所述备份数据，并根据所述备份数据对所述故障节点中的故障数据进行数据修复。

【技术特征摘要】
1.一种数据的修复方法，其特征在于，包括：当确定存储数据的节点出现故障时，修复节点生成数据修复任务；其中，所述数据修复任务包含故障数据的待修复信息；所述修复节点向故障节点对应的备份节点发送携带有所述数据修复任务的数据修复通知，以便所述备份节点根据所述待修复信息向所述修复节点发送所述故障数据对应的备份数据；所述修复节点获取所述备份节点发送的所述备份数据，并根据所述备份数据对所述故障节点中的故障数据进行数据修复。2.根据权利要求1所述的方法，其特征在于，在所述修复节点向故障节点对应的备份节点发送携带有所述数据修复任务的数据修复通知之前，所述方法还包括：所述修复节点调用预设构建函数构建修复工作集；所述修复工作集用于对所述故障数据进行修复，并记录所述故障数据的修复进度。3.根据权利要求2所述的方法，其特征在于，所述修复节点向故障节点对应的备份节点发送携带有所述数据修复任务的数据修复通知包括：判断所述备份节点是否为多个备份节点；若为一个备份节点，则向所述备份节点发送携带有所述数据修复任务的数据修复通知；若为多个备份节点，则分别获取每个备份节点的带宽占用率；根据所述每个备份节点的带宽占用率确定每个备份节点可修复故障数据的数据量，其中，带宽占用率与可修复故障数据的数据量成反比，不同备份节点修复不同存储地址的故障数据；分别向所述每个备份节点发送携带有可修复故障数据的数据量及对应的存储地址的数据修复通知。4.根据权利要求3所述的方法，其特征在于，所述修复节点获取所述备份节点发送的所述备份数据包括：若为一个备份节点，则接收所述备份节点根据所述待修复信息发送的备份数据；若为多个备份节点，则分别接收所述每个备份节点根据所述可修复故障数据的数据量及对应的存储地址发送的备份数据。5.根据权利要求4所述的方法，其特征在于，在根据所述备份数据对所述故障节点中的故障数据进行数据修复之前，所述方法还包括：根据所述修复节点的带宽占用率，判断是否满足对所述故障数据进行整体修复的条件；若满足，则将所述数据修复任务添加至所述修复工作集中；若不满足，则将所述数据修复任务根据所述带宽占用率划分为至少两个数据修复子任务，将所述至少两个数据修复子任务添加至所述修复工作集中。6.根据权利要求5所述的方法，其特征在于，若对所述故障数据进行整体修复，根据所述备份数据对所述故障节点中的故障数据进行数据修复包括：在所述修复工作集中，将所述故障数据的存储地址与所述备份数据的存储地址进行匹配；匹配成功后，使用所述备份数据替换所述故障数据。7.根据权利要求5...

【专利技术属性】
技术研发人员：彭江，
申请(专利权)人：北京联想超融合科技有限公司，
类型：发明
国别省市：北京,11