本申请公开了一种故障节点的数据恢复方法、装置、电子设备及介质。通过应用本申请的技术方案，可以在检测到存储系统中的某个存储节点发生故障后，先对其按照整体数据恢复流程进行处理。并在后续处理过程中发现该故障节点恢复正常后，再为其计算出该故障节点在故障事件期间所损失的数据，以使后续针对性的按照该损失数据的恢复流程进行增量重构流程处理。从而一方面避免了当存储系统发生短时故障或故障期间存储节点无新增或少量写入数据时，依然需要对其进行整体数据恢复流程所导致的资源开销较大的弊端。另一方面，通过优先启动故障节点的整体数据恢复流程再对其进行是否满足转换条件的判断，也不会缩短对故障节点进行数据恢复的处理时长。恢复的处理时长。恢复的处理时长。
【技术实现步骤摘要】
故障节点的数据恢复方法、装置、电子设备及介质
[0001]本申请中涉及数据处理技术，尤其是一种故障节点的数据恢复方法、装置、电子设备及介质。
技术介绍
[0002]在分布式或集中式存储系统中，业务数据会按照其冗余策略分散在不同的目标存储节点上。进一步的，当存储系统检测到某一个存储节点发生故障并解决完毕后，数据需要按照其冗余策略进行自动恢复。因此才能实现在存储节点故障时，仍然能够自动的保证系统中所有业务数据的完整性。
[0003]其中，对于故障节点的数据恢复过程而言，通常需要先将故障节点中的原有数据全部清除后再从其它存储节点上迁移过来新数据。而该过程会给存储系统造成大量的资源开销，从而可能影响系统的IO性能。
[0004]因此，如何减少存储系统为故障节点的数据恢复过程所造成的资源开销，成为了本领域技术人员需要解决的问题。
技术实现思路
[0005]本申请实施例提供一种故障节点的数据恢复方法、装置、电子设备及介质。从而解决相关技术中出现的，如何减少存储系统为故障节点的数据恢复过程所造成的资源开销的问题。
[0006]其中，根据本申请实施例的一个方面，提供的一种故障节点的数据恢复方法，应用于包含目标存储节点的存储系统，所述存储系统为分布式存储系统或集中式存储系统，方法包括：
[0007]在检测到所述目标存储节点的故障事件消失后，启动用于对所述目标存储节点进行整体数据恢复的完整重构流程；
[0008]基于所述目标存储节点的故障恢复参数，计算得到所述目标存储节点在所述故障事件期间对应的损失数据；
[0009]停止所述完整重构流程，并启动用于对所述目标存储节点进行所述损失数据恢复的增量重构流程。
[0010]可选地，在基于本申请上述方法的另一个实施例中，所述基于所述目标存储节点的故障恢复参数，计算得到所述目标存储节点在所述故障事件期间对应的损失数据，包括：
[0011]获取在发生所述故障事件时，为所述目标存储节点标记的起始时间点；以及，获取在所述故障事件终止时，为所述目标存储节点标记的终止时间点；
[0012]基于所述起始时间点与所述终止时间点，确定所述损失数据。
[0013]可选地，在基于本申请上述方法的另一个实施例中，所述基于所述起始时间点与所述终止时间点，确定所述损失数据，包括：
[0014]从所述存储系统的集群状态管理模块POOLMAP中，调取所述目标存储节点在所述
起始时间点对应的起始业务版本号，和，调取所述目标存储节点在所述终止时间点对应的终止业务版本号；
[0015]获取所述POOLMAP记录的，所述起始业务版本号包含的第一业务数据集合，和，所述终止业务版本号包含的第二业务数据集合；
[0016]将所述第一业务数据集合与所述第二业务数据集合之间的差异数据，作为所述目标存储节点的损失数据。
[0017]可选地，在基于本申请上述方法的另一个实施例中，所述启动用于对所述目标存储节点进行所述损失数据恢复的增量重构流程，包括：
[0018]从所述存储系统中确定存储有所述损失数据的至少一个其他存储节点，所述其他存储节点为与所述目标存储节点在同一业务类别下的存储节点；
[0019]将所述其他存储节点中存储的所述损失数据备份到所述目标存储节点中。
[0020]可选地，在基于本申请上述方法的另一个实施例中，所述将所述其他存储节点中存储的所述损失数据备份到所述目标存储节点中，包括：
[0021]确定所述损失数据在所述其他存储节点中所属的容器对象，所述容器对象为所述损失数据的上一级存储节点；
[0022]基于所述目标存储节点中是否存在有所述容器对象，将所述其他存储节点中存储的所述损失数据备份到所述目标存储节点中。
[0023]可选地，在基于本申请上述方法的另一个实施例中，所述基于所述目标存储节点中是否存在有所述容器对象，将所述其他存储节点中存储的所述损失数据备份到所述目标存储节点中，包括：
[0024]若所述目标存储节点存在有所述容器对象，将所述损失数据备份到所述目标存储节点下的容器对象处；或，
[0025]若所述目标存储节点未存在有所述容器对象，为所述目标存储节点创建全新容器对象；
[0026]将所述其他存储节点中，容器对象下的全部数据备份到所述全新容器对象处。
[0027]可选地，在基于本申请上述方法的另一个实施例中，在所述启动用于对所述目标存储节点进行整体数据恢复的完整重构流程之后，还包括：
[0028]确定所述目标存储节点是否满足所述预设转换条件；
[0029]若满足，基于所述目标存储节点的故障恢复参数，计算得到所述目标存储节点在所述故障事件期间对应的损失数据。
[0030]可选地，在基于本申请上述方法的另一个实施例中，所述确定所述目标存储节点是否满足所述预设转换条件，包括：
[0031]检测到所述故障事件的持续时间小于第一时长时，确定所述目标存储节点满足所述预设转换条件；或，
[0032]检测到在所述故障事件期间，所述存储系统为替代存储节点分配的业务量小于第一数值时，确定所述目标存储节点满足所述预设转换条件；
[0033]其中，所述替代存储节点为在所述存储系统中，替代所述目标存储节点进行业务处理的节点。
[0034]可选地，在基于本申请上述方法的另一个实施例中，在所述检测到所述故障事件
消失之前，还包括：
[0035]检测到所述目标存储节点存在故障事件时，对所述目标存储节点添加降级处理标识，所述降级处理标识用于指示所述目标存储节点暂时不进行业务处理；
[0036]检测到所述故障事件持续存在超过第二时长时，确定所述目标存储节点已故障，并启动对所述目标存储节点的所述完整重构流程。
[0037]可选地，在基于本申请上述方法的另一个实施例中，在所述启动对所述目标存储节点的所述完整重构流程之前，还包括：
[0038]从与所述目标存储节点所在同一业务类别下的其他存储节点中，选取至少一个替代存储节点；
[0039]利用所述替代存储节点，替代所述目标存储节点进行业务处理。
[0040]其中，根据本申请实施例的又一个方面，提供的一种故障节点的数据恢复装置，应用于包含目标存储节点的存储系统，所述存储系统为分布式存储系统或集中式存储系统，装置包括：
[0041]检测模块，被配置为在检测到所述目标存储节点的故障事件消失后，启动用于对所述目标存储节点进行整体数据恢复的完整重构流程；
[0042]计算模块，被配置为基于所述目标存储节点的故障恢复参数，计算得到所述目标存储节点在所述故障事件期间对应的损失数据；
[0043]启动模块，被配置为停止所述完整重构流程，并启动用于对所述目标存储节点进行所述损失数据恢复的增量重构流程。
[0044]根据本申请实施例的又一个方面，提供的一种电子设备，包括：
[0045]存储器，用于存储可执本文档来自技高网...
【技术保护点】
【技术特征摘要】
1.一种故障节点的数据恢复方法，其特征在于，应用于包含目标存储节点的存储系统，所述存储系统为分布式存储系统或集中式存储系统，包括：在检测到所述目标存储节点的故障事件消失后，启动用于对所述目标存储节点进行整体数据恢复的完整重构流程；基于所述目标存储节点的故障恢复参数，计算得到所述目标存储节点在所述故障事件期间对应的损失数据；停止所述完整重构流程，并启动用于对所述目标存储节点进行所述损失数据恢复的增量重构流程。2.如权利要求1所述的方法，其特征在于，所述基于所述目标存储节点的故障恢复参数，计算得到所述目标存储节点在所述故障事件期间对应的损失数据，包括：获取在发生所述故障事件时，为所述目标存储节点标记的起始时间点；以及，获取在所述故障事件终止时，为所述目标存储节点标记的终止时间点；基于所述起始时间点与所述终止时间点，确定所述损失数据。3.如权利要求2所述的方法，其特征在于，所述基于所述起始时间点与所述终止时间点，确定所述损失数据，包括：从所述存储系统的集群状态管理模块POOLMAP中，调取所述目标存储节点在所述起始时间点对应的起始业务版本号，和，调取所述目标存储节点在所述终止时间点对应的终止业务版本号；获取所述POOLMAP记录的，所述起始业务版本号包含的第一业务数据集合，和，所述终止业务版本号包含的第二业务数据集合；将所述第一业务数据集合与所述第二业务数据集合之间的差异数据，作为所述目标存储节点的损失数据。4.如权利要求1所述的方法，其特征在于，所述启动用于对所述目标存储节点进行所述损失数据恢复的增量重构流程，包括：从所述存储系统中确定存储有所述损失数据的至少一个其他存储节点，所述其他存储节点为与所述目标存储节点在同一业务类别下的存储节点；将所述其他存储节点中存储的所述损失数据备份到所述目标存储节点中。5.如权利要求4所述的方法，其特征在于，所述将所述其他存储节点中存储的所述损失数据备份到所述目标存储节点中，包括：确定所述损失数据在所述其他存储节点中所属的容器对象，所述容器对象为所述损失数据的上一级存储节点；基于所述目标存储节点中是否存在有所述容器对象，将所述其他存储节点中存储的所述损失数据备份到所述目标存储节点中。6.如权利要求5所述的方法，其特征在于，所述基于所述目标存储节点中是否存在有所述容器对象，将所述其他存储节点中存储的所述损失数据备份到所述目标存储节点中，包括：若所述目标存储节点存在有所述容器对象，将所述损失数据备份到所述目标存储节点下的容器对象处；或，若所述目标存储节点未存在有所述容器对象，为所述目标存储节点创建全新容器对
【专利技术属性】
技术研发人员：浦磊，李权，
申请(专利权)人：新华三云计算技术有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。