热磁存储数据自动备份方法及装置制造方法及图纸

本发明专利技术涉及一种热磁存储数据自动备份方法及装置，所述方法包括设置关联策略表关联预设的归档策略与热磁存储空间，以运行周期检测关联的热磁存储空间最后备份的执行时间；判断时间段是否达到备份执行周期，根据归档策略判断是否进行归档，在确定进行归档时，根据关联策略表对热磁存储空间中的数据进行筛选得到筛选数据；结合过度阈值将筛选数据添加至归档任务中，最后进行备份归档。本发明专利技术通过创建归档策略实现自动筛选需要归档S3空间的对象并周期性执行归档策略极大方便了用户的使用。策略中通过过渡阈值这一参数既区分了归档类型，阈值为0时，为全部备份；阈值大于0时，为冷数据备份，过渡阈值的定义简化了代码和用户使用。过渡阈值的定义简化了代码和用户使用。过渡阈值的定义简化了代码和用户使用。

【技术实现步骤摘要】
热磁存储数据自动备份方法及装置


[0001]本专利技术属于数据通讯
，具体涉及一种热磁存储数据自动备份方法及装置。

技术介绍

[0002]在归档项目中，用户将S3空间对象归档到普通蓝光时，可以从S3中选择部分对象，也可以选择整个完整的一个空间去创建归档任务，再通过执行归档任务，才会将对象归档到普通蓝光中。
[0003]相关技术中，当用户选择要将一个S3空间中的所有对象归档到蓝光空间中时，目前是采用手动备份的方式，每当S3空间在使用中新增了对象，都需要手动建立一次备份任务，而手动选择过滤新增的对象是一个麻烦的过程。其次如果需要对S3空间中的对象进行一部分简单的筛选，比如如何筛选冷数据，如何通过前缀筛选，如何增量备份，如何避免重复备份等问题。综上所述，目前存在无法自动对需要备份的S3中的对象进行过滤，比如按照前缀、修改时间筛选对象，也无法自动进行增量备份的问题。

技术实现思路

[0004]有鉴于此，本专利技术的目的在于克服现有技术的不足，提供一种热磁存储数据自动备份方法及装置，以解决现有技术中无法自动对需要备份的S3中的对象进行过滤以及无法自动进行增量备份的问题。
[0005]为实现以上目的，本专利技术采用如下技术方案：一种热磁存储数据自动备份方法，包括：
[0006]设置关联策略表关联预设的归档策略与热磁存储空间，并以预设运行周期检测所述关联的热磁存储空间最后备份的执行时间；所述关联策略表包括最后一次的关联执行时间；
[0007]获取所述最后备份的执行时间至当前时间的时间段，判断所述时间段是否达到备份执行周期，并在达到备份执行周期时，根据所述归档策略判断是否进行归档，在确定进行归档时，根据关联策略表对热磁存储空间中的数据进行筛选得到筛选数据；
[0008]判断所述归档策略中的过渡阈值是否大于零，当所述过渡阈值为零，且所述筛选数据的最后修改时间大于所述关联执行时间时，将所述筛选数据添加至归档任务中，否则过滤；如果所述过渡阈值大于零，且所述筛选数据的最后修改时间与所述过渡阈值的差大于所述当前归档策略的执行时间，且所述筛选数据的最后修改时间大于所述关联执行时间与所述过渡阈值的差时，将所述筛选数据添加至归档任务中，否则过滤；其中，所述过渡阈值为所述热磁存储空间中的数据未更新的时间段；
[0009]根据所述归档策略将添加至归档任务中的数据进行备份归档。
[0010]进一步的，在关联预设的归档策略与热磁存储空间之前，还包括：
[0011]预设归档策略并存储至数据库中，所述归档策略用于判断归档过程中是否需要对
对象进行压缩、合并和/或传输限速，归档至对应的蓝光存储空间以及策略状态；所述策略状态根据预设运行周期启用或禁用。
[0012]进一步的，所述根据所述归档策略判断是否进行归档，包括：
[0013]判断所述策略状态是否为开启状态，当所述策略状态为开启状态时进行归档。
[0014]进一步的，所述根据所述归档策略将添加至归档任务中的数据进行备份归档，包括：
[0015]根据所述归档策略中的是否需要对对象进行压缩、合并和/或传输限速条件对所述添加至归档任务中的数据进行判断，并根据判断结果在相应处理后进行备份归档。
[0016]进一步的，所述设置关联策略表关联预设的归档策略与热磁存储空间，包括：
[0017]配置至少一个所述热磁存储空间对象在筛选时的前缀；
[0018]在筛选时，筛选符合前缀配置的数据。
[0019]进一步的，所述前缀为任意字符串。
[0020]进一步的，所述过渡阈值的单位为天。
[0021]本申请实施例提供一种热磁存储数据自动备份装置，包括：
[0022]关联模块，用于设置关联策略表关联预设的归档策略与热磁存储空间，并以预设运行周期检测所述关联的热磁存储空间最后备份的执行时间；所述关联策略表包括关联执行时间；
[0023]筛选模块，用于获取所述最后备份的执行时间至当前时间的时间段，判断所述时间段是否达到备份执行周期，并在达到备份执行周期时，根据所述归档策略判断是否进行归档，在确定进行归档时，根据关联策略表对热磁存储空间中的数据进行筛选得到筛选数据；
[0024]判断模块，用于判断所述归档策略中的过渡阈值是否大于零，当所述过渡阈值为零，且所述筛选数据的最后修改时间大于所述关联执行时间时，将所述筛选数据添加至归档任务中，否则过滤；如果所述过渡阈值大于零，且所述筛选数据的最后修改时间与所述过渡阈值的差大于所述当前归档策略的执行时间，且所述筛选数据的最后修改时间大于所述关联执行时间与所述过渡阈值的差时，将所述筛选数据添加至归档任务中，否则过滤；其中，所述过渡阈值为所述热磁存储空间中的数据未更新的时间段；
[0025]备份模块，用于根据所述归档策略将添加至归档任务中的数据进行备份归档。
[0026]本申请实施例提供一种计算机设备，其特征在于，包括：存储器和处理器，所述存储器存储有计算机程序，所述计算机程序被所述处理器执行时，使得所述处理器执行上述任一实施例提供的热磁存储数据自动备份。
[0027]进一步的，本申请实施例提供一种计算机存储介质，存储有计算机程序，所述计算机程序被处理器执行时，使得所述处理器执行上述任一实施例提供的热磁存储数据自动备份方法。
[0028]本专利技术采用以上技术方案，能够达到的有益效果包括：
[0029]本专利技术提供一种热磁存储数据自动备份方法及装置，本专利技术通过创建归档策略实现自动筛选需要归档S3空间的对象并周期性执行归档策略极大方便了用户的使用。策略中通过过渡阈值这一参数既区分了归档类型，阈值为0时，为全部备份；阈值大于0时，为冷数据备份，过渡阈值的定义简化了代码和用户使用。
附图说明
[0030]为了更清楚地说明本专利技术实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本专利技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
[0031]图1为本专利技术热磁存储数据自动备份方法的步骤示意图；
[0032]图2为本专利技术热磁存储数据自动备份方法的示意图；
[0033]图3为本专利技术热磁存储数据自动备份装置的结构示意图。
具体实施方式
[0034]为使本专利技术的目的、技术方案和优点更加清楚，下面将对本专利技术的技术方案进行详细的描述。显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动的前提下所得到的所有其它实施方式，都属于本专利技术所保护的范围。
[0035]本申请中的热磁存储采用的是S3存储，S3理论上是一个全球存储区域网络(SAN)，它表现为一个超大的硬盘，可以在其中存储和检索数字资产。S3存储和检索的资产被称为对象。对象存储在存储段(bucket)中，可以用硬盘进行类比：本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种热磁存储数据自动备份方法，其特征在于，包括：设置关联策略表关联预设的归档策略与热磁存储空间，并以预设运行周期检测所述关联的热磁存储空间最后备份的执行时间；所述关联策略表包括最后一次的关联执行时间；获取所述最后备份的执行时间至当前时间的时间段，判断所述时间段是否达到备份执行周期，并在达到备份执行周期时，根据所述归档策略判断是否进行归档，在确定进行归档时，根据关联策略表对热磁存储空间中的数据进行筛选得到筛选数据；判断所述归档策略中的过渡阈值是否大于零，当所述过渡阈值为零，且所述筛选数据的最后修改时间大于所述关联执行时间时，将所述筛选数据添加至归档任务中，否则过滤；如果所述过渡阈值大于零，且所述筛选数据的最后修改时间与所述过渡阈值的差大于所述当前归档策略的执行时间，且所述筛选数据的最后修改时间大于所述关联执行时间与所述过渡阈值的差时，将所述筛选数据添加至归档任务中，否则过滤；其中，所述过渡阈值为所述热磁存储空间中的数据未更新的时间段；根据所述归档策略将添加至归档任务中的数据进行备份归档。2.根据权利要求1所述的方法，其特征在于，在关联预设的归档策略与热磁存储空间之前，还包括：预设归档策略并存储至数据库中，所述归档策略用于判断归档过程中是否需要对对象进行压缩、合并和/或传输限速，归档至对应的蓝光存储空间以及策略状态；所述策略状态根据预设运行周期启用或禁用。3.根据权利要求2所述的方法，其特征在于，所述根据所述归档策略判断是否进行归档，包括：判断所述策略状态是否为开启状态，当所述策略状态为开启状态时进行归档。4.根据权利要求2所述的方法，其特征在于，所述根据所述归档策略将添加至归档任务中的数据进行备份归档，包括：根据所述归档策略中的是否需要对对象进行压缩、合并和/或传输限速条件对所述添加至归档任务中的数据进行判断，并根据判断结果在相应处理后进行备份归档。5.根据权利要求1所述...

【专利技术属性】
技术研发人员：王道元，姚宁，王斌，索广宇，赵智龙，
申请(专利权)人：同方有云北京科技有限公司，
类型：发明
国别省市：