一种数据存储方法、装置及系统制造方法及图纸

本申请提供一种数据存储方法、装置及系统，用于解决现有的数据存储方法存在的无法持续进行数据存储，进而造成数据丢失的技术问题，所述方法包括：根据待存储数据流的存储信息，确定待存储数据流在SMR磁盘上的至少一个存储Zone；将待存储数据流按序写入至少一个存储Zone，并根据SMR磁盘定时发送的存储空间信息，确定至少一个存储Zone的剩余存储空间是否能够存储待存储数据流的剩余数据；若不能够，则将SMR磁盘的预留存储空间的大小调整到能够触发紧急覆盖策略；将待存储数据流的剩余数据按序写入至少一个存储Zone的剩余存储空间以及紧急覆盖策略触发后释放的SMR磁盘的存储空间。间。间。

【技术实现步骤摘要】
一种数据存储方法、装置及系统


[0001]本申请涉及数据存储
，尤其涉及一种数据存储方法、装置及系统。

技术介绍

[0002]随着社会的发展，人们在日常生活中需要存储的数据越来越多，为了确保数据不会因为手机、电脑等设备的更换而丢失，人们通常在进行数据存储时，会在云端进行备份。云端的多种磁盘中，叠瓦式磁记录(Shingled Magnetic Recording，SMR)磁盘作为一种采用新型磁存储技术的高容量磁盘，具有磁道密度高、单位面积存储密度高等特性，十分适合用于大规模的数据存储。SMR磁盘被划分为多个区域(Zone)，Zone之间可以随机写，但Zone内部必须顺序写，使得SMR磁盘存在正常情况下由于上层业务无法控制写入Zone的数据的大小造成的存储空间的浪费，以及异常情况(磁盘损坏、网络频繁波动等)下由于写入Zone的数据频繁中断造成的存储空间的浪费，进而导致SMR磁盘的实际可使用的存储空间减少。
[0003]目前，在用户感知到SMR磁盘的实际可使用的存储空间减少到无法继续存储数据时，一般会通过触发生命周期策略和紧急覆盖策略调整SMR磁盘的存储空间，使得可以继续进行数据存储，其中，生命周期策略为删除存储时间达到生命周期的数据，紧急覆盖策略为已使用的存储空间与总存储空间之间的比例不小于阈值时，删除存储时间最长的数据，使得已使用的存储空间与总存储空间之间的比例小于阈值。但是因为对于用户而言SMR磁盘实际可使用的存储空间不包括浪费的存储空间，用户感知不到SMR磁盘的存储空间的浪费造成的SMR磁盘实际可使用的存储空间的减少，可能无法触发生命周期策略和紧急覆盖策略，导致无法继续进行数据存储，进而造成数据丢失。
[0004]由此可见，现有的数据存储方法存在无法持续进行数据存储，进而造成数据丢失的问题。

技术实现思路

[0005]本申请实施例提供一种数据存储方法、装置及系统，用于解决现有的数据存储方法存在的无法持续进行数据存储，进而造成数据丢失的技术问题。
[0006]第一方面，为解决上述技术问题，本申请实施例提供一种数据存储方法，包括：
[0007]根据待存储数据流的存储信息，确定所述待存储数据流在叠瓦式磁记录SMR磁盘上的至少一个存储区域Zone，其中，所述存储Zone为未存储数据的Zone或已存储数据的Zone，所述已存储数据的存储信息与所述待存储数据流的存储信息相同；
[0008]将所述待存储数据流按序写入所述至少一个存储Zone，并根据所述SMR磁盘定时发送的存储空间信息，确定所述至少一个存储Zone的剩余存储空间是否能够存储所述待存储数据流的剩余数据；
[0009]若不能够，则将所述SMR磁盘的预留存储空间的大小调整到能够触发紧急覆盖策略；
[0010]将所述待存储数据流的剩余数据按序写入所述至少一个存储Zone的剩余存储空
间以及所述紧急覆盖策略触发后释放的所述SMR磁盘的存储空间。
[0011]在本申请实施例中，可以根据待存储数据流的存储信息，确定待存储数据流在SMR磁盘上的至少一个存储Zone，其中，存储Zone为未存储数据的Zone或已存储数据的Zone，已存储数据的存储信息与待存储数据流的存储信息相同，将待存储数据流按序写入至少一个存储Zone，并根据SMR磁盘定时发送的存储空间信息，确定至少一个存储Zone的剩余存储空间是否能够存储待存储数据流的剩余数据，若不能够，则将SMR磁盘的预留存储空间的大小调整到能够触发紧急覆盖策略，将待存储数据流的剩余数据按序写入至少一个存储Zone的剩余存储空间以及紧急覆盖策略触发后释放的SMR磁盘的存储空间。在数据写入正常时，将存储信息相同的数据写入同一个Zone，提高SMR磁盘的存储空间利用率，进而减少SMR磁盘的存储空间的浪费，并在根据SMR磁盘定时发送的存储空间信息确定数据写入异常时，将SMR磁盘的预留存储空间的大小调整到能够触发紧急覆盖策略，释放一定的SMR磁盘的存储空间保障数据写入正常，进而可持续进行数据存储，避免数据丢失。
[0012]一种可选实施方式中，所述待存储数据流的存储信息包括所述待存储数据流的生命周期、冗余模式或数据类型中的任一种或多种。
[0013]一种可选实施方式中，根据所述SMR磁盘定时发送的存储空间信息，确定所述至少一个存储Zone的剩余存储空间是否能够存储所述待存储数据流，包括：
[0014]接收所述SMR磁盘定时发送的存储空间信息，其中，所述存储空间信息用于指示所述至少一个存储Zone的已用存储空间；
[0015]根据所述存储空间信息，确定第一比值是否不小于第一预设阈值，以及第二比值是否不小于第二预设阈值，其中，所述第一比值是所述待存储数据流的已用存储空间与所述至少一个存储Zone的总存储空间之间的比值，所述第二比值是第一差值与所述至少一个存储Zone的总存储空间之间的比值，所述第一差值为所述至少一个存储Zone的已用存储空间与所述待存储数据流的已用存储空间之间的差值；
[0016]若所述第一比值不小于所述第一预设阈值且所述第二比值不小于所述第二预设阈值，则确定所述至少一个存储Zone的剩余存储空间不能够存储所述待存储数据流。
[0017]在本申请实施例中，可以接收SMR磁盘定时发送的存储空间信息，其中，存储空间信息用于指示至少一个存储Zone的已用存储空间，根据存储空间信息，确定第一比值是否不小于第一预设阈值，以及第二比值是否不小于第二预设阈值，其中，第一比值是待存储数据流的已用存储空间与至少一个存储Zone的总存储空间之间的比值，第二比值是第一差值与至少一个存储Zone的总存储空间之间的比值，第一差值为至少一个存储Zone的已用存储空间与待存储数据流的已用存储空间之间的差值，若第一比值不小于第一预设阈值且第二比值不小于第二预设阈值，则确定至少一个存储Zone的剩余存储空间不能够存储待存储数据流。通过SMR磁盘定时发送的存储空间信息确定待存储数据流的已用存储空间与至少一个存储Zone的总存储空间之间的第一比值是否不小于第一预设阈值，以及至少一个存储Zone的浪费存储空间与至少一个存储Zone的总存储空间之间的第二比值是否不小于第二预设阈值，在第一比值不小于第一预设阈值且第二比值不小于第二预设阈值时确定数据写入将发生异常，避免用户感知不到由于SMR磁盘的存储空间的浪费造成的SMR磁盘实际可使用的存储空间的减少，进而可持续进行数据存储，避免数据丢失。
[0018]一种可选实施方式中，将所述待存储数据流的剩余数据按序写入所述至少一个存
储Zone的剩余存储空间以及所述紧急覆盖策略触发后释放的所述SMR磁盘的存储空间之后，还包括：
[0019]恢复所述预留存储空间的大小，并将所述恢复后的预留存储空间存储的数据迁移到非预留存储空间。
[0020]第二方面，本申请实施例还提供一种数据存储装置，包括：
[0021]确定模块，用于根据待存储数据流的存储信息，确定所述待存储数据流在叠瓦式磁记录SMR磁盘上的本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种数据存储方法，其特征在于，包括：根据待存储数据流的存储信息，确定所述待存储数据流在叠瓦式磁记录SMR磁盘上的至少一个存储区域Zone，其中，所述存储Zone为未存储数据的Zone或已存储数据的Zone，所述已存储数据的存储信息与所述待存储数据流的存储信息相同；将所述待存储数据流按序写入所述至少一个存储Zone，并根据所述SMR磁盘定时发送的存储空间信息，确定所述至少一个存储Zone的剩余存储空间是否能够存储所述待存储数据流的剩余数据；若不能够，则将所述SMR磁盘的预留存储空间的大小调整到能够触发紧急覆盖策略；将所述待存储数据流的剩余数据按序写入所述至少一个存储Zone的剩余存储空间以及所述紧急覆盖策略触发后释放的所述SMR磁盘的存储空间。2.如权利要求1所述的方法，其特征在于，所述待存储数据流的存储信息包括所述待存储数据流的生命周期、冗余模式或数据类型中的任一种或多种。3.如权利要求1或2所述的方法，其特征在于，根据所述SMR磁盘定时发送的存储空间信息，确定所述至少一个存储Zone的剩余存储空间是否能够存储所述待存储数据流，包括：接收所述SMR磁盘定时发送的存储空间信息，其中，所述存储空间信息用于指示所述至少一个存储Zone的已用存储空间；根据所述存储空间信息，确定第一比值是否不小于第一预设阈值，以及第二比值是否不小于第二预设阈值，其中，所述第一比值是所述待存储数据流的已用存储空间与所述至少一个存储Zone的总存储空间之间的比值，所述第二比值是第一差值与所述至少一个存储Zone的总存储空间之间的比值，所述第一差值为所述至少一个存储Zone的已用存储空间与所述待存储数据流的已用存储空间之间的差值；若所述第一比值不小于所述第一预设阈值且所述第二比值不小于所述第二预设阈值，则确定所述至少一个存储Zone的剩余存储空间不能够存储所述待存储数据流。4.如权利要求3所述的方法，其特征在于，将所述待存储数据流的剩余数据按序写入所述至少一个存储Zone的剩余存储空间以及所述紧急覆盖策略触发后释放的所述SMR磁盘的存储空间之后，还包括：恢复所述预留存储空间的大小，并将所述恢复后的预留存储空间存储的数据迁移到非预留存储空间。5.一种数据存储装置，其特征在于，包括：确定模块，用于根据待存储数据流的存储信息，确定所述待存储数据流在叠瓦式磁记录SMR磁盘上的至...

【专利技术属性】
技术研发人员：姜慧敏，吕庭昌，李文俊，江文龙，周明伟，
申请(专利权)人：浙江大华技术股份有限公司，
类型：发明
国别省市：