【技术实现步骤摘要】
存储系统的数据迁移方法、装置、设备及可读存储介质
本专利技术涉及存储
,特别是涉及一种存储系统的数据迁移方法、装置、设备及计算机可读存储介质。
技术介绍
在大数据时代,数据的存储以及传输的速率对于存储服务器能否正常快速的运转起着重要的作用。而在多层存储系统中,必定会存在数据的迁移。随着存储的业务不断地扩大,新的文件和数据不断被创建,不常用的冷数据就必须迁移到读写效率较低、时延较大的硬盘驱动器(HDD,HardDiskDrive)中,而常用的热数据由于用户访问频繁,需要迁移至读写速率较快、时延较小的固态硬盘(SSD,SolidStateDisk)中。每个数据单元的生命周期都经历创建、活跃、冷却、删除等过程,这些数据依靠迁移算法在不同性能的磁盘中迁移。现有技术中的数据迁移方式一种是通过工人定义存储系统中各数据单元的冷和热,选取被迁移的数据单元,需要消耗巨大的人力成本。另一种是使用最近最少使用(LRU,LeastRecentlyUsed)算法来计算每个数据单元的冷热,然后对数据单元迁移。但是,大多数的写操作集 ...
【技术保护点】
1.一种存储系统的数据迁移方法,其特征在于,包括:/n当达到预设周期时,统计在当前预设周期内各数据单元的访问状态;其中,各所述数据单元为分别对存储系统中固态硬盘存储的数据及硬盘驱动器存储的数据进行预先划分得到;/n分别获取各所述数据单元连续预设数量个所述预设周期的访问状态;其中,连续预设数量个所述预设周期以所述当前预设周期为末尾周期;/n根据各所述数据单元分别对应的连续预设数量个所述预设周期的访问状态及预设的状态迁移图,分别计算各所述数据单元的数据迁移优先级;其中,所述状态迁移图中预置有各访问状态与各数据迁移优先级之间的对应关系;/n将所述固态硬盘中达到第一优先级阈值的数据 ...
【技术特征摘要】
1.一种存储系统的数据迁移方法,其特征在于,包括:
当达到预设周期时,统计在当前预设周期内各数据单元的访问状态;其中,各所述数据单元为分别对存储系统中固态硬盘存储的数据及硬盘驱动器存储的数据进行预先划分得到;
分别获取各所述数据单元连续预设数量个所述预设周期的访问状态;其中,连续预设数量个所述预设周期以所述当前预设周期为末尾周期;
根据各所述数据单元分别对应的连续预设数量个所述预设周期的访问状态及预设的状态迁移图,分别计算各所述数据单元的数据迁移优先级;其中,所述状态迁移图中预置有各访问状态与各数据迁移优先级之间的对应关系;
将所述固态硬盘中达到第一优先级阈值的数据单元迁移到所述硬盘驱动器,并将所述硬盘驱动器中达到所述第二优先级阈值的数据单元迁移到所述固态硬盘。
2.根据权利要求1所述的存储系统的数据迁移方法,其特征在于,将所述硬盘驱动器中达到所述第二优先级阈值的数据单元迁移到所述固态硬盘,包括:
获取所述固态硬盘中各物理页地址块的擦写次数;其中,各所述物理页地址块为将所述固态硬盘的总物理页地址以存储一个数据单元为单位进行划分得到;
按所述擦写次数对各所述物理页地址块进行排序,得到第一排序结果;
将所述硬盘驱动器中达到所述第二优先级阈值的数据单元,按所述第一排序结果中从小到大的优先级迁移到所述固态硬盘中各所述物理页地址块。
3.根据权利要求1或2所述的存储系统的数据迁移方法,其特征在于,在将所述固态硬盘中达到第一优先级阈值的数据单元迁移到所述硬盘驱动器,并将所述硬盘驱动器中达到所述第二优先级阈值的数据单元迁移到所述固态硬盘之前,还包括:
统计所述固态硬盘中由达到所述第一优先级阈值的各数据单元构成的第一数据量大小,以及所述硬盘驱动器中由达到所述第二优先级阈值的各数据单元构成的第二数据量大小;
将所述第一数据量大小与所述第二数据量大小进行比较,得到比较结果;
将所述固态硬盘中达到第一优先级阈值的数据单元迁移到所述硬盘驱动器,并将所述硬盘驱动器中达到所述第二优先级阈值的数据单元迁移到所述固态硬盘,包括:
当所述比较结果为所述第一数据量大小小于所述第二数据量大小时,将所述固态硬盘中达到第一优先级阈值的数据单元迁移到所述硬盘驱动器,并在所述硬盘驱动器中达到所述第二优先级阈值的数据单元中,选取数据总量小于等于所述第一数据量的部分数据单元迁移到所述固态硬盘;
当所述比较结果为所述第一数据量大小大于所述第二数据量大小时,将所述硬盘驱动器中达到所述第二优先级阈值的数据单元迁移到所述固态硬盘,并在所述固态硬盘中达到第一优先级阈值的数据单元中,选取数据总量小于等于所述第二数据量的部分数据单元迁移到所述硬盘驱动器。
4.根据权利要求3所述的存储系统的数据迁移方法,其特征在于,在所述硬盘驱动器中达到所述第二优先级阈值的数据单元中,选取数据总量小于等于所述第一数据量的部分数据单元迁移到所述固态硬盘,包括:
分别计算所述硬盘驱动器中达到所述第二优先级阈值的各所述数据单元的数据迁移优先级与所述第二优先级阈值的第一差值,并对各所述第一差值进行大小排序,得到第二排序结果;
在所述硬盘驱动器中达到所述第二优先级阈值的数据单元中,从所述第二排序结果中第一差值小的一端选取数据总量小于等于所述第一数据量的部分数据单元迁移到所述固态硬盘;
在所述固态硬盘中达到第一优先级阈值的数据单元中,选取数据总量小于等于所述第二数据量的部分数据单元迁移到所述硬盘驱动器,包括:
分别计算所述固态硬盘中达到第一优先级阈值的各所述数据单元的数据迁移优先级与所述第一优先级阈值的第二差值,并对各所述第二差值进行大小排序,得到第三排序结果;
在所述固态硬盘中达到第一优先级阈值的数据单元中,从所述第三排序结果中第二差值大的一端选取数据总量小于等于所...
【专利技术属性】
技术研发人员:张孙旻,
申请(专利权)人:苏州浪潮智能科技有限公司,
类型:发明
国别省市:江苏;32
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。