一种融合访问频率与生命周期权重的海量数据多层分级存储方法技术

技术编号:46561465 阅读:0 留言:0更新日期:2025-10-10 21:14
本发明专利技术涉及数据存储技术领域,具体涉及一种融合访问频率与生命周期权重的海量数据多层分级存储方法,包括以下步骤:并行计算数据对象的价值生命周期权重与目标存储介质的物理生命周期健康度,通过耦合函数输出复合权重因子;基于所述复合权重因子与数据实时访问频率,结合跨层迁移的迁移I/O损耗估值,计算净效益评分值;当净效益评分值突破预设迁移阈值时,执行数据迁移并在目标存储层按物理生命周期健康度动态分配物理存储位置。本发明专利技术,通过业务关键性因子动态调整迁移门槛,保障核心数据迁移响应性,同时避免临时性或边缘数据误触发高成本迁移行为。

【技术实现步骤摘要】

本专利技术涉及数据存储,尤其涉及一种融合访问频率与生命周期权重的海量数据多层分级存储方法


技术介绍

1、随着云计算、边缘计算和大数据平台的广泛部署,海量数据存储需求呈现出多样化与动态化的趋势,现代数据中心通常采用分层存储架构,将不同性能等级的介质(如nvmessd、sasssd、hdd、磁带等)按访问时延与成本进行划分,以实现存储资源的性价比最优配置。

2、现有多层分级存储方法大多依赖于静态规则或访问频率阈值进行数据热冷分类,传统方案往往将访问频率作为唯一指标,无法反映数据在其完整生命周期内的价值波动,导致冷却误判或热点数据迁移延迟;现有系统多数仅基于性能指标判断目标存储层可用性,忽视了介质本身的健康状态变化,如ssd擦写次数耗尽或hdd出现坏道等退化特征;数据跨层迁移往往仅依据访问强度触发,未能系统性地评估迁移带来的资源损耗与潜在收益,容易造成资源浪费或迁移过度;迁移后的数据通常随机落位或按容量均衡,缺乏基于物理介质状态的精细化分配机制,降低了整体存储系统的健康利用率。


技术实现思路</p>

1、本专本文档来自技高网...

【技术保护点】

1.一种融合访问频率与生命周期权重的海量数据多层分级存储方法,其特征在于,包括以下步骤:

2.根据权利要求1所述的一种融合访问频率与生命周期权重的海量数据多层分级存储方法,其特征在于,所述S1中价值生命周期权重的计算包括实时捕获数据对象的业务事件流,根据事件类型匹配预设价值阶段跃迁规则,输出动态权重值Wv;

3.根据权利要求2所述的一种融合访问频率与生命周期权重的海量数据多层分级存储方法,其特征在于,所述价值阶段跃迁规则包括:

4.根据权利要求3所述的一种融合访问频率与生命周期权重的海量数据多层分级存储方法,其特征在于,所述S1还包括动态耦合函数执行,...

【技术特征摘要】

1.一种融合访问频率与生命周期权重的海量数据多层分级存储方法,其特征在于,包括以下步骤:

2.根据权利要求1所述的一种融合访问频率与生命周期权重的海量数据多层分级存储方法,其特征在于,所述s1中价值生命周期权重的计算包括实时捕获数据对象的业务事件流,根据事件类型匹配预设价值阶段跃迁规则,输出动态权重值wv;

3.根据权利要求2所述的一种融合访问频率与生命周期权重的海量数据多层分级存储方法,其特征在于,所述价值阶段跃迁规则包括:

4.根据权利要求3所述的一种融合访问频率与生命周期权重的海量数据多层分级存储方法,其特征在于,所述s1还包括动态耦合函数执行,包括将wv与wp输入分段式耦合函数,计算复合权重因子wc:

5.根据权利要求1所述的一种融合访问频率与生命周期权重的海量数据多层分级存储方法,其特征在于...

【专利技术属性】
技术研发人员:方磊曾梦
申请(专利权)人:武汉星火众达信息技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1