一种数据冗余的处理方法技术

技术编号:43759932 阅读:22 留言:0更新日期:2024-12-24 16:03
本申请涉及电数字数据处理技术领域,特别是涉及一种数据冗余的处理方法。该方法包括:如果对目标I/O请求拟写入的数据进行多副本冗余,则遍历最近的第一时间段内目标地址被访问的次数H,获取最近的第一时间段内第i个目标地址被访问的平均次数PH<subgt;i</subgt;;遍历最近的第一时间段内目标磁盘被访问的次数D,获取最近的第一时间段内第i个目标磁盘被访问的平均次数PD<subgt;i</subgt;;如果目标I/O请求拟写入的数据的副本数量调整判断值F小于预设的副本数量调整判断值区间的下限值,则判断n是否大于第一预设副本数量,若是,则将n‑1确定为目标I/O请求拟写入的数据对应的目标副本数量。本发明专利技术能够兼顾数据的存储访问性能和存储成本。

【技术实现步骤摘要】

本专利技术涉及电数字数据处理,特别是涉及一种数据冗余的处理方法


技术介绍

1、采用数据冗余方案可以提高数据的可靠性,现有技术中通常使用的数据冗余方案包括多副本和校验和,其中,多副本指的是将一份数据重复存储在多个存储部件中,进而避免出现单一存储部件故障而导致数据丢失的情况;常见的副本冗余数量有两副本冗余、三副本冗余和四副本冗余等,更多的副本意味着可以容忍更大的故障数量和更好的存储访问性能,但是副本数量的增加会增加存储和维护的成本。在对数据进行多副本冗余时,如何兼顾数据的存储访问性能和存储成本,是亟待解决的问题。


技术实现思路

1、本专利技术目的在于,提供一种数据冗余的处理方法,以兼顾数据的存储访问性能和存储成本。

2、根据本专利技术,提供了一种数据冗余的处理方法,包括以下步骤:

3、s100,如果对目标i/o请求拟写入的数据进行多副本冗余,则进入s200。

4、s200,获取最近的第一时间段内目标地址被访问的次数h,h=(h1,h2,…,hi,…,hn),hi为最近的第一时本文档来自技高网...

【技术保护点】

1.一种数据冗余的处理方法,其特征在于,包括以下步骤:

2.根据权利要求1所述的数据冗余的处理方法,其特征在于,F满足如下条件:F=∑ni=1((PHi/PDi-a/1000)×1000+(PDi/TDi-b/100)×100)/n,其中,a为预设的热度扩容阈值,b为预设的磁盘压力阈值,TDi为第i个目标磁盘在单个子时间段内被访问的次数上限值。

3.根据权利要求1所述的数据冗余的处理方法,其特征在于,S700还包括:如果F属于预设的副本数量调整判断值区间,则将n确定为目标I/O请求拟写入的数据对应的目标副本数量。

4.根据权利要求1所述的数据冗余的处理...

【技术特征摘要】

1.一种数据冗余的处理方法,其特征在于,包括以下步骤:

2.根据权利要求1所述的数据冗余的处理方法,其特征在于,f满足如下条件:f=∑ni=1((phi/pdi-a/1000)×1000+(pdi/tdi-b/100)×100)/n,其中,a为预设的热度扩容阈值,b为预设的磁盘压力阈值,tdi为第i个目标磁盘在单个子时间段内被访问的次数上限值。

3.根据权利要求1所述的数据冗余的处理方法,其特征在于,s700还包括:如果f属于预设的副本数量调整判断值区间,则将n确定为目标i/o请求拟写入的数据对应的目标副本数量。

4.根据权利要求1所述的数据冗余的处理方法,其特征在于,s100还包括:如果对目标i/o请求拟写入的数据进行校验和冗余,则进入s800:

5.根据权利要求4所...

【专利技术属性】
技术研发人员:吴炎李建辉陈栋魏兴华李春王显伟杨禹航万应捷张文件罗春
申请(专利权)人:杭州沃趣科技股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1