一种分布式存储系统标签管理数据存储实现方法技术方案

技术编号:19067905 阅读:335 留言:0更新日期:2018-09-29 14:53
本发明专利技术涉及一种分布式存储系统标签管理数据存储实现方法,该方法适用于分布式存储系统内包含X个元数据管理单元和Y个数据存储单元的场景,X为大于等于1的正整数,Y为大于等于2的正整数,该方法在以上场景中元数据管理单元会对每个数据存储单元进行标签管理,当业务主机有数据读写请求时,元数据管理单元同时会对数据读写请求的类型做出判断并适配相应的标签,再根据相应标签将数据读写请求转至相应的数据存储单元处理。

【技术实现步骤摘要】
一种分布式存储系统标签管理数据存储实现方法
本专利技术专利涉及计算机存储领域,特别是分布式存储领域。
技术介绍
分布式存储系统,是将数据分散存储在多台独立的设备上。传统的网络存储系统采用集中的存储服务器存放所有数据,存储服务器成为系统性能的瓶颈,也是可靠性和安全性的焦点,不能满足大规模存储应用的需要。分布式网络存储系统采用可扩展的系统结构,利用多台存储服务器分担存储负荷,利用位置服务器定位存储信息,它不但提高了系统的可靠性、可用性和存取效率,还易于扩展。在大数据环境下,数据规模和复杂度的增加往往非常迅速,对系统的扩展性能要求较高。实现存储系统的高可扩展性首先要解决两个方面的重要问题,包含元数据的分配和数据的透明迁移。元数据的分配主要通过静态子树划分技术实现,后者则侧重数据迁移算法的优化。此外,大数据存储体系规模庞大.结点失效率高,因此还需要完成一定的自适应管理功能。系统必须能够根据数据量和计算的工作量估算所需要的结点个数,并动态地将数据在结点间迁移。以实现负载均衡;同时.结点失效时,数据必须可以通过副本等机制进行恢复,不能对上层应用产生影响。传统数据存储模型需要支持尽可能多的应用,因本文档来自技高网...

【技术保护点】
1.一种分布式存储系统标签管理数据存储实现方法,其特征在于,所述方法包含元数据管理单元(10)、分布式存储系统通信网络(11)、数据存储单元a(12a)、数据存储单元b(12b)、数据存储单元c(12c)、数据存储类型标签a(13a)、数据存储类型标签b(13b)、数据存储类型标签c(13c)、数据读写请求(14)和业务主机(15),该方法元数据管理单元(10)、数据存储单元a(12a)、数据存储单元b(12b)、数据存储单元c(12c)通过分布式存储系统通信网络(11)组建成分布式存储系统,并在数据存储单元a(12a)、数据存储单元b(12b)、数据存储单元c(12c)都会按数据类型进行数据...

【技术特征摘要】
1.一种分布式存储系统标签管理数据存储实现方法,其特征在于,所述方法包含元数据管理单元(10)、分布式存储系统通信网络(11)、数据存储单元a(12a)、数据存储单元b(12b)、数据存储单元c(12c)、数据存储类型标签a(13a)、数据存储类型标签b(13b)、数据存储类型标签c(13c)、数据读写请求(14)和业务主机(15),该方法元数据管理单元(10)、数据存储单元a(12a)、数据存储单元b(12b)、数据存储单元c(12c)通过分布式存储系统通信网络(11)组建成分布式存储系统,并在数据存储单元a(12a)、数据存储单元b(12b)、数据存储单元c(12c)都会按数据类型进行数据存储类型标签a(13a)、数据存储类型标签b(13b)、数据存储类型标签c(13c)类的打标签,以实现通过分布式存储系统通信网络(11)为业务主机(15)提供数据读写请求(14)服务时按标签适配...

【专利技术属性】
技术研发人员:不公告发明人
申请(专利权)人:长沙开雅电子科技有限公司
类型:发明
国别省市:湖南,43

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1