数据存储系统、方法和装置制造方法及图纸

技术编号:41723271 阅读:32 留言:0更新日期:2024-06-19 12:47
本公开的实施例公开了数据存储系统、方法和装置。该系统的一具体实施方式包括:客户端向元数据管理服务端发送数据存储请求,数据存储请求包括第一文件目录;元数据管理服务端根据预设的第一对应关系查找第一文件目录对应的第一存储资源标识,将第一存储资源标识发送至客户端;客户端将第一文件目录对应的待存储数据和第一存储资源标识发送至数据处理服务端;数据处理服务端根据预设的第二对应关系,利用第一存储资源标识对应的存储资源存储待存储数据。该实施方式实现了一种支持多种云存储服务的分布式存储方案。

【技术实现步骤摘要】

本公开的实施例涉及计算机,具体涉及数据存储系统、方法和装置


技术介绍

1、分布式存储是一种将数据分散存储在多个节点上的存储方式,通过数据的分散存储和冗余备份等,实现了高可靠性、扩展性、可用性和容错性等。目前,分布式存储系统在如大数据领域等得到了广泛应用,为各种应用场景提供了高效可靠的数据存储解决方案。

2、常见的数据存储系统包括如hdfs(hadoop distributed file system)、juicefs和alluxio等等。数据存储系统常使用的云存储服务包括如amazon s3、google cloudstorage和阿里云oss等等。但这些数据存储系统通常都只能使用一种存储服务,或者没有对利用各种数据服务存储的数据的统一管理等。


技术实现思路

1、本公开的实施例提出了数据存储系统、方法和装置。

2、第一方面,本公开的实施例提供了一种数据存储系统,包括客户端、元数据管理服务端和数据处理服务端;客户端向元数据管理服务端发送数据存储请求,其中,数据存储请求包括第一文件目录;本文档来自技高网...

【技术保护点】

1.一种数据存储系统,包括客户端、元数据管理服务端和数据处理服务端;

2.根据权利要求1所述的系统,其中,所述客户端向所述元数据管理服务端发送数据删除请求,其中,所述数据删除请求包括第二文件目录;

3.根据权利要求2所述的系统,其中,所述待删除数据标识包括数据起始位置信息和待删除数据量信息。

4.根据权利要求1所述的系统,其中,所述客户端向所述元数据管理服务端发送文件创建请求,其中,所述文件创建请求包括第三文件目录和文件名称;

5.根据权利要求1-4之一所述的系统,其中,所述元数据管理服务端为至少两个存储资源分别设置对应的存储资源标识,其中...

【技术特征摘要】

1.一种数据存储系统,包括客户端、元数据管理服务端和数据处理服务端;

2.根据权利要求1所述的系统,其中,所述客户端向所述元数据管理服务端发送数据删除请求,其中,所述数据删除请求包括第二文件目录;

3.根据权利要求2所述的系统,其中,所述待删除数据标识包括数据起始位置信息和待删除数据量信息。

4.根据权利要求1所述的系统,其中,所述客户端向所述元数据管理服务端发送文件创建请求,其中,所述文件创建请求包括第三文件目录和文件名称;

5.根据权利要求1-4之一所述的系统,其中,所述...

【专利技术属性】
技术研发人员:王永利王琪郑静付根希张永锋荆延龙张艳超
申请(专利权)人:京东科技信息技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1