数据存储系统、方法、装置及相关设备制造方法及图纸

技术编号:43018867 阅读:19 留言:0更新日期:2024-10-18 17:22
本申请提供了一种数据存储系统,旨在不依赖终端设备的本地存储模块将数据存储到对象存储服务。其中,所述系统包括:读写集群,用于接收携带第一数据的写请求,将第一数据的第一元数据存储至元数据共享内存服务,并将第一数据存储至对象存储服务;元数据共享内存服务,用于将第一元数据存储至对象存储服务,并在元数据共享内存服务的本地存储第一元数据;读集群,用于接收指定第一数据的读请求,从元数据共享内存服务获取第一元数据,基于第一元数据从对象存储服务获取第一数据;其中,读写集群和读集群共享元数据共享内存服务提供的元数据。本申请还提供了对应的数据存储方法、装置、计算设备集群、计算机可读存储介质以及计算机程序产品。

【技术实现步骤摘要】

本申请涉及数据处理,尤其涉及一种数据存储系统、方法、装置及相关设备


技术介绍

1、随着计算机技术的发展,云存储技术得到了广泛的应用。云存储技术是指终端设备将本地的数据存储到云端的数据仓库的技术。在需要使用数据时,终端设备可以向云端发送数据获取请求,并接收云端发送的数据。这样,数据容量不会受本地存储模块的存储空间的大小的限制。终端设备可以存储数据量大于本地存储模块的存储空间的数据,并实现数据的任意取用。例如,可以将数据存储在云端提供的对象存储服务(object storageservice,obs)中。

2、为了便于从云端获取数据,可以通过元数据对数据进行索引。其中,元数据是用于描述数据的数据。也就是说,根据某个数据的元数据,可以查找到该数据。因此,在云存储技术中,在存储目标数据时,可以生成目标数据的元数据,并将目标数据与目标数据的元数据关联存储到云端。这样,如果要从云端获取目标数据,可以基于目标数据的元数据进行查询。即,上述数据获取请求中可以包括目标数据的元数据。

3、目前,数据的元数据由读写集群中的设备根据数据确定。但是该确定元本文档来自技高网...

【技术保护点】

1.一种数据存储系统,其特征在于,所述系统包括:

2.根据权利要求1所述的系统,其特征在于,所述元数据共享内存服务包括第一内存服务和第二内存服务,所述第一内存服务用于存储所述第一元数据;

3.根据权利要求2所述的系统,其特征在于,所述第二内存服务为持久化内存服务。

4.根据权利要求1-3任一项所述的系统,其特征在于,

5.根据权利要求4所述的系统,其特征在于,所述元数据共享内存服务还存储有第二元数据;

6.根据权利要求1-5任一项所述的系统,其特征在于,

7.根据权利要求1-6任一项所述的系统,其特征在于,所述读写集...

【技术特征摘要】

1.一种数据存储系统,其特征在于,所述系统包括:

2.根据权利要求1所述的系统,其特征在于,所述元数据共享内存服务包括第一内存服务和第二内存服务,所述第一内存服务用于存储所述第一元数据;

3.根据权利要求2所述的系统,其特征在于,所述第二内存服务为持久化内存服务。

4.根据权利要求1-3任一项所述的系统,其特征在于,

5.根据权利要求4所述的系统,其特征在于,所述元数据共享内存服务还存储有第二元数据;

6.根据权利要求1-5任一项所述的系统,其特征在于,

7.根据权利要求1-6任一项所述的系统,其特征在于,所述读写集群包括远程直接数据存取rdma网卡;

8.一种数据存储方法,其特征在于,所述方法应用于数据存储系统中的元数据共享内存服务,所述数据存储系统还包括读写集群和读集群,所述读写集群和所述读集群共享所述元数据共享内存服务提供的元数据,所述方法包括:

9.根据权利要求8所述的方法,其特征在于,所述元数据共享内存服务包括第一内存服务和第二内存服务,所述第一元数据被所述读写集群写入所述第一内存服务,所述方法还包括:

10.根据权利要求9所述的方法,其特征在于,所述第二内存服务为持久化内存服务。

11.根据权利要求8-9任一项所述的方法,其特征在于,在存储所述第一元数据之前,所述方法还包括:

12.根据权利要求11所述的方法,其特征在于,所述元数据共享内存服务还存储有第二元数据;所述方法还包括:

13.根据权利要求8-12任一项所述的方法,其特征在于,所述方法还包括:

14.根据权利要求8-13任一项所述的方法,其特征在于...

【专利技术属性】
技术研发人员:马文龙李志猛张文亮
申请(专利权)人:华为云计算技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1