集群元数据的存储、读取方法和装置制造方法及图纸

技术编号:28035075 阅读:17 留言:0更新日期:2021-04-09 23:17
本发明专利技术提供了集群元数据的存储、读取方法和装置,包括:获取集群元数据,集群元数据包括多个字段;将多个字段进行分割得到N组字段;将N组字段以分布的方式存储到M个节点上;从M个节点中选取任一节点,作为当前节点;通过当前节点接收客户端发送的读取请求信息,并将读取请求信息发送给除当前节点以外的其他节点;根据读取请求信息获取当前节点对应的字段和其他节点对应的字段;将当前节点对应的字段和其他节点对应的字段进行拼接,得到包括N组字段的集群元数据;将集群元数据分割后以分布的方式存储到每个节点上,可以节省空间;当客户端需要读取数据时,即使其中一个节点处于非工作状态,也不会影响客户端读取集群元数据,提高用户体验。

【技术实现步骤摘要】
集群元数据的存储、读取方法和装置
本专利技术涉及计算机存储
,尤其是涉及集群元数据的存储、读取方法和装置。
技术介绍
目前,将集群元数据存储到一个节点上,其中,节点为集群中的一台服务器。由于将整个集群元数据都存储到一个节点上,会占用该节点较多空间。另外,当该节点处于故障、关节或离线状态时,由于整个集群元数据只存储在这个节点上,其他节点并没有存储。如果客户端需要读取这个节点上的集群元数据时,则无法读取,导致用户体验差。
技术实现思路
有鉴于此,本专利技术的目的在于提供集群元数据的存储、读取方法和装置,通过将集群元数据分割后以分布的方式存储到每个节点上,从而可以节省空间;当客户端需要读取数据时,即使其中一个节点处于非工作状态,也不会影响客户端读取集群元数据,可以提高用户体验。第一方面,本专利技术实施例提供了集群元数据的存储方法,所述方法包括:获取集群元数据,所述集群元数据包括多个字段;将所述多个字段进行分割,得到N组字段,N为正整数;将所述N组字段以分布的方式存储到M个节点上,M为正整数。进一步的,所述将所述多个字段进行分割,得到N组字段,包括:将所述多个字段按照预设字段阈值进行分割,得到所述N组字段。第二方面,本专利技术实施例提供了集群元数据的读取方法,所述方法包括:从M个节点中选取任一节点,并作为当前节点;通过所述当前节点接收客户端发送的读取请求信息,并将所述读取请求信息发送给除所述当前节点以外的其他节点;>根据所述读取请求信息获取所述当前节点对应的字段和所述其他节点对应的字段;将所述当前节点对应的字段和所述其他节点对应的字段进行拼接,得到包括N组字段的集群元数据,并将所述集群元数据发送给所述客户端。进一步的,所述从M个节点中选取任一节点,并作为当前节点,包括:从所述M个节点上选取任一节点;判断选取的节点的状态;如果所述选取的节点处于工作状态,则将所述选取的节点作为所述当前节点;如果所述选取的节点处于非工作状态,则重新选取节点。进一步的,所述非工作状态为故障状态、关机状态或离线状态。第三方面,本专利技术实施例提供了集群元数据的存储装置,所述装置包括:集群元数据获取单元,用于获取集群元数据,所述集群元数据包括多个字段;分割单元,用于将所述多个字段进行分割,得到N组字段,N为正整数;存储单元,用于将所述N组字段以分布的方式存储到M个节点上,M为正整数。进一步的,所述分割单元具体用于:将所述多个字段按照预设字段阈值进行分割,得到所述N组字段。第四方面,本专利技术实施例提供了集群元数据的读取装置,所述装置包括:选取单元,用于从M个节点中选取任一节点,并作为当前节点;接收单元,用于通过所述当前节点接收客户端发送的读取请求信息,并将所述读取请求信息发送给除所述当前节点以外的其他节点;字段获取单元,用于根据所述读取请求信息获取所述当前节点对应的字段和所述其他节点对应的字段;拼接单元,用于将所述当前节点对应的字段和所述其他节点对应的字段进行拼接,得到包括N组字段的集群元数据,并将所述集群元数据发送给所述客户端。第五方面,本专利技术实施例提供了电子设备,包括存储器、处理器,所述存储器上存储有可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如上所述的方法。第六方面,本专利技术实施例提供了具有处理器可执行的非易失的程序代码的计算机可读介质,所述程序代码使所述处理器执行如上所述的方法。本专利技术实施例提供了集群元数据的存储、读取方法和装置,包括:获取集群元数据,集群元数据包括多个字段;将多个字段进行分割,得到N组字段;将N组字段以分布的方式存储到M个节点上;从M个节点中选取任一节点,并作为当前节点;通过当前节点接收客户端发送的读取请求信息,并将读取请求信息发送给除当前节点以外的其他节点;根据读取请求信息获取当前节点对应的字段和其他节点对应的字段;将当前节点对应的字段和其他节点对应的字段进行拼接,得到包括N组字段的集群元数据,并将集群元数据发送给客户端;通过将集群元数据分割后以分布的方式存储到每个节点上,从而可以节省空间;当客户端需要读取数据时,即使其中一个节点处于非工作状态,也不会影响客户端读取集群元数据,可以提高用户体验。本专利技术的其他特征和优点将在随后的说明书中阐述,并且,部分地从说明书中变得显而易见,或者通过实施本专利技术而了解。本专利技术的目的和其他优点在说明书、权利要求书以及附图中所特别指出的结构来实现和获得。为使本专利技术的上述目的、特征和优点能更明显易懂,下文特举较佳实施例,并配合所附附图,作详细说明如下。附图说明为了更清楚地说明本专利技术具体实施方式或现有技术中的技术方案,下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本专利技术的一些实施方式,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。图1为本专利技术实施例一提供的集群元数据的存储方法流程图;图2为本专利技术实施例一提供的集群元数据分割示意图;图3为本专利技术实施例二提供的集群元数据的读取方法流程图;图4为本专利技术实施例三提供的集群元数据的存储装置示意图;图5为本专利技术实施例四提供的集群元数据的读取装置示意图。图标:1-集群元数据获取单元;2-分割单元;3-存储单元;4-选取单元;5-接收单元;6-字段获取单元;7-拼接单元。具体实施方式为使本专利技术实施例的目的、技术方案和优点更加清楚,下面将结合附图对本专利技术的技术方案进行清楚、完整地描述,显然,所描述的实施例是本专利技术一部分实施例,而不是全部的实施例。基于本专利技术中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本专利技术保护的范围。目前,对于集群元数据的存储,是将集群元数据存储到一个节点上,其中,节点为集群中的一台服务器。由于将整个集群元数据都存储到一个节点上,会占用该节点较多空间。另外,当该节点处于故障、关节或离线状态时,由于整个集群元数据只存储在这个节点上,其他节点并没有存储。如果客户端需要读取这个节点上的集群元数据时,则无法读取,导致用户体验差。为便于对本实施例进行理解,下面对本专利技术实施例进行详细介绍。实施例一:图1为本专利技术实施例一提供的集群元数据的存储方法流程图。参照图1,该方法包括以下步骤:步骤S101,获取集群元数据,集群元数据包括多个字段;步骤S102,将多个字段进行分割,得到N组字段,N为正整数;步骤S103,将N组字段以分布的方式存储到M个节点上,M为正整数。本实施例中,集群元数据为完整的数据,集群元数据包括多个字段,这些字段可以为字符串;将多个字段进行分割后,得到N组字段,然后将N组字段以分布式本文档来自技高网...

【技术保护点】
1.一种集群元数据的存储方法,其特征在于,所述方法包括:/n获取集群元数据,所述集群元数据包括多个字段;/n将所述多个字段进行分割,得到N组字段,N为正整数;/n将所述N组字段以分布的方式存储到M个节点上,M为正整数。/n

【技术特征摘要】
1.一种集群元数据的存储方法,其特征在于,所述方法包括:
获取集群元数据,所述集群元数据包括多个字段;
将所述多个字段进行分割,得到N组字段,N为正整数;
将所述N组字段以分布的方式存储到M个节点上,M为正整数。


2.根据权利要求1所述的集群元数据的存储方法,其特征在于,所述将所述多个字段进行分割,得到N组字段,包括:
将所述多个字段按照预设字段阈值进行分割,得到所述N组字段。


3.一种集群元数据的读取方法,其特征在于,所述方法包括:
从M个节点中选取任一节点,并作为当前节点;
通过所述当前节点接收客户端发送的读取请求信息,并将所述读取请求信息发送给除所述当前节点以外的其他节点;
根据所述读取请求信息获取所述当前节点对应的字段和所述其他节点对应的字段;
将所述当前节点对应的字段和所述其他节点对应的字段进行拼接,得到包括N组字段的集群元数据,并将所述集群元数据发送给所述客户端。


4.根据权利要求3所述的集群元数据的读取方法,其特征在于,所述从M个节点中选取任一节点,并作为当前节点,包括:
从所述M个节点上选取任一节点;
判断选取的节点的状态;
如果所述选取的节点处于工作状态,则将所述选取的节点作为所述当前节点;
如果所述选取的节点处于非工作状态,则重新选取节点。


5.根据权利要求4所述的集群元数据的读取方法,其特征在于,所述非工作状态为故障状态、关机状态或离线状态。<...

【专利技术属性】
技术研发人员:黄文华
申请(专利权)人:创新科技术有限公司
类型:发明
国别省市:北京;11

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1