存储集群的管理方法、装置、存储介质及电子设备制造方法及图纸

本公开提供了一种存储集群的管理方法、装置、计算机程序产品、非暂时性计算机可读存储介质及电子设备。该方法包括：获取存储节点的可用容量；根据存储节点的可用容量，确定存储节点的第一权重，其中，可用容量和第一权重正相关；根据存储节点的第一权重，从多个存储节点中确定用于处理目标存储请求的目标存储节点。本公开的实施例能够提高存储集群的整体的读写速度。读写速度。读写速度。

【技术实现步骤摘要】
存储集群的管理方法、装置、存储介质及电子设备


[0001]本公开总体上涉及计算机
，更具体地涉及一种存储集群的管理方法、装置、计算机程序产品、非暂时性计算机可读存储介质及电子设备。

技术介绍

[0002]本部分旨在介绍本领域的一些方面，其可以与下面描述的和/或要求保护的本公开的各个方面相关。相信本部分有助于提供背景信息以便于更好地理解本公开的各个方面。因此，应该理解的是这些陈述应该从这个角度来理解，而不是作为对现有技术的承认。
[0003]EC存储集群是一种分布式存储系统，它将数据分割为多个数据块并进行编码，然后将编码后的数据块存储在不同的节点上，以实现数据冗余和高可用性。然而，由于数据块数量较多且分布在不同的节点上，最慢节点的性能会影响系统整体的读写速度。
[0004]因此，有必要提出一种新的技术方案，以减轻或者解决上述至少一个技术问题。

技术实现思路

[0005]本公开的目的在于提供一种存储集群的管理方法、装置、计算机程序产品、非暂时性计算机可读存储介质及电子设备，以提高存储集群的整体的读写速度。
[0006]根据本公开的第一方面，提供了一种存储集群的管理方法，所述存储集群包括多个存储节点，所述方法包括：获取所述存储节点的可用容量；根据所述存储节点的可用容量，确定所述存储节点的第一权重，其中，所述可用容量和所述第一权重正相关；根据所述存储节点的第一权重，从所述多个存储节点中确定用于处理目标存储请求的目标存储节点。
[0007]根据本公开的第二方面，提供了一种存储集群的管理装置，所述存储集群包括多个存储节点，所述装置包括：获取模块，用于获取所述存储节点的可用容量；权重确定模块，用于根据所述存储节点的可用容量，确定所述存储节点的第一权重，其中，所述可用容量和所述第一权重正相关；选择模块，用于根据所述存储节点的第一权重，所述多个存储节点中确定用于处理目标存储请求的目标存储节点。
[0008]根据本公开的第三方面，提供了一种计算机程序产品，包括程序代码指令，当所述程序产品由计算机执行时，所述程序代码指令使所述计算机执行根据本公开的第一方面所述的方法。
[0009]根据本公开的第四方面，提供了一种存储有计算机指令的非暂时性计算机可读存储介质，其中，所述计算机指令用于使所述计算机执行根据本公开的第一方面所述的方法。
[0010]根据本公开的第五方面，提供了一种电子设备，包括：处理器，与所述处理器进行电子通信的存储器；以及指令，所述指令存储在所述存储器中并且可由所述处理器执行以使所述电子设备执行根据本公开的第一方面所述的方法。
[0011]在本公开的实施例中，根据存储节点的可用容量确定存储节点的权重，并根据存储节点的权重选择处理存储请求的目标存储节点，有利于选择读写性能较好的存储节点处
理存储请求，提高多个存储节点的读写速度的下限，最终提高存储集群整体的读写速度。
[0012]应当理解，本部分所描述的内容并不旨在标识所要求保护的
技术实现思路
的关键或必要特征，也不旨在单独地用于确定所要求保护的
技术实现思路
的范围。
附图说明
[0013]为了更清楚地说明本公开实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本公开的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。在所有附图中，相同的附图标记指代类似但不一定相同的要素。
[0014]图1示出了根据本公开的存储集群的管理方法的一个实施例的系统架构图；
[0015]图2示出了根据本公开的存储集群的管理方法的一个实施例的流程图；
[0016]图3A示出了根据本公开实施例的一个具体例子的系统架构的示意图；
[0017]图3B示出了根据本公开实施例的一个具体例子的流程图；
[0018]图4示出了根据本公开的实施例的存储集群的管理装置的示例性框图；
[0019]图5示出了可以用来实施本公开的实施例的示例电子设备500的示意图。
[0020]具体实现方式
[0021]下文将参考附图更全面地描述本公开。然而，本公开可以以多种替代形式来体现，并且不应被解释为限于本文描述的实施例。因此，尽管本公开易于进行各种修改和替代形式，但是其具体实施例在附图中以示例的方式示出，并将在本文详细描述。然而，应当理解，这种方式并不旨在将本公开限制于所公开的特定形式，相反，本公开覆盖了落入由权利要求所限定的本公开的精神和范围内的所有修改方案、等同方案和替代方案。
[0022]应当理解，尽管本文可以用术语第一、第二等描述各种元素，但是这些元素不应该被这些术语所限制。这些术语仅用于区分一个元素和另一个元素。例如，第一元素可以被称为第二元素，并且类似地，第二元素可以被称为第一元素，而不脱离本公开的教导。
[0023]本文结合框图和/或流程图描述了一些示例，其中每个框表示包括用于实现指定逻辑功能的一个或多个可执行指令的电路元件、模分块或代码的部分。还应该注意的是，在其他实现方式中，框中所述的功能可以不按所述的顺序发生。例如，根据所涉及的功能，连续示出的两个框实际上可以实质上同时执行，或者这些框有时可以以相反的顺序执行。
[0024]本文提到的“根据
……
实施例”或“在..实施例中”意味着结合实施例描述的特定特征、结构或特性可以被包括在本公开的至少一个实现方式中。本文中不同地方出现的短语“根据...实施例”或“在...实施例中”不一定都指同一实施例，也不一定是与其他实施例相互排斥的单独或替代实施例。
[0025]图1示出了可以应用本公开的存储集群的管理方法、装置、终端设备和存储介质的实施例的示例性系统架构100。
[0026]如图1所示，系统架构100可以包括终端设备101、102、103，网络104和服务器105。网络104用以在终端设备101、102、103和服务器105之间提供通信链路的介质。网络104可以包括各种连接类型，例如有线、无线通信链路或者光纤电缆等等。
[0027]用户可以使用终端设备101、102、103通过网络104与服务器105交互，以接收或发
送消息等。终端设备101、102、103上可以安装有各种通讯客户端应用，例如语音交互类应用、视频会议类应用、短视频社交类应用、网页浏览器应用、购物类应用、搜索类应用、即时通信工具、邮箱客户端、社交平台软件等。
[0028]终端设备101、102、103可以是硬件，也可以是软件。当终端设备101、102、103为硬件时，可以是具有麦克风和扬声器的各种电子设备，包括但不限于智能手机、平板电脑、电子书阅读器、MP3播放器(Moving Picture Experts Group Audio Layer III，动态影像专家压缩标准音频层3)、MP4(Moving Picture Experts Group Audio Laye本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种存储集群的管理方法，所述存储集群包括多个存储节点，所述方法包括：获取所述存储节点的可用容量；根据所述存储节点的可用容量，确定所述存储节点的第一权重，其中，所述可用容量和所述第一权重正相关；根据所述存储节点的第一权重，从所述多个存储节点中确定用于处理目标存储请求的目标存储节点。2.根据权利要求1所述的方法，其中，所述根据所述存储节点的第一权重，从所述多个存储节点中确定用于处理目标存储请求的目标存储节点，包括：采用加权轮询算法，从所述多个存储节点中确定目标存储节点。3.根据权利要求1所述的方法，其中，所述方法还包括：维护存储节点队列，包括：将第一权重小于预设的第一权重阈值的存储节点放入不可用节点队列，将请求失败率大于预设的失败率阈值的存储节点放入惩罚节点队列，将所述不可用队列和所述惩罚队列之外的存储节点放入可用节点队列；以及所述根据所述存储节点的第一权重，从所述多个存储节点中确定用于处理目标存储请求的目标存储节点，包括：从所述可用节点队列的存储节点中确定所述目标存储节点。4.根据权利要求3所述的方法，其中，所述维护存储节点队列还包括：对于所述惩罚节点队列中的存储节点，在所述存储节点的存放时长达到预设的第一惩罚时长的情况下，将所述存储节点从所述惩罚节点队列转移至所述可用节点队列，同时将所述存储节点的第一权重赋值为预设的最小第一权重。5.根据权利要求4所述的方法，其中，所述维护存储节点队列还包括：对于从所述惩罚节点队列转移至所述可用节点队列的存储节点，按照预设方式逐步恢复所述存储节点的第一权重。6.根据权利要求1所述的方法，其中，所述获取所述存储节点的可用容量，包括：接收所述存储节点上报的第一可用容量；接收调度服务定时获取的所述存储节点的第二可用容量；将所述第一可用容量和所述第二可用容量中时间最新者确定为所述存储节点的可用容量。7.根据权利要求1所述的方法，其中，所述目标存储节点包括多个磁盘；以及在所述根据所述存储节点的第一权重，所述多个存储节点中确定用于处理目标存储请求的目标存储节点之后，所述方法还包括：所述目标存储节点处理本次请求，包括：获取所述磁盘的磁盘容量；根据所述磁盘的磁盘容量，确定所述磁盘的第二权重，其中，所述磁盘权重和所述第二权重正相关；根据所...

【专利技术属性】
技术研发人员：刘易，
申请(专利权)人：上海哔哩哔哩科技有限公司，
类型：发明
国别省市：