一种集群文件系统客户端多核并发负载实现方法技术方案

技术编号:41372809 阅读:19 留言:0更新日期:2024-05-20 10:17
本发明专利技术涉及负载调节技术领域,尤其涉及一种集群文件系统客户端多核并发负载实现方法。所述方法包括以下步骤:获取集群文件客户端任务数据;对集群文件客户端任务数据进行任务拆分,生成子任务排序数据;对集群文件客户端进行可用资源分析,生成客户端可用资源数据;根据客户端可用资源数据对子任务排序数据进行虚拟化超细粒度任务划分,生成超细粒度虚拟任务列表数据;对超细粒度虚拟任务列表数据进行类型判断规则引擎构建,生成任务类型判断规则引擎。本发明专利技术通过对集群文件客户端任务数据进行任务拆分、智能调度、异步通信、性能分析,提高了系统的并发处理能力和整体性能。

【技术实现步骤摘要】

本专利技术涉及负载调节,尤其涉及一种集群文件系统客户端多核并发负载实现方法


技术介绍

1、在集群文件系统发展的早期阶段,系统多数为单核心,客户端与服务器之间的通信和数据传输依赖于单一核心的处理能力。这导致了性能瓶颈,尤其是在面对大规模数据操作时。随着云计算和大数据的发展,分布式文件系统成为了集群文件系统的重要发展方向。客户端不再只与单一服务器通信,而是能够同时访问多个节点的数据。这要求客户端具备更强的多核并发负载能力,以处理来自多个节点的数据读写请求。软件定义存储(software-defined storage,sds)技术的兴起为集群文件系统带来了新的可能性。通过将存储功能虚拟化和解耦,集群文件系统客户端可以更灵活地适应不同的硬件环境,并更好地利用多核心的并发能力。然而目前的现有技术对于任务的调度通常只考虑任务的执行顺序,缺乏对任务执行的智能调度和优化,同时客户端之间的通信通常是同步阻塞的,一个客户端发送请求后必须等待响应,影响了并发处理能力,导致系统的并发处理能力和整体性能较低。


技术实现思路

1、基本文档来自技高网...

【技术保护点】

1.一种集群文件客户端多核并发负载实现方法,其特征在于,包括以下步骤:

2.根据权利要求1所述的集群文件客户端多核并发负载实现方法,其特征在于,步骤S1包括以下步骤:

3.根据权利要求1所述的集群文件客户端多核并发负载实现方法,其特征在于,步骤S2包括以下步骤:

4.根据权利要求3所述的集群文件客户端多核并发负载实现方法,其特征在于,步骤S23中的任务紧急权重分析公式如下所示:

5.根据权利要求3所述的集群文件客户端多核并发负载实现方法,其特征在于,步骤S24包括以下步骤:

6.根据权利要求1所述的集群文件客户端多核并发负载实现...

【技术特征摘要】

1.一种集群文件客户端多核并发负载实现方法,其特征在于,包括以下步骤:

2.根据权利要求1所述的集群文件客户端多核并发负载实现方法,其特征在于,步骤s1包括以下步骤:

3.根据权利要求1所述的集群文件客户端多核并发负载实现方法,其特征在于,步骤s2包括以下步骤:

4.根据权利要求3所述的集群文件客户端多核并发负载实现方法,其特征在于,步骤s23中的任务紧急权重分析公式如下所示:

5.根据权利要求3所述的集群文件客户端多核并发负载实现方法,其特征在于,步骤s24包括以下步骤:

6.根据...

【专利技术属性】
技术研发人员:李章记胡海高洁
申请(专利权)人:东莞云付网络科技有限公司
类型:发明
国别省市:

相关技术
    暂无相关专利
网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1