一种自动化分布式云存储调度交互方法及系统技术方案

技术编号:46617300 阅读:0 留言:0更新日期:2025-10-14 21:13
本发明专利技术涉及资源调度技术领域,且公开了一种自动化分布式云存储调度交互方法,包括以下步骤:步骤一:通过容器集群或客户端发送的请求信息,提取存储类型、亲和度、价格优先级等参数;步骤二:在网络层捕获存储I/O协议(如NFS、S3),提取块ID、来源IP、实时IOPS值等行为特征参数,动态监控流量异常;步骤三:基于预设策略计算资源匹配度。该发明专利技术通过容器集群或客户端发送的请求信息,提取存储类型,以及通过调度管理模块将数据块分配至资源池,实时监控节点负载,将存储索引记录至分布式数据库,根据实时IOPS值,动态调整资源配额,监控节点健康状态,从而该方法具备实时动态适应负载变化、自动调整资源分配,效率高等优点。

【技术实现步骤摘要】

本专利技术涉及资源调度,具体为一种自动化分布式云存储调度交互方法及系统


技术介绍

1、随着云计算、大数据及ai技术的快速融合,全球数据量呈现爆炸式增长(如2024年全球数据量达181zb,年增长率超25%),传统集中式存储系统(如传统关系型数据库)因存储容量有限、扩展性差、成本高,无法满足现代应用(如短视频、物联网、在线教育)对大规模、高并发、低延迟数据存储的需求。

2、现有分布式云存储的调度交互方法主要基于静态配置和人工干预,预先为存储任务分配固定的节点资源(如磁盘空间、带宽),无法实时适应负载变化,依赖运维人员手动调整资源分配,效率低、易出错,无法满足大规模集群的管理需求。


技术实现思路

1、(一)解决的技术问题

2、针对现有技术的不足,本专利技术提供了一种自动化分布式云存储调度交互方法及系统,具备实时动态适应负载变化、自动调整资源分配,效率高等优点,解决了上述的问题。

3、(二)技术方案

4、为实现上述的目的,本专利技术提供如下技术方案:一种自动化分布式本文档来自技高网...

【技术保护点】

1.一种自动化分布式云存储调度交互方法,包括以下步骤:

2.根据权利要求1所述的一种自动化分布式云存储调度交互方法,其特征在于:所述步骤三中若需求明确指定资源标识(如特定存储节点),直接匹配;否则选取评分最高资源池。

3.根据权利要求1所述的一种自动化分布式云存储调度交互方法,其特征在于:所述步骤四中采用纠删码或副本机制,确保数据冗余与安全性。

4.根据权利要求1所述的一种自动化分布式云存储调度交互方法,其特征在于:所述步骤五中跨平台资源调度支持多云环境下的存储资源池动态调度,避免跨云兼容性问题。

5.根据权利要求1所述的一种自动化分布式云...

【技术特征摘要】

1.一种自动化分布式云存储调度交互方法,包括以下步骤:

2.根据权利要求1所述的一种自动化分布式云存储调度交互方法,其特征在于:所述步骤三中若需求明确指定资源标识(如特定存储节点),直接匹配;否则选取评分最高资源池。

3.根据权利要求1所述的一种自动化分布式云存储调度交互方法,其特征在于:所述步骤四中采用纠删码或副本机制,确保数据冗余与安全性。

4.根据权利要求1所述的一种自动化分布式云存储调度交互方法,其特征在于:所述步骤五中跨平台资源调度支持多云环境下的存储资源池动态调度,避免跨云兼容性问题。

5.根据权利要求1所述的一种自动化分布式云存储调度交互方法,其特征在于:所述步骤六中还通过消息队列(如kafka)异步同步操作日志,确保跨节点数据一致性,加权负载均衡算法:c:全局负载均衡系数(目标接...

【专利技术属性】
技术研发人员:赵小三金涛牟虹旭
申请(专利权)人:北京星润时代网络科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1