一种分布式的算力调度管理系统和方法技术方案

技术编号:41595312 阅读:27 留言:0更新日期:2024-06-07 00:05
本申请涉及分布式计算领域,公开了一种分布式的算力调度管理系统和方法,包括:多个智能节点,配置有处理器和存储资源;中央调度器,与所述智能节点通信,并根据预定策略分配计算任务;资源管理模块,监控所述智能节点的资源使用情况,并提供负载均衡;弹性伸缩模块,根据计算任务的实时需求调整所述智能节点的资源配置;其中,所述中央调度器根据数据流量、网络延迟和智能节点的地理位置动态调度计算任务。本发明专利技术通过智能调度和资源管理,系统能够确保所有节点均衡地参与任务处理,从而提高整体资源的使用效率。提供了一个高效、可扩展且成本效益高的解决方案,以应对当今复杂计算需求的挑战。

【技术实现步骤摘要】

本专利技术涉及分布式计算,具体为一种分布式的算力调度管理系统和方法


技术介绍

1、随着信息技术的迅猛发展和大数据时代的到来,视频流作为信息传递的重要媒介,其生成和消费的速度都在持续加快。当前,从城市监控、交通管理到在线教育、远程医疗,再到社交媒体和娱乐,视频流的应用已经遍布社会的各个角落。然而,现有技术在处理这些大量、多源、异构的视频数据流时,面临着诸多挑战。

2、首先,现有的视频流处理平台往往依赖于集中式的数据中心,这种架构在处理跨地域的数据流时面临着高延迟和带宽瓶颈的问题。尽管近年来云计算的普及有助于提供一定程度的扩展性,但在高峰时段,资源的竞争依然导致了服务质量的不稳定。

3、其次,现有系统在资源管理方面缺乏足够的灵活性。静态的资源分配策略难以应对视频流处理的动态变化,导致在计算需求激增时无法及时提供必要的计算资源,而在低负载时则造成资源的浪费。

4、再者,现有技术在故障恢复方面常常不够鲁棒。单点故障导致整个服务不可用,这在处理关键基础设施监控等高可靠性需求的场景中尤为突出。

5、此外,现有系统的可扩本文档来自技高网...

【技术保护点】

1.一种分布式的算力调度管理系统,其特征在于,包括:

2.根据权利要求1所述的一种分布式的算力调度管理系统,其特征在于,所述中央调度器包括任务优先级队列,用于根据任务的紧急性和重要性对待分配的计算任务进行排序。

3.根据权利要求2所述的一种分布式的算力调度管理系统,其特征在于,所述任务优先级队列是基于用户输入、历史数据分析和预测算法动态更新的。

4.根据权利要求1所述的一种分布式的算力调度管理系统,其特征在于,所述资源管理模块包括动态负载均衡器,所述负载均衡器根据智能节点的实时负载和任务要求,动态调整任务分配。

5.根据权利要求1所述的一种...

【技术特征摘要】

1.一种分布式的算力调度管理系统,其特征在于,包括:

2.根据权利要求1所述的一种分布式的算力调度管理系统,其特征在于,所述中央调度器包括任务优先级队列,用于根据任务的紧急性和重要性对待分配的计算任务进行排序。

3.根据权利要求2所述的一种分布式的算力调度管理系统,其特征在于,所述任务优先级队列是基于用户输入、历史数据分析和预测算法动态更新的。

4.根据权利要求1所述的一种分布式的算力调度管理系统,其特征在于,所述资源管理模块包括动态负载均衡器,所述负载均衡器根据智能节点的实时负载和任务要求,动态调整任务分配。

5.根据权利要求1所述的一种分布式的算力调度管理系统,其特征在于,所述弹性伸缩模块配置有自动伸缩策略,其基于预设的系统负载阈值自动增加或减少资源配置。

6.根据权利要求1所述的...

【专利技术属性】
技术研发人员:萧奕波
申请(专利权)人:深圳市观颐数据技术有限责任公司
类型:发明
国别省市:

相关技术
    暂无相关专利
网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1