一种任务调度方法及其系统和设备技术方案

技术编号:6994261 阅读:167 留言:0更新日期:2012-04-11 18:40
本发明专利技术公开了一种任务调度方法及其系统和设备,本发明专利技术方法应用于设置有主节点和多个工作节点的数据处理系统,其中,主节点用于任务调度,工作节点用于执行任务,该方法包括如下步骤:工作节点向主节点发送获取任务的请求,其中携带该工作节点的可用资源量以及该工作节点上执行的各任务各自的资源使用量;所述主节点根据各工作节点发送的各自节点上执行的各任务各自的资源使用量,确定该主节点上各类任务的资源需求量,并根据确定出的各类任务的资源需求量以及发送所述请求的工作节点的可用资源量,为所述工作节点进行任务调度。采用本发明专利技术,可以避免工作节点过载,以及提高工作节点的资源利用率,从而提高数据处理系统,尤其是MapReduce系统的运行效率。

【技术实现步骤摘要】

【技术保护点】
一种任务调度方法,应用于设置有主节点和多个工作节点的数据处理系统,其中,主节点用于任务调度,工作节点用于执行任务,其特征在于,包括如下步骤:工作节点向主节点发送获取任务的请求,其中携带该工作节点的可用资源量以及该工作节点上执行的各任务各自的资源使用量;所述主节点根据各工作节点发送的各自节点上执行的各任务各自的资源使用量,确定该主节点上各类任务的资源需求量,并根据确定出的各类任务的资源需求量以及发送所述请求的工作节点的可用资源量,为所述工作节点进行任务调度。

【技术特征摘要】

【专利技术属性】
技术研发人员:郭磊涛孙宏伟
申请(专利权)人:中国移动通信集团公司
类型:发明
国别省市:11

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1