任务资源调度处理方法和系统技术方案

本申请公开了一种任务资源调度处理方法和系统，包括：在任务执行硬件节点上安装至少两个虚拟机，每个虚拟机上设置一个虚拟任务执行器；将任务执行硬件节点上的硬件资源划分为资源池和资源队列，所述资源队列中包括至少两个资源块，每个资源块对应划分给本硬件节点上的一个虚拟任务执行器使用，资源池对应划分给本硬件节点上的至少一个虚拟任务执行器使用；在任务调度器接收到任务请求后，确定该任务所需要的资源量MTN，判断该MTN是否大于所述资源队列中最大资源块的资源量MRN，如果是则调用资源池对应的一虚拟任务执行器处理该任务，否则调用资源队列中的资源块对应的一虚拟任务执行器处理该任务。本发明专利技术可以提高系统的资源利用率，提高任务处理效率。

【技术实现步骤摘要】
【专利摘要】本申请公开了一种任务资源调度处理方法和系统，包括：在任务执行硬件节点上安装至少两个虚拟机，每个虚拟机上设置一个虚拟任务执行器；将任务执行硬件节点上的硬件资源划分为资源池和资源队列，所述资源队列中包括至少两个资源块，每个资源块对应划分给本硬件节点上的一个虚拟任务执行器使用，资源池对应划分给本硬件节点上的至少一个虚拟任务执行器使用；在任务调度器接收到任务请求后，确定该任务所需要的资源量MTN，判断该MTN是否大于所述资源队列中最大资源块的资源量MRN，如果是则调用资源池对应的一虚拟任务执行器处理该任务，否则调用资源队列中的资源块对应的一虚拟任务执行器处理该任务。本专利技术可以提高系统的资源利用率，提高任务处理效率。【专利说明】任务资源调度处理方法和系统
本申请涉及计算机数据处理
，尤其涉及一种任务资源调度处理方法和系 统。
技术介绍
Hadoop是一个能够对大量数据进行分布式处理的计算系统，海量数据业务越来越 多，Hadoop的使用也越来越广泛。随着单个集群的规模的日趋扩大（第一代Hadoop集群 大约能够支持4000台机器），如何提高集本文档来自技高网...

【技术保护点】
一种任务资源调度处理方法，其特征在于，包括：在任务执行硬件节点上安装至少两个虚拟机，每个虚拟机上设置一个虚拟任务执行器；将任务执行硬件节点上的硬件资源划分为资源池和资源队列，所述资源队列中包括至少两个资源块，每个资源块对应划分给本硬件节点上的一个虚拟任务执行器使用，资源池对应划分给本硬件节点上的至少一个虚拟任务执行器使用；在任务调度器接收到任务请求后，确定该任务所需要的资源量MTN，判断该MTN是否大于所述资源队列中最大资源块的资源量MRN，如果是则调用资源池对应的一虚拟任务执行器处理该任务，否则调用资源队列中的资源块对应的一虚拟任务执行器处理该任务。

【技术特征摘要】

【专利技术属性】
技术研发人员：陈伟，
申请(专利权)人：北京京东尚科信息技术有限公司，
类型：发明
国别省市：北京;11