【技术实现步骤摘要】
一种文件系统任务调度方法、装置、设备及可读存储介质
本专利技术涉及分布式文件系统
,特别涉及一种文件系统任务调度方法、文件系统任务调度装置、文件系统任务调度设备及计算机可读存储介质。
技术介绍
分布式文件系统中,在支持用户应用发起的文件读写这些前台业务的同时,往往还需要同时执行大量的后台任务,例如常见的文件分级迁移功能,系统后台根据用户设置的迁移规则,自动将文件的物理存放位置,从某些硬盘迁移到另一些硬盘;或者如文件删除功能,系统后台扫描待删除文件列表,将文件数据真正从磁盘上删除。由于前台任务与后台任务共用系统处理能力,因此往往会引发资源抢占冲突。为避免后台任务影响前台业务性能,影响用户使用感受,现有任务调度方法控制后台任务本身占用的资源,例如设置后台任务的并发数量、线程数量等。通过限制后台任务所使用的资源,为前台任务提供足够的资源。但是现有任务调度方法无法灵活分配计算资源,在前台任务很少的时候也限制后台任务的执行,给文件系统的运行带来很大不便。因此,如何解决现有任务调度方法无法灵活分配计算资源,给文件系统的运行 ...
【技术保护点】
1.一种文件系统任务调度方法,其特征在于,包括:/n判断总队列中待处理任务的数量是否小于第一阈值;/n若所述待处理任务的数量小于所述第一阈值,则判断前台任务队列中前台任务的数量是否小于第二阈值;/n若所述前台任务的数量小于所述第二阈值,则分别从各个任务队列中获取与所述任务队列对应的第一数量个任务,并将所述任务放入所述总队列的队尾;其中,所述任务队列包括所述前台任务队列和多个后台任务队列;/n若所述前台任务的数量不小于所述第二阈值,则分别从各个所述任务队列中获取与所述任务队列对应的第二数量个任务,并将所述任务放入所述总队列的队尾。/n
【技术特征摘要】
1.一种文件系统任务调度方法,其特征在于,包括:
判断总队列中待处理任务的数量是否小于第一阈值;
若所述待处理任务的数量小于所述第一阈值,则判断前台任务队列中前台任务的数量是否小于第二阈值;
若所述前台任务的数量小于所述第二阈值,则分别从各个任务队列中获取与所述任务队列对应的第一数量个任务,并将所述任务放入所述总队列的队尾;其中,所述任务队列包括所述前台任务队列和多个后台任务队列;
若所述前台任务的数量不小于所述第二阈值,则分别从各个所述任务队列中获取与所述任务队列对应的第二数量个任务,并将所述任务放入所述总队列的队尾。
2.根据权利要求1所述的文件系统任务调度方法,其特征在于,在所述判断总队列中待处理任务的数量是否小于第一阈值之前,还包括:
从所述总队列的前端开始依次执行所述总队列中的所述待处理任务;
获取用户应用发送的前台任务,并将所述前台任务放入所述前台任务队列的队尾;
将文件系统产生的后台任务按照任务类型放入对应的所述后台任务队列的队尾。
3.根据权利要求1所述的文件系统任务调度方法,其特征在于,所述第一数量的计算过程,包括:
利用所述第一阈值和所述总队列的长度计算空闲长度;
获取各个所述任务队列的优先级系数组成的优先级比例,利用所述优先级比例和所述空闲长度计算各个所述任务队列对应的所述第一数量。
4.根据权利要求3所述的文件系统任务调度方法,其特征在于,所述第二数量的计算过程,包括:
获取各个所述任务队列对应的积压缩放系数;
利用所述优先级系数和对应的所述积压缩放系数相乘,得到积压系数;
利用各个所述任务队列的积压系数组成积压比例,利用所述积压比例和所述空闲长度计算各个所述任务队列对应的所述第二数量。
5.根据权利要求4所述的文件系统任务调度方法,其特征在于,所述将所述任务放入所述总队列的队尾,包括:
将所述任务按照对应的优先级系数由大到小排列后放入所述总队列的队尾。
6....
【专利技术属性】
技术研发人员:肖国栋,张立强,
申请(专利权)人:浪潮电子信息产业股份有限公司,
类型:发明
国别省市:山东;37
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。