一种资源调度方法及装置制造方法及图纸

技术编号:40923246 阅读:19 留言:0更新日期:2024-04-18 14:47
本申请公开了一种资源调度方法及装置,至少根据获取到系统中目标应用的运行动态信息,确定系统对应的调度模式;所述目标应用的运行动态信息至少包括所述目标应用的运行信息以及资源占用信息中的一种,所述调度模式表征目标模型对系统中多种类型资源的占用策略;基于所述调度模式调整系统中运行的至少一个目标模型对系统中至少一种类型资源的占用,以使运行所述目标应用所需的对应类型资源能够调整。

【技术实现步骤摘要】

本申请涉及资源调度领域,尤其涉及一种资源调度方法及装置


技术介绍

1、在大模型应用在系统中运行的过程中,其通常会占用系统较多的内存、显存或其他相关的计算资源,当应用该大模型的系统上同时运行了其他应用,则可能出现由于资源分配不合理而导致其他应用运行出现异常或低效的情况。


技术实现思路

1、有鉴于此,本申请提供一种资源调度方法及装置,其具体方案如下:

2、一种资源调度方法,包括:

3、至少根据获取到系统中目标应用的运行动态信息,确定系统对应的调度模式;所述目标应用的运行动态信息至少包括所述目标应用的运行信息以及资源占用信息中的一种,所述调度模式表征目标模型对系统中多种类型资源的占用策略;

4、基于所述调度模式调整系统中运行的至少一个目标模型对系统中至少一种类型资源的占用,以使运行所述目标应用所需的对应类型资源能够调整。

5、进一步的,所述至少根据获取到系统中目标应用的运行动态信息,确定系统对应的调度模式,包括:

6、如果当前处于第一调整策略,响应于获取本文档来自技高网...

【技术保护点】

1.一种资源调度方法,包括:

2.根据权利要求1所述的方法,所述至少根据获取到系统中目标应用的运行动态信息,确定系统对应的调度模式,包括:

3.根据权利要求1所述的方法,所述至少根据获取到系统中目标应用的运行动态信息,确定系统对应的调度模式,包括:

4.根据权利要求1所述的方法,所述至少根据获取到系统中目标应用的运行动态信息,确定系统对应的调度模式,还包括:

5.根据权利要求4所述的方法,所述根据获取到系统中目标应用的运行动态信息以及用户意图,确定系统对应的调度模式,包括:

6.根据权利要求1或5所述的方法,所述基于所述调度模式...

【技术特征摘要】

1.一种资源调度方法,包括:

2.根据权利要求1所述的方法,所述至少根据获取到系统中目标应用的运行动态信息,确定系统对应的调度模式,包括:

3.根据权利要求1所述的方法,所述至少根据获取到系统中目标应用的运行动态信息,确定系统对应的调度模式,包括:

4.根据权利要求1所述的方法,所述至少根据获取到系统中目标应用的运行动态信息,确定系统对应的调度模式,还包括:

5.根据权利要求4所述的方法,所述根据获取到系统中目标应用的运行动态信息以及用户意图,确定系统对应的...

【专利技术属性】
技术研发人员:张旭东曲宗福李聪
申请(专利权)人:联想北京有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1