资源调配方法、装置、计算机设备和存储介质制造方法及图纸

技术编号:32284689 阅读:3176 留言:0更新日期:2022-02-12 19:52
本申请涉及一种资源调配方法、装置、计算机设备和存储介质,可用于云计算领域或其他领域;方法包括:基于预先加载的任务管理配置信息,对分布式数据库集群的资源参数进行监测;在监测到分布式数据库集群的资源参数满足预设资源调配条件的情况下,根据资源参数确定分布式数据库集群的资源池负载类型;根据资源池负载类型,确定分布式数据库集群的资源消耗队列中的集群用户。本申请通过预先加载任务管理配置对分布式数据库集群的资源参数进行监测,确定出分布式数据库集群资源池的负载类型,然后重新确定队列中的集群用户,实现了根据分布式数据库集群的实时情况将不同的资源调配给适宜的集群用户使用,提高了资源调配效率。提高了资源调配效率。提高了资源调配效率。

【技术实现步骤摘要】
资源调配方法、装置、计算机设备和存储介质


[0001]本申请涉及云计算
,特别是涉及一种资源调配方法、装置、计算机设备和存储介质。

技术介绍

[0002]随着业务的不断发展和IT技术的持续迭代升级,一体机架构的数据库管理系统已无法满足海量数据存储和高并发数据访问的需求。
[0003]相关技术中,通常采用基于分布式架构的数据库支撑数据仓库系统;虽然分布式的架构降低了数据库集群的搭建硬件成本,提升了数据库对海量数据的处理性能,但同时也为数据库集群的负载管理带来了挑战。若未对分布式数据库资源做合理控制,在进行重资源消耗的作业、高并发查询请求时,会出现并发任务抢占资源的现象,导致查询语句响应速度变慢,甚至会引起操作系统超出设计负荷,甚至使得整个数据处理平台服务不可用。因此,现有的资源调配的效率还较低。

技术实现思路

[0004]基于此,有必要针对上述技术问题,提供一种资源调配方法、装置、计算机设备和存储介质。
[0005]一种资源调配方法,其特征在于,包括:
[0006]基于预先加载的任务管理配置信息,对分布式数据库集群的资源参数进行监测;
[0007]在监测到所述分布式数据库集群的资源参数满足预设资源调配条件的情况下,根据所述资源参数确定所述分布式数据库集群的资源池负载类型;
[0008]根据所述资源池负载类型,确定所述分布式数据库集群的资源消耗队列中的集群用户。
[0009]在其中一个实施例中,所述资源参数包括第一数据库语句数量以及第二数据库语句数量;
[0010]所述根据所述资源参数确定对应的分布式数据库集群的资源池负载类型,包括:
[0011]获取所述第一数据库语句数量与所述第二数据库语句数量的比值作为资源池负载值;
[0012]若所述资源池负载值大于或等于预设负载阈值,则确定对应的分布式数据库集群为第一资源池负载类型;若所述资源池负载值小于所述预设负载阈值,则确定对应的分布式数据库集群的资源池负载类型为第二资源池负载类型。
[0013]在其中一个实施例中,在根据所述资源池负载类型,确定所述分布式数据库集群的资源消耗队列中的集群用户之前,还包括:
[0014]获取所述集群用户的资源消耗参数及权重参数;
[0015]根据所述资源消耗参数及所述权重参数确定集群用户的资源消耗值;
[0016]若所述资源消耗值大于或等于预设资源消耗阈值,则将对应的集群用户的资源消
耗类型识别为重资源消耗类型;若所述资源消耗值小于所述预设资源消耗阈值,则将对应的集群用户的资源消耗类型识别为轻资源消耗类型。
[0017]在其中一个实施例中,所述根据所述资源池负载类型,确定所述分布式数据库集群的资源消耗队列中的集群用户,包括:
[0018]将所述重资源消耗类型的集群用户分配至所述第二资源池负载类型的分布式数据库集群,以及将所述轻资源消耗类型的集群用户分配至所述第一资源池负载类型的分布式数据库集群。
[0019]在其中一个实施例中,在对分布式数据库集群的资源参数进行监测之后,还包括:
[0020]获取所述分布式数据库集群的历史资源参数;所述历史资源参数携带有参数来源标识;
[0021]获取与所述参数来源标识匹配的权重信息,根据所述权重信息对所述历史资源参数进行计算处理,得到所述历史资源参数的统计结果;
[0022]将所述统计结果发送到预设终端。
[0023]在其中一个实施例中,在对分布式数据库集群的资源参数进行监测之后,还包括:
[0024]根据所述分布式数据库集群的资源参数生成报警报文信息;
[0025]根据预设的预警配置信息对所述报警报文信息进行筛选,得到目标报警报文信息;
[0026]将所述目标报警报文信息发送至预设终端。
[0027]一种资源调配装置,所述装置包括:
[0028]资源参数监测模块,用于基于预先加载的任务管理配置信息,对分布式数据库集群的资源参数进行监测;
[0029]负载类型确定模块,用于在监测到所述分布式数据库集群的资源参数满足预设资源调配条件的情况下,根据所述资源参数确定所述分布式数据库集群的资源池负载类型;
[0030]集群用户匹配模块,用于根据所述资源池负载类型,确定所述分布式数据库集群的资源消耗队列中的集群用户。
[0031]一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现上述的方法的步骤。
[0032]一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现上述的方法的步骤。
[0033]一种计算机程序产品,包括计算机程序,该计算机程序被处理器执行时实现上述的方法的步骤。
[0034]一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现以下步骤:
[0035]基于预先加载的任务管理配置信息,对分布式数据库集群的资源参数进行监测;
[0036]在监测到所述分布式数据库集群的资源参数满足预设资源调配条件的情况下,根据所述资源参数确定所述分布式数据库集群的资源池负载类型;
[0037]根据所述资源池负载类型,确定所述分布式数据库集群的资源消耗队列中的集群用户。
[0038]一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执
行时实现以下步骤:
[0039]基于预先加载的任务管理配置信息,对分布式数据库集群的资源参数进行监测;
[0040]在监测到所述分布式数据库集群的资源参数满足预设资源调配条件的情况下,根据所述资源参数确定所述分布式数据库集群的资源池负载类型;
[0041]根据所述资源池负载类型,确定所述分布式数据库集群的资源消耗队列中的集群用户。
[0042]上述资源调配方法、装置、计算机设备和存储介质,方法包括:基于预先加载的任务管理配置信息,对分布式数据库集群的资源参数进行监测;在监测到分布式数据库集群的资源参数满足预设资源调配条件的情况下,根据资源参数确定分布式数据库集群的资源池负载类型;根据资源池负载类型,确定分布式数据库集群的资源消耗队列中的集群用户。本申请通过预先加载任务管理配置对分布式数据库集群的资源参数进行监测,确定出分布式数据库集群资源池的负载类型,然后重新确定队列中的集群用户,实现了根据分布式数据库集群的实时情况将不同的资源调配给适宜的集群用户使用,提高了资源调配效率。
附图说明
[0043]图1为一个实施例中资源调配方法的流程示意图;
[0044]图2为一个实施例中资源调配装置的结构框图;
[0045]图3为一个实施例中资源调配系统的结构示意图;
[0046]图4为一个实施例中资源调配系统与多个分布式数据库通信连接的示意图;
[0047]图5为一个实施例中资源调配系统的一种资源调配流程示意图;...

【技术保护点】

【技术特征摘要】
1.一种资源调配方法,其特征在于,包括:基于预先加载的任务管理配置信息,对分布式数据库集群的资源参数进行监测;在监测到所述分布式数据库集群的资源参数满足预设资源调配条件的情况下,根据所述资源参数确定所述分布式数据库集群的资源池负载类型;根据所述资源池负载类型,确定所述分布式数据库集群的资源消耗队列中的集群用户。2.根据权利要求1所述的方法,其特征在于,所述资源参数包括第一数据库语句数量以及第二数据库语句数量;所述根据所述资源参数确定对应的分布式数据库集群的资源池负载类型,包括:获取所述第一数据库语句数量与所述第二数据库语句数量的比值作为资源池负载值;若所述资源池负载值大于或等于预设负载阈值,则确定对应的分布式数据库集群为第一资源池负载类型;若所述资源池负载值小于所述预设负载阈值,则确定对应的分布式数据库集群的资源池负载类型为第二资源池负载类型。3.根据权利要求2所述的方法,其特征在于,在根据所述资源池负载类型,确定所述分布式数据库集群的资源消耗队列中的集群用户之前,还包括:获取所述集群用户的资源消耗参数及权重参数;根据所述资源消耗参数及所述权重参数确定集群用户的资源消耗值;若所述资源消耗值大于或等于预设资源消耗阈值,则将对应的集群用户的资源消耗类型识别为重资源消耗类型;若所述资源消耗值小于所述预设资源消耗阈值,则将对应的集群用户的资源消耗类型识别为轻资源消耗类型。4.根据权利要求3所述的方法,其特征在于,所述根据所述资源池负载类型,确定所述分布式数据库集群的资源消耗队列中的集群用户,包括:将所述重资源消耗类型的集群用户分配至所述第二资源池负载类型的分布式数据库集群,以及将所述轻资源消耗类型的集群用户分配至所述第...

【专利技术属性】
技术研发人员:雷经纬于子烨罗响熊辉
申请(专利权)人:中国工商银行股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1