双集群间服务器动态分配方法及系统技术方案

技术编号:18449327 阅读:23 留言:0更新日期:2018-07-14 12:09
本发明专利技术涉及双集群间服务器动态分配方法及系统,其实现过程为在用户预先配置的基础上对服务器资源进行分配,形成主集群和副集群;在业务服务和任务服务运行的过程中,通过对主集群和副集群的负载状态进行监控,以主集群的负载状态情况为主,按需将主集群主机的闲置资源调整到副集群中,来提高服务器资源的利用率;同时,在主集群所需的服务器资源不能得到满足时,及时从副集群中调配迁移。本发明专利技术通过对主集群和副集群的负载情况进行定时监控,在主集群的负载处于非预期最佳负载状态时触发服务器动态分配,从而保持业务服务集群处于最佳负载状态,有效利用空闲集群的服务器资源,同时可在主集群处于高负载时予以快速响应。

【技术实现步骤摘要】
双集群间服务器动态分配方法及系统
本专利技术涉及互联网资源共享
,具体涉及双集群间服务器动态分配方法及系统。
技术介绍
服务器集群技术可将分散的服务器资源进行组合连接,通过部署相同的业务服务实例对外提供统一的业务服务,保证核心业务的持续运转,实现对服务器资源的高效利用。在服务器资源有限的情况下,用户可按照业务的实际需要,将服务器资源分割为主集群和副集群,以应对不同的业务需求。主集群作为主要集群,负责支撑核心的业务服务;副集群是辅助集群,负责对实时性要求不高、计算量较大的计算任务如数据转换、数据查询等进行执行。在传统的集群管理中,通常按照预期支撑的最大业务量对主集群和副集群的服务器数量进行手动配置,在计划时间段如闲时、忙时进行手动或自动调整。然而,业务量的变化过程相对随机,在固定的时间段对服务器资源进行调整不利于服务器资源的充分利用,同时也无法快速应对业务服务集群面临的高压情境。
技术实现思路
为解决现有技术存在的不足,本专利技术提供了一种双集群间服务器动态分配方法,包括如下步骤:步骤S1:为每个服务器进行配置,将其分为主集群及副集群;步骤S2:为主集群分配一个服务器作为主集群管理节点,剩下的服务器为主集群子节点,为副集群分配一个服务器作为副集群管理节点,剩下的服务器为副集群子节点;步骤S3:每个集群中的管理节点定时获取该集群中各子节点的硬件利用率,并由此计算该集群在预定时间段的服务器资源利用率;步骤S4:主集群管理节点判断主集群服务器资源利用率UM是否低于既定最低利用率Umin,是则执行步骤S5,否则执行步骤S6;步骤S5:主集群管理节点判断主集群及副集群是否同时满足主集群当前子节点数NS大于1,且副集群服务器资源利用率US大于既定最高利用率Umax,是则执行步骤S7,否则执行步骤S9;步骤S6:主集群管理节点判断主集群及副集群是否同时满足主集群服务器资源利用率大于既定最高利用率Umax,且副集群子节点数量NM大于1,是则执行步骤S8,否则执行步骤S9;步骤S7:主集群管理节点执行迁移流程,之后执行步骤S9;步骤S8:主集群管理节点向副集群管理节点发送迁入请求,副集群管理节点执行迁移流程,之后执行步骤S9;步骤S9:等待既定时间后,重新执行步骤S3至步骤S8。其中,所述步骤S7及步骤S8中,迁移流程包括:步骤A:迁移方集群管理节点选择所在集群中硬件利用率最低的子节点进行标记,停止向该子节点分发任务;步骤B:将该子节点的IP地址发送给接收方集群管理节点;步骤C:接收方收到该子节点的IP,将该子节点的IP加入接收方子节点列表。其中,所述迁移流程还包括:步骤D:接收方集群管理节点检测该子节点是否联通,是则执行步骤E,否则执行步骤F;步骤E:接收方集群管理节点向子节点分发业务请求,同时向迁移方集群管理节点返回迁移成功信息;步骤F:接收方集群管理节点删除该子节点,同时向迁移方集群管理节点返回迁移失败信息。其中,所述步骤E及步骤F均还包括:步骤G:迁移方集群管理节点接收到接收方集群管理节点迁移成功或失败的信息后,判断是否成功迁移,是则执行步骤H,否则执行步骤I;步骤H:迁移方集群管理节点移除所述子节点,结束当前迁移过程;步骤I:迁移方集群管理节点警告用户迁移失败,恢复所述子节点,结束当前迁移过程。其中,每个服务器中配置的应用服务包括主业务服务及计算任务服务,且每个服务器中配置的服务实例完全相同。其中,所述步骤S3中,硬件利用率的计算公式为:平均利用率×A+内存平均利用率×B;其中,为硬件利用率,A和B分别为CPU平均利用率及内存平均利用率所占权重,且A+B=1。其中,所述步骤S3中,服务器资源利用率的计算公式为:其中,U为服务器资源利用率,为集群中各子节点的硬件利用率,n为所在集群对应的子节点数量。本专利技术另外提供了一种双集群间服务器动态分配系统,包括主集群及副集群,其中,主集群包括一个主集群管理节点及多个主集群子节点,副集群包括一个副集群管理节点及多个副集群子节点;所述主集群管理节点及副集群管理节点均包括一个节点状态管理模块,用于获取所在集群中每个子节点的硬件利用率,并由此计算所在集群的服务器资源利用率;每个主集群子节点及副集群子节点均包括一个子监控模块,用于定时获取各子节点对应的硬件利用率,并将硬件利用率发送给所在集群的管理节点;所述主集群管理节点及副集群管理节点通过网络连接,并通过预定间隔时间的服务器资源利用率进行各集群之间子节点的迁移。其中,所述硬件利用率的计算公式为:平均利用率×A+内存平均利用率×B;其中,为硬件利用率,A和B分别为CPU平均利用率及内存平均利用率所占权重,且A+B=1。其中,所述服务器资源利用率的计算公式为:其中,U为服务器资源利用率,为集群中各子节点的硬件利用率,n为所在集群对应的子节点数量。本专利技术提供的双集群间服务器动态分配方法及系统,通过对主集群和副集群的负载情况进行定时监控,在主集群的负载处于非预期最佳负载状态时触发服务器动态分配,从而保持业务服务集群处于最佳负载状态,有效利用空闲集群的服务器资源,同时可在主集群处于高负载时予以快速响应。附图说明图1:本专利技术的双集群间服务器动态分配系统组织结构图;图2:本专利技术的双集群间服务器动态分配系统逻辑框图;图3:本专利技术的双集群间服务器动态分配方法流程图;图4:本专利技术的双集群间服务器动态分配方法集群间节点迁移过程流程图。附图标记说明10主集群11主集群管理节点111节点状态管理模块12主集群子节点121子监控模块20副集群21副集群管理节点211节点状态管理模块22副集群子节点221子监控模块具体实施方式为了对本专利技术的技术方案及有益效果有更进一步的了解,下面结合附图详细说明本专利技术的技术方案及其产生的有益效果。本专利技术的双集群间服务器动态分配方法及系统,其主要专利技术构思为在用户预先配置的基础上对服务器资源进行分配,形成主集群和副集群;在业务服务和任务服务运行的过程中,通过对主集群和副集群的负载状态进行监控,以主集群的负载状态情况为主,按需将主集群主机的闲置资源调整到副集群中,来提高服务器资源的利用率;同时,在主集群所需的服务器资源不能得到满足时,可及时从副集群中调配迁移;这样,仅需要用户提供初始的集群服务器资源配置,即可实现集群间服务器资源的动态分配,这样便实现了一种双集群间服务器动态分配方法。具体的,请参见图1-图2所示,分别为本专利技术的双集群间服务器动态分配系统组织结构图及逻辑框图,如图1及图2所示,本专利技术提供的双集群服务器动态分配系统,包括主集群10及副集群20,主集群10及副集群20按照用户预定义的分配方法配置,其中,主集群10包括一个主集群管理节点11及多个主集群子节点12,副集群20包括一个副集群管理节点21及多个副集群子节点22;管理节点负责对所在集群中每个子节点的动态调度及子节点间通信的转发;所述主集群管理节点11及副集群管理节点21均包括一个节点状态管理模块111、211,用于获取所在集群中每个子节点的硬件利用率,并由此计算所在集群的服务器资源利用率;每个主集群子节点12及副集群子节点22均包括一个子监控模块121、221,用于定时获取各子节点对应的硬件利用率,并将硬件利用率发送给所在集群的管理节点;所述主集群管理节点11本文档来自技高网...

【技术保护点】
1.一种双集群间服务器动态分配方法,其特征在于,包括如下步骤:步骤S1:为每个服务器进行配置,将其分为主集群及副集群;步骤S2:为主集群分配一个服务器作为主集群管理节点,剩下的服务器为主集群子节点,为副集群分配一个服务器作为副集群管理节点,剩下的服务器为副集群子节点;步骤S3:每个集群中的管理节点定时获取该集群中各子节点的硬件利用率,并由此计算该集群在预定时间段的服务器资源利用率;步骤S4:主集群管理节点判断主集群服务器资源利用率UM是否低于既定最低利用率Umin,是则执行步骤S5,否则执行步骤S6;步骤S5:主集群管理节点判断主集群及副集群是否同时满足主集群当前子节点数NS大于1,且副集群服务器资源利用率US大于既定最高利用率Umax,是则执行步骤S7,否则执行步骤S9;步骤S6:主集群管理节点判断主集群及副集群是否同时满足主集群服务器资源利用率大于既定最高利用率Umax,且副集群子节点数量NM大于1,是则执行步骤S8,否则执行步骤S9;步骤S7:主集群管理节点执行迁移流程,之后执行步骤S9;步骤S8:主集群管理节点向副集群管理节点发送迁入请求,副集群管理节点执行迁移流程,之后执行步骤S9;步骤S9:等待既定时间后,重新执行步骤S3至步骤S8。...

【技术特征摘要】
1.一种双集群间服务器动态分配方法,其特征在于,包括如下步骤:步骤S1:为每个服务器进行配置,将其分为主集群及副集群;步骤S2:为主集群分配一个服务器作为主集群管理节点,剩下的服务器为主集群子节点,为副集群分配一个服务器作为副集群管理节点,剩下的服务器为副集群子节点;步骤S3:每个集群中的管理节点定时获取该集群中各子节点的硬件利用率,并由此计算该集群在预定时间段的服务器资源利用率;步骤S4:主集群管理节点判断主集群服务器资源利用率UM是否低于既定最低利用率Umin,是则执行步骤S5,否则执行步骤S6;步骤S5:主集群管理节点判断主集群及副集群是否同时满足主集群当前子节点数NS大于1,且副集群服务器资源利用率US大于既定最高利用率Umax,是则执行步骤S7,否则执行步骤S9;步骤S6:主集群管理节点判断主集群及副集群是否同时满足主集群服务器资源利用率大于既定最高利用率Umax,且副集群子节点数量NM大于1,是则执行步骤S8,否则执行步骤S9;步骤S7:主集群管理节点执行迁移流程,之后执行步骤S9;步骤S8:主集群管理节点向副集群管理节点发送迁入请求,副集群管理节点执行迁移流程,之后执行步骤S9;步骤S9:等待既定时间后,重新执行步骤S3至步骤S8。2.如权利要求1所述的双集群间服务器动态分配方法,其特征在于,所述步骤S7及步骤S8中,迁移流程包括:步骤A:迁移方集群管理节点选择所在集群中硬件利用率最低的子节点进行标记,停止向该子节点分发任务;步骤B:将该子节点的IP地址发送给接收方集群管理节点;步骤C:接收方收到该子节点的IP,将该子节点的IP加入接收方子节点列表。3.如权利要求2所述的双集群间服务器动态分配方法,其特征在于,所述迁移流程还包括:步骤D:接收方集群管理节点检测该子节点是否联通,是则执行步骤E,否则执行步骤F;步骤E:接收方集群管理节点向子节点分发业务请求,同时向迁移方集群管理节点返回迁移成功信息;步骤F:接收方集群管理节点删除该子节点,同时向迁移方集群管理节点返回迁移失败信息。4.如权利要求3所述的双集群间服务器动态分配方法,其特征在于,所述...

【专利技术属性】
技术研发人员:常静坤杜浩荡程方黄剑光
申请(专利权)人:中国软件与技术服务股份有限公司
类型:发明
国别省市:北京,11

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1