动态扩缩容方法及装置制造方法及图纸

技术编号:40549691 阅读:29 留言:0更新日期:2024-03-05 19:08
本发明专利技术提供一种动态扩缩容方法及装置,包括:按照时间维度访问集群的状态数据,将访问到的时序监控数据存储至时序数据库,时序监控数据包括前端服务器的时序监控数据以及后端服务器的时序监控数据;获取预设采样周期内时序数据库中所存储的前端服务器对应的至少一个第一监控指标下的时序监控数据,以及,后端服务器对应的至少一个第二监控指标下的时序监控数据;根据至少一个第一监控指标下的时序监控数据以及至少一个第二监控指标下的时序监控数据,通过预设扩缩容策略对数据仓库所依赖的集群进行扩缩容,实现自动化地扩缩容,能更简单、更高效且及时地对数据仓库所依赖的集群进行扩缩容,进而能够更好地满足扩缩容业务需求。

【技术实现步骤摘要】

本专利技术涉及数据处理,尤其涉及一种动态扩缩容方法及装置


技术介绍

1、随着城市轨道交通建设的不断发展,城轨智慧应用需求不断增加,为城轨大数据的采集、挖掘、分析和存储能力带来了挑战。在引入新的业务功能或者调整现有的业务流程时,经常遇到随着运算任务的增多,现有的数据仓库规模可以无法满足业务需求。比如数据中间层、数据应用层的数据存储空间不足,或者查询缓慢,此时需要增加数据存储服务。或者,当业务萎缩或者高峰过后,大部分资源可能处于空闲状态,需要进行缩容操作以节约成本。数据仓库存储需要根据需求动态分配和释放存储资源,以实现资源的有效利用和成本的最小化。

2、相关技术中,扩缩容方面相对较为复杂,需要手动进行管理。在扩缩容时,需要添加新的节点并进行相应的配置和调优,手动调整数据分布和节点负载,并进行相应的数据迁移和重分区操作。此种人工参与的方式费事费力,并且容易出错,灵活性和及时性较差,效率较低。


技术实现思路

1、本专利技术提供一种动态扩缩容方法及装置,用以解决现有技术中传统的人工参与扩缩容的方式容易出错本文档来自技高网...

【技术保护点】

1.一种动态扩缩容方法,其特征在于,应用于数据仓库动态扩缩容监控系统,所述数据仓库动态扩缩容监控系统用于对数据仓库所依赖的集群的状态数据进行监控,所述数据仓库所依赖的集群采用至少一台前端服务器结合至少一台后端服务器的集群部署策略,所述前端服务器用于响应前端的客户端请求,所述后端服务器用于负责数据的存储和查询执行工作,所述方法包括:

2.根据权利要求1所述的动态扩缩容方法,其特征在于,所述根据所述至少一个第一监控指标下的时序监控数据以及所述至少一个第二监控指标下的时序监控数据,通过所述数据仓库对应的扩缩容策略对所述数据仓库所依赖的集群进行扩缩容,包括:>

3.根据权利...

【技术特征摘要】

1.一种动态扩缩容方法,其特征在于,应用于数据仓库动态扩缩容监控系统,所述数据仓库动态扩缩容监控系统用于对数据仓库所依赖的集群的状态数据进行监控,所述数据仓库所依赖的集群采用至少一台前端服务器结合至少一台后端服务器的集群部署策略,所述前端服务器用于响应前端的客户端请求,所述后端服务器用于负责数据的存储和查询执行工作,所述方法包括:

2.根据权利要求1所述的动态扩缩容方法,其特征在于,所述根据所述至少一个第一监控指标下的时序监控数据以及所述至少一个第二监控指标下的时序监控数据,通过所述数据仓库对应的扩缩容策略对所述数据仓库所依赖的集群进行扩缩容,包括:

3.根据权利要求2所述的动态扩缩容方法,其特征在于,所述至少一个第一监控指标包括至少一个性能监控指标、一个前端服务器状态监控指标以及一个元数据一致性监控指标,所述预设前端服务器扩缩容条件包括预设前端服务器扩容条件以及预设前端服务器缩容条件;

4.根据权利要求3所述的动态扩缩容方法,其特征在于,所述前端服务器包括主服务器以及备用服务器,所述元数据一致性监控指标下的时序监控数据为所述主服务器的最大元数据日志id与所述备用服务器的最大元数据日志id之间的差值。

5.根据权利要求...

【专利技术属性】
技术研发人员:闫茹简锐锋张诣元潘永克
申请(专利权)人:交控科技股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1