一种数据处理方法、装置、设备以及存储介质制造方法及图纸

技术编号:42617939 阅读:22 留言:0更新日期:2024-09-03 18:24
本申请实施例提供了一种数据处理方法、装置、设备以及存储介质,用于避免分布式云系统的边缘集群中出现缓存倾斜或者缓存缺失的状况,减少从分布式云系统的中心集群获取镜像文件的概率,从而保证边缘集群在根据镜像文件创建服务器的速度。包括:获取镜像订阅列表和镜像缓存分布信息;根据镜像订阅列表和镜像缓存分布信息确定边缘集群的镜像缓存结果;在镜像缓存结果为出现异常时,生成调度信息,调度信息用于指示边缘集群中的各个宿主机进行镜像缓存平衡操作;将调度信息下发至边缘集群;控制边缘集群中的宿主机根据调度信息调度镜像文件。本申请提供的技术方案可应用于云技术领域。

【技术实现步骤摘要】

本申请涉及云,尤其涉及一种数据处理方法、装置、设备以及存储介质


技术介绍

1、在分布式云场景下,该分布式云系统的边缘集群建立服务器的镜像文件,需通过利用互联网从该分布式云系统的中心集群的远程数据库下载。在下载过程中,因为成本限制,互联网设置的带宽较低,从而导致该云服务器在下载该镜像文件所需要的下载时间较长,进而导致该边缘集群的云服务器创建速度远低于中心集群。

2、目前通过提前缓存预热,边缘集群内共享的方式,可以加快边缘集群建立云服务器的创建速度。然而随着边缘集群的日常使用,镜像缓存会出现缓存倾斜,缓存失效等诸多问题。缓存倾斜会导致在共享传输时,大量资源从相同宿主机拉取,出现热点现象,进而影响热点宿主机的稳定性;缓存缺失会导致镜像文件需要重新利用互联网从中心集群下载,产生不符合预期的下载时间。

3、因此急需一种避免出现分布式云系统的边缘集群出现缓存倾斜和缓存缺失状态的数据处理方法。


技术实现思路

1、本申请实施例提供了一种数据处理方法、装置、设备以及存储介质,用于避免分布式云系统的边缘本文档来自技高网...

【技术保护点】

1.一种数据处理方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,在获取镜像订阅列表和镜像缓存分布信息之前,所述方法还包括:

3.根据权利要求2所述的方法,其特征在于,在根据所述边缘集群中各个宿主机的缓存大小创建所述镜像订阅列表之后,所述方法还包括:

4.根据权利要求1所述的方法,其特征在于,所述获取镜像订阅列表和镜像缓存分布信息包括:

5.根据权利要求1所述的方法,其特征在于,所述根据所述镜像订阅列表和所述镜像缓存分布信息确定所述边缘集群的镜像缓存结果包括:

6.根据权利要求5所述的方法,其特征在于,在所述镜...

【技术特征摘要】

1.一种数据处理方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,在获取镜像订阅列表和镜像缓存分布信息之前,所述方法还包括:

3.根据权利要求2所述的方法,其特征在于,在根据所述边缘集群中各个宿主机的缓存大小创建所述镜像订阅列表之后,所述方法还包括:

4.根据权利要求1所述的方法,其特征在于,所述获取镜像订阅列表和镜像缓存分布信息包括:

5.根据权利要求1所述的方法,其特征在于,所述根据所述镜像订阅列表和所述镜像缓存分布信息确定所述边缘集群的镜像缓存结果包括:

6.根据权利要求5所述的方法,其特征在于,在所述镜像缓存结果为缓存倾斜时,所述生成调度信息包括:

7.根据权利要求5所述的方法,其特征在于,在所述镜像缓存结果为缓存缺失时,所述生成调度信息包括:

8.根据权利要求1至7中任一项所述的方法,其特征在于,将所述...

【专利技术属性】
技术研发人员:徐兵陈远曾君亮
申请(专利权)人:腾讯云计算北京有限责任公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1