【技术实现步骤摘要】
热点检测方法、装置、监测服务器及存储介质
[0001]本公开涉及分布式存储
,尤其涉及一种分布式存储系统的热点检测方法、装置、监测服务器及存储介质。
技术介绍
[0002]近年来,随着互联网用户的飞速增长以及AI(Artificial Intelligence,人工智能)领域对于大数据的依赖,数据分析和后台开发人员需要获得与处理相关的越来越多的数据,在这样的背景下,分布式存储相对于传统的单机存储越来越流行。但是,在采用较低成本获取大量算力的同时,分布式存储系统在运维与使用中也会遇到各种各样的挑战,数据热点问题就是最常见的问题之一。
[0003]热点解决方案对于任何分布式存储系统都是一个值得思考的问题,实际运维中,由单个热点数据导致分布式存储系统整体不稳定是很常见的现象,例如某商品降价引发的瞬时热卖、微博热点话题的突然出现、或是开发人员写入数据库的数据大小分配不均,这些都可能引发热点问题。在解决这些问题时,首先需要能够快速且准确地发现这些热点。
[0004]相关技术中,一般是通过集群监控系统,人工观察到数 ...
【技术保护点】
【技术特征摘要】
1.一种分布式存储系统的热点检测方法,其特征在于,所述分布式存储系统包括多个存储节点,所述方法包括:获取所述存储节点中数据分片的每秒查询率,所述每秒查询率包括当前每秒查询率和历史每秒查询率;基于所述历史每秒查询率确定所述当前每秒查询率所处的状态;响应于所述当前每秒查询率所处的状态为目标状态,确定所述数据分片对应的存储节点为热点。2.根据权利要求1所述的分布式存储系统的热点检测方法,其特征在于,所述基于所述历史每秒查询率确定所述当前每秒查询率所处的状态,包括:获取所述数据分片的所述历史每秒查询率和所述当前每秒查询率的平均值和标准差;针对所述数据分片,获取所述当前每秒查询率与所述平均值之间的差值,并根据所述差值和所述标准差,确定所述当前每秒查询率所处的状态。3.根据权利要求2所述的分布式存储系统的热点检测方法,其特征在于,还包括:若所述差值与所述标准差的比值超过预设值,则确定所述当前每秒查询率所处的状态为所述目标状态。4.根据权利要求1
‑
3中任一项所述的分布式存储系统的热点检测方法,其特征在于,所述每秒查询率为读出每秒查询率或写入每秒查询率。5.根据权利要求1所述的分布式存储系统的热点检测方法,其特征在于,采用循环队列存储方式存储所述历史每秒查询率。6.根据权利要求1所述的分布式存储系统的...
【专利技术属性】
技术研发人员:唐彦昭,何昱晨,贾硕,赵立伟,张一帆,
申请(专利权)人:北京小米松果电子有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。