一种数据分布式存储方法、计算机设备和程序产品技术

技术编号:43938698 阅读:14 留言:0更新日期:2025-01-07 21:30
本发明专利技术涉及数据存储技术领域,具体涉及一种数据分布式存储方法、计算机设备和程序产品。该方法利用实时时间段之前的历史时间段对实时时间段进行数据预测,获得预测访问量占比,通过预测访问量占比与实际访问量占比的差异评估实时时间段内的热点信息变化程度,利用热点信息变化程度获得历史数据的截取数据长度,获得参考数据。根据参考数据即可获得未来时间段下的预测访问数据。根据预测访问数据与实时时间段下访问数据的访问量差异对节点服务器的带宽进行自适应有效调节。本发明专利技术实施例截取用于预测的历史数据,得到准确的预测访问数据,能够基于预测访问数据对节点服务器带宽进行及时准确的自适应调整。

【技术实现步骤摘要】

本专利技术涉及数据存储,具体涉及一种数据分布式存储方法、计算机设备和程序产品


技术介绍

1、在具有中心元服务器的分布式存储系统中,元服务器的作用包括数据定位、访问控制、统一命名空间管理、高可用性保障、负载均衡调度等。其中节点服务器与中心元服务器的通信带宽大小影响着整个存储系统的运行效率。

2、工作人员可根据系统实际运行情况按照经验设置带宽,以满足系统的调度运行,但是这种方法难以保证带宽调整的合理性和及时性。因此现有技术可利用机器学习方法结合历史信息去预测未来时刻的访问数据,进而及时确定节点服务器的带宽,保证带宽调整的实时性。但是该方法未考虑到数据访问过程中热点信息的影响,因为分布式系统中数据信息被分散存储至多个节点服务器中,因此存储有热点信息数据的节点服务器会获得较高的访问量,若在实际数据访问存储过程中热点信息发生变化,导致历史数据中包含大量无用信息,影响该节点服务器的预测结果,进而导致带宽设置不准确,影响数据的访问与存储。


技术实现思路

1、为了解决现有技术中因为未考虑到热点信息数据的影响,导本文档来自技高网...

【技术保护点】

1.一种数据分布式存储方法,其特征在于,所述方法包括:

2.根据权利要求1所述的一种数据分布式存储方法,其特征在于,所述访问量占比为一个时间段下,一个节点服务器的访问量在所有节点服务器的访问量中的占比。

3.根据权利要求1所述的一种数据分布式存储方法,其特征在于,所述用户分布相似性的获取方法包括:

4.根据权利要求1所述的一种数据分布式存储方法,其特征在于,所述预测访问量占比的获取方法包括:

5.根据权利要求1所述的一种数据分布式存储方法,其特征在于,所述热点信息变化程度的获取方法包括:

6.根据权利要求1所述的一种数据分布式存...

【技术特征摘要】

1.一种数据分布式存储方法,其特征在于,所述方法包括:

2.根据权利要求1所述的一种数据分布式存储方法,其特征在于,所述访问量占比为一个时间段下,一个节点服务器的访问量在所有节点服务器的访问量中的占比。

3.根据权利要求1所述的一种数据分布式存储方法,其特征在于,所述用户分布相似性的获取方法包括:

4.根据权利要求1所述的一种数据分布式存储方法,其特征在于,所述预测访问量占比的获取方法包括:

5.根据权利要求1所述的一种数据分布式存储方法,其特征在于,所述热点信息变化程度的获取方法包括:

6.根据权利要...

【专利技术属性】
技术研发人员:罗凯
申请(专利权)人:长沙瑞腾信息技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1