基于Redis的分布式矢量数据均衡方法、装置、设备及存储介质制造方法及图纸

技术编号:46622883 阅读:0 留言:0更新日期:2025-10-14 21:18
本发明专利技术实施例涉及分布式技术领域,公开了一种基于Redis的分布式矢量数据均衡方法、装置、设备及存储介质,方法为获取至少一个待迁移的数据子集,数据子集为矢量数据集根据数据维度和各数据维度的值域范围划分得到的;实时获取至少一个候选Redis节点对应的可用资源总分;将至少一个待迁移的数据子集按照预设顺序依次存储至可用资源总分最高的候选Redis节点上;根据至少一个待迁移的数据子集对应的值域范围和对应存储的候选Redis节点,生成索引目录。通过实时获取各候选Redis节点对应的可用资源总分,充分考虑到了节点的负载,实现将数据子集存储至负载较低的节点,实现了候选Redis节点的负载均衡,提高了各候选Redis节点的利用率,提高了候选Redis节点所在系统的稳定性。

【技术实现步骤摘要】

本专利技术实施例涉及分布式,特别涉及一种基于redis的分布式矢量数据均衡方法、装置、设备及存储介质。


技术介绍

1、现有技术中,分布式本地矢量索引方法在存储矢量数据时,未考虑到节点的负载状态,容易导致节点负载不均,从而使得节点的利用率较低,节点所在系统的稳定性较差。


技术实现思路

1、本专利技术的目的在于至少提供一种基于redis的分布式矢量数据均衡方法、装置、设备及存储介质,至少可以解决因节点负载不均,导致节点的利用率较低,节点所在系统的稳定性较差的技术问题,至少可以达到实现节点的负载均衡,提高节点的利用率,提高节点所在系统的稳定性的技术效果。

2、为解决上述技术问题,本申请的至少一个实施例提供了一种基于redis的分布式矢量数据均衡方法,包括:获取至少一个待迁移的数据子集,数据子集为矢量数据集根据数据维度和各数据维度的值域范围划分得到的;实时获取至少一个候选redis节点对应的可用资源总分;将至少一个待迁移的数据子集按照预设顺序依次存储至可用资源总分最高的候选redis节点上;根据至少一个待本文档来自技高网...

【技术保护点】

1.一种基于Redis的分布式矢量数据均衡方法,其特征在于,包括:

2.根据权利要求1所述的基于Redis的分布式矢量数据均衡方法,其特征在于,所述根据数据维度和各所述数据维度的值域范围划分还包括:

3.根据权利要求1所述的基于Redis的分布式矢量数据均衡方法,其特征在于,所述实时获取至少一个候选Redis节点对应的可用资源总分,包括:

4.根据权利要求1所述的基于Redis的分布式矢量数据均衡方法,其特征在于,所述至少一个待迁移的数据子集为尚未被存储的初始数据子集,所述将至少一个所述待迁移的数据子集按照预设顺序依次存储至可用资源总分最高的候选Red...

【技术特征摘要】

1.一种基于redis的分布式矢量数据均衡方法,其特征在于,包括:

2.根据权利要求1所述的基于redis的分布式矢量数据均衡方法,其特征在于,所述根据数据维度和各所述数据维度的值域范围划分还包括:

3.根据权利要求1所述的基于redis的分布式矢量数据均衡方法,其特征在于,所述实时获取至少一个候选redis节点对应的可用资源总分,包括:

4.根据权利要求1所述的基于redis的分布式矢量数据均衡方法,其特征在于,所述至少一个待迁移的数据子集为尚未被存储的初始数据子集,所述将至少一个所述待迁移的数据子集按照预设顺序依次存储至可用资源总分最高的候选redis节点上,包括:

5.根据权利要求1所述的基于redis的分布式矢量数据均衡方法,其特征在于,所述待迁移的数据子集为存储在任一redi...

【专利技术属性】
技术研发人员:胡东旭陈存利
申请(专利权)人:度小满科技北京有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1