基于分布式数据库的向量索引方法、装置、电子设备制造方法及图纸

技术编号:43041714 阅读:24 留言:0更新日期:2024-10-22 14:28
本发明专利技术提供了一种基于分布式数据库的向量索引方法、装置、电子设备,可以应用于数据库技术领域。该方法包括:响应于接收到由客户端发送的数据查询请求,获取查询向量,其中,查询向量是由非结构化数据转换得到的;利用分布式数据库的分片存储算法,确定用于存储查询向量的存储区域,并将存储区域作为目标待查询区域;根据向量索引信息中的质心向量,确定与查询向量相匹配的多个待查询子区域;根据目标待查询区域与多个待查询子区域之间的第一分布信息,确定与每个待查询子区域相匹配的向量获取数目;以及基于向量获取数目,根据查询向量从多个待查询子区域中获取多个目标向量。

【技术实现步骤摘要】

本专利技术涉及数据库,更具体地,涉及一种基于分布式数据库的向量索引方法、装置、电子设备


技术介绍

1、随着互联网、大数据、人工智能等技术的的快速发展,非结构化数据开始了爆炸性的增长,如何快速、准确地检索和查询这些数据,为传统数据库行业带来了愈发严峻的挑战。人工智能算法广泛使用的embedding技术将非结构化数据抽象为向量数据,由此,非结构化数据的检索转换为了向量检索过程,为这一问题的解决带来了新的方法。

2、目前,分布式数据库集群将向量化的非结构化数据存储在不同的数据节点上,实现大规模数据存储和高并发查询。基于分布式数据库的非结构化数据的向量索引,一般是向每个数据节点发送向量获取请求,以实现非结构化数据的查询。

3、然而,由于分布式数据库集群涉及的数据节点的数量庞大,与多个数据节点之间的交互操作会影响查询效率。


技术实现思路

1、有鉴于此,本专利技术提供了一种基于分布式数据库的向量索引方法、装置、电子设备。

2、本专利技术的一个方面提供了一种基于分布式数据库的向量索引方本文档来自技高网...

【技术保护点】

1.一种基于分布式数据库的向量索引方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述根据向量索引信息中的质心向量,确定与所述查询向量相匹配的多个待查询子区域,包括:

3.根据权利要求1所述的方法,其特征在于,所述根据所述目标待查询区域与多个所述待查询子区域之间的第一分布信息,确定与每个所述待查询子区域相匹配的向量获取数目,包括:

4.根据权利要求3所述的方法,其特征在于,所述确定与每个所述待查询子区域相匹配的第一预设数目,包括:

5.根据权利要求3所述的方法,其特征在于,所述确定与每个所述待查询子区域对应的第一...

【技术特征摘要】

1.一种基于分布式数据库的向量索引方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述根据向量索引信息中的质心向量,确定与所述查询向量相匹配的多个待查询子区域,包括:

3.根据权利要求1所述的方法,其特征在于,所述根据所述目标待查询区域与多个所述待查询子区域之间的第一分布信息,确定与每个所述待查询子区域相匹配的向量获取数目,包括:

4.根据权利要求3所述的方法,其特征在于,所述确定与每个所述待查询子区域相匹配的第一预设数目,包括:

5.根据权利要求3所述的方法,其特征在于,所述确定与...

【专利技术属性】
技术研发人员:王涛
申请(专利权)人:苏州吉呗思数据技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1