一种数据读取方法、装置、数据库节点及介质制造方法及图纸

技术编号:35867930 阅读:14 留言:0更新日期:2022-12-07 11:01
本发明专利技术实施例公开了一种数据读取方法、装置、数据库节点及介质。方法包括:根据用户请求确定至少一个数据读取信息,数据读取信息指示待读取数据;针对每个数据读取信息,将数据读取信息拆分为至少一个子信息,每个子信息指示一个子数据,各子数据构成待读取数据;从设定连接池中为每个子信息分配一个数据库连接;通过每个子信息所对应的数据库连接,并发从每个子信息所对应的数据节点读取每个子信息所对应的子数据。该方法通过将所确定的每个数据读取信息拆分为多个子信息,并发从每个子信息所对应的数据节点读取对应的子数据,能够避免单线程读取数据的问题,减少了数据读取时计算节点和网络节点之间的网络时延,从而提高了数据读取效率。读取效率。读取效率。

【技术实现步骤摘要】
一种数据读取方法、装置、数据库节点及介质


[0001]本专利技术实施例涉及数据库
,尤其涉及一种数据读取方法、装置、数据库节点及介质。

技术介绍

[0002]分布式数据库是指由多个互连的数据库节点(如计算机或服务器等)构成的一种数据库架构,可以通过分布式数据库管理系统进行管理。分布式数据库可以实现大容量、多类别的数据存储,又能通过多个数据库节点之间的协同工作,对外提供高性能的数据访问服务。
[0003]目前,由于数据是按分片分布式储存在分布式数据库的各个数据节点中,当需要读取数据到计算节点以进行相应的计算处理时,计算节点需要从数据节点中读取相应的数据,因此,计算节点和数据节点之间的网络时延往往成为计算处理过程中的主要耗时所在,从而影响了计算节点和数据节点之间的数据读取效率。
[0004]故,如何提高计算节点和数据节点之间的数据读取效率,是当前亟待解决的技术问题。

技术实现思路

[0005]本专利技术实施例提供了一种数据读取方法、装置、数据库节点及介质,以提高计算节点和数据节点之间的数据读取效率。
[0006]根据本专利技术实施例的一方面,提供了一种数据读取方法,包括:
[0007]根据所接收的用户请求确定至少一个数据读取信息,其中所述数据读取信息指示待读取数据;
[0008]针对每个数据读取信息,将所述数据读取信息拆分为至少一个子信息,其中每个子信息指示一个子数据,各所述子数据构成所述待读取数据;
[0009]从设定连接池中为每个子信息分配一个数据库连接;
[0010]通过每个子信息所对应的数据库连接,并发从每个子信息所对应的数据节点读取每个子信息所对应的子数据。
[0011]根据本专利技术实施例的另一方面,提供了一种数据读取装置,包括:
[0012]确定模块,用于根据所接收的用户请求确定至少一个数据读取信息,其中所述数据读取信息指示待读取数据;
[0013]拆分模块,用于针对每个数据读取信息,将所述数据读取信息拆分为至少一个子信息,其中每个子信息指示一个子数据,各所述子数据构成所述待读取数据;
[0014]分配模块,用于从设定连接池中为每个子信息分配一个数据库连接;
[0015]读取模块,用于通过每个子信息所对应的数据库连接,并发从每个子信息所对应的数据节点读取每个子信息所对应的子数据。
[0016]根据本专利技术实施例的另一方面,提供了一种数据库节点,所述数据库节点包括:
[0017]至少一个处理器;以及
[0018]与所述至少一个处理器通信连接的存储器;其中,
[0019]所述存储器存储有可被所述至少一个处理器执行的计算机程序,所述计算机程序被所述至少一个处理器执行,以使所述至少一个处理器能够执行本专利技术任一实施例所述的数据读取方法。
[0020]根据本专利技术实施例的另一方面,提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机指令,所述计算机指令用于使处理器执行时实现本专利技术任一实施例所述的数据读取方法。
[0021]本专利技术实施例的技术方案,首先根据所接收的用户请求确定至少一个数据读取信息,其中数据读取信息指示待读取数据;然后针对每个数据读取信息,将数据读取信息拆分为至少一个子信息,其中每个子信息指示一个子数据,各子数据构成待读取数据;之后从设定连接池中为每个子信息分配一个数据库连接;最后通过每个子信息所对应的数据库连接,并发从每个子信息所对应的数据节点读取每个子信息所对应的子数据。该方法通过将所确定的每个数据读取信息拆分为多个子信息,并发从每个子信息所对应的数据节点读取对应的子数据,能够避免单线程读取数据的问题,减少了数据读取时计算节点和网络节点之间的网络时延,从而提高了数据读取效率。
[0022]应当理解,本部分所描述的内容并非旨在标识本专利技术的实施例的关键或重要特征,也不用于限制本专利技术的范围。本专利技术的其它特征将通过以下的说明书而变得容易理解。
附图说明
[0023]为了更清楚地说明本专利技术实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本专利技术的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
[0024]图1为本专利技术实施例一提供的一种数据读取方法的流程图;
[0025]图2为本专利技术实施例二提供的一种数据读取方法的流程图;
[0026]图3为本专利技术实施例二提供的一种分布式数据库的结构示意图;
[0027]图4为本专利技术实施例二提供的一种数据读取方法的实现示意图;
[0028]图5为本专利技术实施例三提供的一种数据读取装置的结构示意图;
[0029]图6为本专利技术实施例四提供的一种数据库节点的结构示意图。
具体实施方式
[0030]为了使本
的人员更好地理解本专利技术方案,下面将结合本专利技术实施例中的附图,对本专利技术实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本专利技术一部分的实施例,而不是全部的实施例。基于本专利技术中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本专利技术保护的范围。
[0031]需要说明的是,本专利技术的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用
的数据在适当情况下可以互换,以便这里描述的本专利技术的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
[0032]实施例一
[0033]图1为本专利技术实施例一提供的一种数据读取方法的流程图,本实施例可适用于在分布式数据库场景下读取数据,以提高计算节点和数据节点之间的数据传输效率的情况,该方法可以由数据读取装置来执行,该数据读取装置可以采用硬件和/或软件的形式实现,该数据读取装置可配置于数据库节点中。如图1所示,该方法可应用于计算节点,计算节点可理解为分布式数据库中用于接收用户请求并进行相应计算处理的数据库节点,该方法包括:
[0034]S110、根据所接收的用户请求确定至少一个数据读取信息,其中所述数据读取信息指示待读取数据。
[0035]本实施例中,用户请求可理解为用户所输入的用于在数据库中进行数据访问的请求;此处对用户请求的具体内容不作限定,如可以是以与数据访问所关联的结构化查询语句(Structured Query Language,SQL)的形式体现。
[0036]数据读取信息可以指示待读取数据;用户请求涉及到了从数据库中读取数据以进行相应的处理,待读取数据可理解为待读取的数据。
[0037]根本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种数据读取方法,其特征在于,所述方法包括:根据所接收的用户请求确定至少一个数据读取信息,其中所述数据读取信息指示待读取数据;针对每个数据读取信息,将所述数据读取信息拆分为至少一个子信息,其中每个子信息指示一个子数据,各所述子数据构成所述待读取数据;从设定连接池中为每个子信息分配一个数据库连接;通过每个子信息所对应的数据库连接,并发从每个子信息所对应的数据节点读取每个子信息所对应的子数据。2.根据权利要求1所述的方法,其特征在于,所述根据所接收的用户请求确定至少一个数据读取信息,包括:根据所接收的用户请求确定执行所述用户请求所需的至少一个数据库表,其中,一个数据库表对应一个数据读取信息。3.根据权利要求2所述的方法,其特征在于,所述将所述数据读取信息拆分为至少一个子信息,包括:根据所述数据读取信息所对应数据库表的统计信息,确定所述数据读取信息所指示待读取数据的数据量;基于所述数据量确定拆分步长;基于所述拆分步长将所述数据读取信息拆分为至少一个子信息。4.根据权利要求1所述的方法,其特征在于,每一个数据库连接配置相同的时间戳。5.根据权利要求1所述的方法,其特征在于,针对每个数据读取信息,所述数据读取信息的各个子信息对应不同的数据节点。6.根据权利要求1所述的方法,其特征在于,所述从设定连接池中为每个子信息分配一个数据库连接,包括:从设定连接池中获取目标数量个数据库连接,其中,所述目标数量为各个数据读取信息的子信息数量之和;为每个子信息分配一个所获取的...

【专利技术属性】
技术研发人员:舒锦杨云勇黄明峰魏伟刘军蔡培唐虎吕鹏飞王乐周万青
申请(专利权)人:星环信息科技上海股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1