请求的处理方法和装置、电子设备和存储介质制造方法及图纸

技术编号:29673137 阅读:15 留言:0更新日期:2021-08-13 21:54
本申请提供了一种请求的处理方法和装置、电子设备和存储介质,其中,该方法包括:接收目标计算节点发送的目标请求信息和与所述目标请求信息对应的目标执行计划信息,其中,所述目标请求信息用于请求执行目标数据处理操作;根据所述目标执行计划信息执行所述目标请求信息所请求的所述目标数据处理操作,得到所述目标数据处理操作的处理结果;将所述目标数据处理操作的处理结果发送给所述目标计算节点。通过本申请,解决了相关技术中的请求的处理方式存在由于请求的处理过程繁琐导致的性能损耗大的问题。

【技术实现步骤摘要】
请求的处理方法和装置、电子设备和存储介质
本申请涉及数据处理领域,尤其涉及一种请求的处理方法和装置、电子设备和存储介质。
技术介绍
在分布式数据库领域,通常采用非共享式架构,主要包括计算节点和存储节点。存储节点通常会基于开源的MySQL(一种关系型数据库管理系统)等数据库二次开发后发展而来,从而实现数据和吞吐的横向扩展。以MySQL为例,当一个客户端的SQL(StructuredQueryLanguage,结构化查询语言)请求到来时,计算节点会进行SQL解析和查询优化,从而将SQL改写成对应的子查询SQL,并下发到相关的存储节点上。存储节点收到拆分后的子查询SQL,再次进行SQL解析和查询优化,生成执行计划;然后根据生成的执行计划进行数据处理,会对底层的存储引擎进行读写访问。在完成数据处理之后,存储节点将处理后的结果返回给计算节点。计算节点合并所有相关存储节点返回的结果,进行聚合计算后,最终将请求结果返回给客户端。对于上述请求的处理方式,请求的处理过程繁琐,对于复杂SQL,会造成较大的性能损耗。可见,相关技术中的请求的处理方式,存在由于请求的处理过程繁琐导致的性能损耗大的问题。
技术实现思路
本申请提供了一种请求的处理方法和装置、电子设备和存储介质,以至少解决相关技术中的请求的处理方式存在由于请求的处理过程繁琐导致的性能损耗大的问题。根据本申请实施例的一个方面,提供了一种请求的处理方法,包括:接收目标计算节点发送的目标请求信息和与所述目标请求信息对应的目标执行计划信息,其中,所述目标请求信息用于请求执行目标数据处理操作;根据所述目标执行计划信息执行所述目标请求信息所请求的所述目标数据处理操作,得到所述目标数据处理操作的处理结果;将所述目标数据处理操作的处理结果发送给所述目标计算节点;。根据本申请实施例的另一个方面,还提供了一种请求的处理方法,包括:接收目标客户端发送的第一请求信息,其中,所述第一请求信息用于请求执行第一数据处理操作;对所述第一请求信息进行解析和优化,得到第二请求信息和与所述第二请求信息对应的执行计划信息,其中,所述第二请求信息用于请求执行与所述第一数据处理操作关联的第二数据处理操作;向存储节点发送所述第二请求信息和与所述第二请求信息对应的执行计划信息;接收所述存储节点发送的目标数据处理结果,其中,所述目标数据处理结果为所述存储节点根据与所述第二请求信息对应的执行计划信息,执行所述第二请求信息所请求的所述第二数据处理操作之后所得到的处理结果。根据本申请实施例的又一个方面,还提供了一种请求消息的处理装置,包括:第一接收单元,用于接收目标计算节点发送的目标请求信息和与所述目标请求信息对应的目标执行计划信息,其中,所述目标请求信息用于请求执行目标数据处理操作;第一执行单元,用于根据所述目标执行计划信息执行所述目标请求信息所请求的所述目标数据处理操作,得到所述目标数据处理操作的处理结果;第一发送单元,用于将所述目标数据处理操作的处理结果发送给所述目标计算节点。根据本申请实施例的又一个方面,还提供了一种请求消息的处理装置,包括:第二接收单元,用于接收目标客户端发送的第一请求信息,其中,所述第一请求信息用于请求执行第一数据处理操作;解析优化单元,用于对所述第一请求信息进行解析和优化,得到第二请求信息和与所述第二请求信息对应的执行计划信息,其中,所述第二请求信息用于请求执行与所述第一数据处理操作关联的第二数据处理操作;第二发送单元,用于向存储节点发送所述第二请求信息和与所述第二请求信息对应的执行计划信息;第三接收单元,用于接收所述存储节点发送的目标数据处理结果,其中,所述目标数据处理结果为所述存储节点根据与所述第二请求信息对应的执行计划信息,执行所述第二请求信息所请求的所述第二数据处理操作之后所得到的处理结果。根据本申请实施例的又一个方面,还提供了一种电子设备,包括处理器、通信接口、存储器和通信总线,其中,处理器、通信接口和存储器通过通信总线完成相互间的通信;其中,存储器,用于存储计算机程序;处理器,用于通过运行所述存储器上所存储的所述计算机程序来执行上述任一实施例中的方法步骤。根据本申请实施例的又一个方面,还提供了一种计算机可读的存储介质,该存储介质中存储有计算机程序,其中,该计算机程序被设置为运行时执行上述任一实施例中的方法步骤。在本申请实施例中,采用计算节点向存储节点直接下推执行计划信息的方式,接收目标计算节点发送的目标请求信息和与目标请求信息对应的目标执行计划信息,其中,目标请求信息用于请求执行目标数据处理操作;根据目标执行计划信息执行目标请求信息所请求的目标数据处理操作,得到目标数据处理操作的处理结果;将目标数据处理操作的处理结果发送给目标计算节点,由于计算节点向存储节点直接下推执行计划信息,可以缩减存储节点的二次解析和优化过程,从而可以实现简化请求的处理过程的目的,达到了提高存储节点的处理效率、减少数据库性能损耗的技术效果,进而解决了相关技术中的请求的处理方式存在由于请求的处理过程繁琐导致的性能损耗大的问题。附图说明此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本申请的实施例,并与说明书一起用于解释本申请的原理。为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,对于本领域普通技术人员而言,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。图1是根据本申请实施例的一种可选的请求的处理方法的硬件环境的示意图;图2是根据本申请实施例的一种可选的分布式数据库系统架构的示意图;图3是根据本申请实施例的一种可选的请求的处理方法的流程示意图;图4是根据本申请实施例的一种可选的请求的处理方法的示意图;图5是根据本申请实施例的另一种可选的请求的处理方法的流程示意图;图6是根据本申请实施例的一种可选的请求的处理方法的示意图;图7是根据本申请实施例的又一种可选的请求的处理方法的流程示意图;图8是根据本申请实施例的一种可选的请求的处理装置的结构框图;图9是根据本申请实施例的另一种可选的请求的处理装置的结构框图;图10是根据本申请实施例的一种可选的电子设备的结构框图。具体实施方式为了使本
的人员更好地理解本申请方案,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分的实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本申请保护的范围。需要说明的是,本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施本文档来自技高网
...

【技术保护点】
1.一种请求的处理方法,其特征在于,包括:/n接收目标计算节点发送的目标请求信息和与所述目标请求信息对应的目标执行计划信息,其中,所述目标请求信息用于请求执行目标数据处理操作;/n根据所述目标执行计划信息执行所述目标请求信息所请求的所述目标数据处理操作,得到所述目标数据处理操作的处理结果;/n将所述目标数据处理操作的处理结果发送给所述目标计算节点;/n其中,接收所述目标计算节点发送的所述目标请求信息和与所述目标请求信息对应的所述目标执行计划信息包括:接收所述目标计算节点发送的目标数据包,其中,所述目标数据包是基于目标通信协议对初始数据包进行压缩得到的数据包,所述初始数据包中封装有所述目标请求信息和所述目标执行计划信息。/n

【技术特征摘要】
1.一种请求的处理方法,其特征在于,包括:
接收目标计算节点发送的目标请求信息和与所述目标请求信息对应的目标执行计划信息,其中,所述目标请求信息用于请求执行目标数据处理操作;
根据所述目标执行计划信息执行所述目标请求信息所请求的所述目标数据处理操作,得到所述目标数据处理操作的处理结果;
将所述目标数据处理操作的处理结果发送给所述目标计算节点;
其中,接收所述目标计算节点发送的所述目标请求信息和与所述目标请求信息对应的所述目标执行计划信息包括:接收所述目标计算节点发送的目标数据包,其中,所述目标数据包是基于目标通信协议对初始数据包进行压缩得到的数据包,所述初始数据包中封装有所述目标请求信息和所述目标执行计划信息。


2.根据权利要求1所述的方法,其特征在于,在根据所述目标执行计划信息执行所述目标请求信息所请求的所述目标数据处理操作之前,所述方法还包括:
通过目标调度线程从目标连接池的多个执行线程中选取出第一执行线程,其中,所述第一执行线程为处于空闲状态的执行线程,所述第一执行线程用于执行所述目标请求信息。


3.根据权利要求2所述的方法,其特征在于,在根据所述目标执行计划信息执行所述目标请求信息所请求的所述目标数据处理操作的过程中,所述方法还包括:
在所述第一执行线程由于将所述目标请求信息转给目标存储引擎中的工作线程进行处理而处于等待状态的情况下,将所述第一执行线程挂起,其中,挂起后的所述第一执行线程处于空闲状态,所述工作线程用于执行所述目标请求信息所请求的所述目标数据处理操作。


4.根据权利要求3所述的方法,其特征在于,在将所述第一执行线程挂起之后,所述方法还包括:
在所述工作线程执行完所述目标请求信息所请求的所述目标数据处理操作之后,通过所述目标调度线程从所述多个执行线程中选取出第二执行线程,其中,所述第二执行线程为处于空闲状态的执行线程;
通过所述第二执行线程执行目标处理操作,其中,所述目标处理操作为除了所述目标数据处理操作以外,执行所述目标请求信息所需的处理操作。


5.根据权利要求1至4中任一项所述的方法,其特征在于,所述目标执行计划信息包括与所述目标请求信息对应的目标抽象语法树;
根据所述目标执行计划信息执行所述目标请求信息所请求的所述目标数据处理操作,得到所述目标数据处理操作的处理结果包括:
对所述目标抽象语法树进行解析和优化,得到目标执行计划;
按照所述目标执行计划执行所述目标请求信息所请求的所述目标数据处理操作,得到所述目标数据处理操作的处理结果。


6.一种请求的处理方法,其特征在于,包括:
接收目标客户端发送的第一请求信息,其中,所述第一请求信息用于请求执行第一数据处理操作;
对所述第一请求信息进行解析和优化,得到第二请求信息和与所述第二请求信息对应的执行计划信息,其中,所述第二请求信息用于请求执行与所述第一数据处理操作关联的第二数据处理操作;
向存储节点发送所述第二请求信息和与所述第二请求信息对应的执行计划信息;
接收所述存储节点发送的目标数据处理结果,其中,所述目标数据处理结果为所述存储节点根据与所述第二请求信息对应的执行计划信息,执行所述第二请求信息所...

【专利技术属性】
技术研发人员:余邵在
申请(专利权)人:北京金山云网络技术有限公司
类型:发明
国别省市:北京;11

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1