数据查询方法、装置、设备和计算机可读存储介质制造方法及图纸

技术编号:36749486 阅读:18 留言:0更新日期:2023-03-04 10:34
本发明专利技术提供一种数据查询方法、装置、设备和计算机可读存储介质,该方法包括:在所述数据查询装置的状态为空闲状态时,获取各个第一中间数据,所述第一中间数据是已执行的第一查询任务的中间阶段的输出数据,所述中间阶段位于所述第一查询任务的初始阶段之后;根据各个所述第一中间数据构建物化视图;在所述数据查询装置的状态由所述空闲状态转换为繁忙状态时,停止构建所述物化视图,并获取第二查询任务;从所述物化视图中获取所述第二查询任务对应的第二中间数据。本发明专利技术提高了数据的查询效率。率。率。

【技术实现步骤摘要】
数据查询方法、装置、设备和计算机可读存储介质


[0001]本专利技术涉及通信技术,尤其涉及一种数据查询方法、装置、设备和计算机可读存储介质。

技术介绍

[0002]随着企业的发展,企业的数据库中的数据越来越多。在进行查询时,需要从大量的数据中找到所需的数据。
[0003]目前,装置将已执行的查询任务获取已查询的数据,并基于已查询的数据构建物化视图。在后续执行相同的查询任务时,可从物化视图中寻找数据,而不需要从数据库中查询数据。
[0004]若是查询任务不是已执行的查询任务,则查询任务查询的数据无法从物化视图得到,需要从数据库中获取,从而出现了新的查询数据,新的查询数据会并入至物化视图中。由此可知,物化视图的构建是持续不断的,因此,在执行查询任务时,物化视图可能处于构建中,需要等待物化视图构建完毕才可从物化视图中查询到查询任务所需的数据,导致数据的查询时长过长,也即数据的查询效率较低。

技术实现思路

[0005]本专利技术提供一种数据查询方法、装置、设备和计算机可读存储介质,用以解决数据的查询效率较低的问题。
[0006]一方面,本专利技术提供一种数据查询方法,应用于数据查询装置,包括:
[0007]在所述数据查询装置的状态为空闲状态时,获取各个第一中间数据,所述第一中间数据是已执行的第一查询任务的中间阶段的输出数据,所述中间阶段位于所述第一查询任务的初始阶段之后;
[0008]根据各个所述第一中间数据构建物化视图;在所述数据查询装置的状态由所述空闲状态转换为繁忙状态时,停止构建所述物化视图,并获取第二查询任务,并从所述物化视图中获取所述第二查询任务对应的第二中间数据。
[0009]在一实施例中,所述根据各个所述第一中间数据构建物化视图的步骤包括;
[0010]确定每个所述第一中间数据对应的待建立节点的目标权重;
[0011]根据所述目标权重,在各个所述待建立节点中确定各个目标节点;
[0012]根据各个所述目标节点构建物化视图。
[0013]在一实施例中,所述确定每个所述第一中间数据对应的待建立节点的目标权重的步骤包括:
[0014]根据所述第一中间数据的数据量确定所述第一中间数据对应的待建立节点的生成时长,并根据所述生成时长确定待建立节点的第一权重;
[0015]在各个所述待建立节点中,确定每个所述待建立节点相似的节点;
[0016]根据所述待建立节点的相似的节点的数量确定权重修改值;
[0017]根据所述待建立节点对应的权重修改值,修正所述待建立节点对应的第一权重,得到所述待建立节点对应的目标权重。
[0018]在一实施例中,所述根据所述目标权重,在各个所述待建立节点中确定各个目标节点的步骤包括:
[0019]获取所述数据查询装置处于空闲状态的预测时长;
[0020]根据所述预测时长、所述目标权重以及所述待建立节点的生成时长,在各个所述待建立节点中确定目标节点,各个所述目标节点的生成时长之和小于或等于所述预测时长,且所述目标节点对应的目标权重大于第一节点的目标权重,所述第一节点是未确定为目标节点的所述待建立节点。
[0021]在一实施例中,所述根据各个所述目标节点构建物化视图的步骤包括:
[0022]将具有关联关系的所述目标节点进行连接,得到有向无环图;
[0023]将所述目标节点与所述目标节点的相似的节点进行合并,以将所述目标节点所在的有向无环图,与所述目标节点的相似的节点所在的有向无环图进行合并,得到所述物化视图。
[0024]在一实施例中,所述获取各个第一中间数据的步骤包括:
[0025]获取所述数据查询装置在繁忙状态下的查询日志;
[0026]根据所述查询日志,获取每个第一查询任务的中间阶段对应的第三中间数据;
[0027]确定每个所述第三中间数据的查询频次;
[0028]将大于预设频次的所述查询频次对应的第三中间数据,确定为所述第一中间数据。
[0029]在一实施例中,还包括:
[0030]获取目标参数,所述目标参数包括当前时间点或所述数据查询装置的当前计算资源;
[0031]在所述当前时间点处于预设时间段和/或所述当前计算资源小于预设阈值时,确定所述数据查询装置的状态为空闲状态。
[0032]在另一方面,本专利技术还提供一种数据查询装置,包括:
[0033]获取模块,用于在数据查询装置的状态为空闲状态时,获取各个第一中间数据,所述第一中间数据是已执行的第一查询任务的中间阶段的输出数据,所述中间阶段位于所述第一查询任务的初始阶段之后;
[0034]构建模块,用于根据各个所述第一中间数据构建物化视图;
[0035]所述获取模块,还用于在所述数据查询装置的状态由所述空闲状态转换为繁忙状态时,停止构建所述物化视图,并获取第二查询任务,并从所述物化视图中获取所述第二查询任务对应的第二中间数据。
[0036]在另一方面,本专利技术还提供一种数据查询设备,包括:存储器以及处理器;
[0037]所述存储器存储计算机执行指令;
[0038]所述处理器执行所述存储器存储的计算机执行指令,使得所述处理器执行如上所述的数据查询方法。
[0039]在另一方面,本专利技术还提供一种计算机可读存储介质,所述计算机可读存储介质中存储有计算机执行指令,所述计算机执行指令被处理器执行时用于实现如上所述的数据
查询方法。
[0040]本专利技术提供的数据查询方法、装置、设备和计算机可读存储介质,在数据查询装置的状态为空闲状态时,获取各个第一中间数据,并根据各个第一中间数据构建物化视图,而在到数据查询装置的状态由空闲状态切换为繁忙状态时,停止构建物化视图,并获取查询任务,且在物化视图中获取查询任务所对应的中间数据。本专利技术中,在数据查询装置空闲时构建物化视图,而在数据查询装置繁忙时,停止构建物化视图以便于及时的从物化视图中查询数据,避免等待物化视图构建完成再进行数据查询,提高了数据的查询效率;此外,用于构建物化视图的数据是已执行的查询任务的中间阶段所输出的数据,在执行查询任务时,可以直接获取中间阶段输出的数据,也即查询任务的执行从初始阶段跳转到中间阶段,进一步提高了数据的查询效率。
附图说明
[0041]此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本公开的实施例,并与说明书一起用于解释本公开的原理。
[0042]图1为本专利技术数据查询方法涉及的应用场景图;
[0043]图2为本专利技术数据查询方法第一实施例的流程示意图;
[0044]图3为本专利技术数据查询方法第二实施例的流程示意图;
[0045]图4为本专利技术数据查询方法第三实施例的流程示意图;
[0046]图5为本专利技术数据查询方法第四实施例的流程示意图;
[0047]图6为本专利技术数据查询系统的模块示意图;
[0048]图7为本专利技术数据查询装置的硬件结构示意图。本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种数据查询方法,其特征在于,应用于数据查询装置,包括:在所述数据查询装置的状态为空闲状态时,获取各个第一中间数据,所述第一中间数据是已执行的第一查询任务的中间阶段的输出数据,所述中间阶段位于所述第一查询任务的初始阶段之后;根据各个所述第一中间数据构建物化视图;在所述数据查询装置的状态由所述空闲状态转换为繁忙状态时,停止构建所述物化视图,并获取第二查询任务;从所述物化视图中获取所述第二查询任务对应的第二中间数据。2.根据权利要求1所述的数据查询方法,其特征在于,所述根据各个所述第一中间数据构建物化视图的步骤包括;确定每个所述第一中间数据对应的待建立节点的目标权重;根据所述目标权重,在各个所述待建立节点中确定各个目标节点;根据各个所述目标节点构建物化视图。3.根据权利要求2所述的数据查询方法,其特征在于,所述确定每个所述第一中间数据对应的待建立节点的目标权重的步骤包括:根据所述第一中间数据的数据量确定所述第一中间数据对应的待建立节点的生成时长,并根据所述生成时长确定待建立节点的第一权重;在各个所述待建立节点中,确定每个所述待建立节点相似的节点;根据所述待建立节点的相似的节点的数量确定权重修改值;根据所述待建立节点对应的权重修改值,修正所述待建立节点对应的第一权重,得到所述待建立节点对应的目标权重。4.根据权利要求3所述的数据查询方法,其特征在于,所述根据所述目标权重,在各个所述待建立节点中确定各个目标节点的步骤包括:获取所述数据查询装置处于空闲状态的预测时长;根据所述预测时长、所述目标权重以及所述待建立节点的生成时长,在各个所述待建立节点中确定目标节点,各个所述目标节点的生成时长之和小于或等于所述预测时长,且所述目标节点对应的目标权重大于第一节点的目标权重,所述第一节点是未确定为目标节点的所述待建立节点。5.根据权利要求3所述的数据查询方法,其特征在于,所述根据各个所述目标节点构建物化视图的步骤包括:将具有关联关系的所述目标节点进行连接...

【专利技术属性】
技术研发人员:谷兰芝
申请(专利权)人:中国农业银行股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1