数据查询方法、装置、设备、计算机可读介质和程序产品制造方法及图纸

技术编号:35737547 阅读:15 留言:0更新日期:2022-11-26 18:40
本公开的实施例公开了数据查询方法、装置、设备、计算机可读介质和程序产品。该方法的一具体实施方式包括:获取数据查询时间范围;确定时间与主键关系表中是否存在与该数据查询时间范围相对应的至少一个主键组,其中,该时间与主键关系表为基于待查询数据表中至少一个目标数据生成的表,该至少一个目标数据为对应时间为至少一个目标时间点的数据;响应于确定存在该至少一个主键组,根据该至少一个主键组,从该待查询数据表中查找出所需数据集。该实施方式与大数据有关,可以快捷、高效地从待查找数据表中查找出所需数据。待查找数据表中查找出所需数据。待查找数据表中查找出所需数据。

【技术实现步骤摘要】
数据查询方法、装置、设备、计算机可读介质和程序产品


[0001]本公开的实施例涉及计算机
,具体涉及数据查询方法、装置、设备、计算机可读介质和程序产品。

技术介绍

[0002]当前,数据库已经广泛的应用于各个领域。对于海量数据的存储和访问,大多都是通过数据库来进行的。对于针对数据库中的海量数据的数据查询,通常采用的方式:首先,对数据库进行分库分表处理。然后,在处理后的数据库中查找对应数据。
[0003]然而,专利技术人发现,当采用上述方式来进行数据查询,经常会存在如下技术问题:
[0004]针对海量数据,即使对数据库分库分表处理,仍存在查询速度较慢的问题。除此之外,对数据库分库分表,存在数据库部署和维护所需成本较高的问题。
[0005]该
技术介绍
部分中所公开的以上信息仅用于增强对本专利技术构思的背景的理解,并因此,其可包含并不形成本国的本领域普通技术人员已知的现有技术的信息。

技术实现思路

[0006]本公开的内容部分用于以简要的形式介绍构思,这些构思将在后面的具体实施方式部分被详细描述。本公开的内容部分并不旨在标识要求保护的技术方案的关键特征或必要特征,也不旨在用于限制所要求的保护的技术方案的范围。
[0007]本公开的一些实施例提出了数据查询方法、装置、设备、计算机可读介质和程序产品,来解决以上
技术介绍
部分提到的技术问题。
[0008]第一方面,本公开的一些实施例提供了一种数据查询方法,包括:获取数据查询时间范围;确定时间与主键关系表中是否存在与上述数据查询时间范围相对应的至少一个主键组,其中,上述时间与主键关系表为基于待查询数据表中至少一个目标数据生成的表,上述至少一个目标数据为对应时间为至少一个目标时间点的数据;响应于确定存在上述至少一个主键组,根据上述至少一个主键组,从上述待查询数据表中查找出所需数据集。
[0009]可选地,上述方法还包括:将上述所需数据集进行存储。
[0010]可选地,上述方法还包括:响应于接收到针对上述数据查询时间范围的数据查询请求,将所存储的上述所需数据集发送至数据请求端。
[0011]可选地,上述根据上述至少一个主键组,从上述待查询数据表中查找出所需数据集,包括:对于上述至少一个主键组中的每个主键组,执行主键处理步骤:将上述主键组中的数值小的主键减去第一数值,以及将上述主键组中数值大的主键加上第二数值,得到处理后主键组;确定处于两个处理后主键之间的主键集,其中,上述两个处理后主键为上述处理后主键组所包括的两个主键;从上述待查询数据表中查找出与上述主键集相对应的数据集,作为查找数据集;根据所得到的查询数据集组,确定上述所需数据集。
[0012]可选地,上述至少一个目标时间点是基于至少一个时间点确定的时间点,上述至少一个时间点是基于预设时间粒度确定的时间点;以及上述将上述所需数据集进行存储,
包括:对于上述所需数据集中的每个所需数据,执行键值对数据生成步骤:确定上述所需数据对应的时间点;将上述时间点作为键,上述所需数据作为值,生成针对上述所需数据的键值对数据;将所得到的键值对数据集进行暂时性存储。
[0013]可选地,上述时间与主键关系表通过以下步骤构建:通过预设时间粒度,确定至少一个时间点;根据上述至少一个时间点,从上述待查询数据表中的各个数据对应的各个时间点中筛选出满足预设时间条件的时间点,作为目标时间点,得到至少一个目标时间点,上述至少一个时间点与上述至少一个目标时间点存在一一对应关系;对于上述至少一个目标时间点中的每个目标时间点,执行时间与主键关系数据生成步骤:确定上述目标时间点对应数据所包括的主键;确定上述目标时间点对应的、上述至少一个时间点中的时间点;根据上述主键和上述时间点,生成针对上述目标时间点对应数据的时间与主键关系数据;根据所得到的时间与主键关系数据集,生成上述时间与主键关系表。
[0014]可选地,上述方法还包括:响应于确定不存在至少一个主键组,从上述待查询数据表中查询上述至少一个主键组,以及将针对上述至少一个主键组的至少一个时间与主键关系数据组写入上述时间与主键关系表。
[0015]可选地,上述待查询数据表为对上述全量数据表进行分库分表处理后的子数据表。
[0016]可选地,上述全量数据表通过以下步骤分库分表处理:确定上述全量数据表对应的各个字段中的待分库字段和待分表字段;根据上述待分库字段,对上述全量数据表进行分库处理,得到分库数据表集;根据上述待分表字段,对上述分库数据表集中的每个分库数据表进行分表处理,以生成分表后数据表集,得到分表后数据表集组。
[0017]第二方面,本公开的一些实施例提供了一种数据查询装置,包括:获取单元,被配置成获取数据查询时间范围;确定单元,被配置成确定时间与主键关系表中是否存在与上述数据查询时间范围相对应的至少一个主键组,其中,上述时间与主键关系表为基于待查询数据表中至少一个目标数据生成的表,上述至少一个目标数据为对应时间为至少一个目标时间点的数据;查找单元,被配置成响应于确定存在上述至少一个主键组,根据上述至少一个主键组,从上述待查询数据表中查找出所需数据集。
[0018]可选地,上述装置还包括:将上述所需数据集进行存储。
[0019]可选地,上述装置还包括:响应于接收到针对上述数据查询时间范围的数据查询请求,将所存储的上述所需数据集发送至数据请求端。
[0020]可选地,查找单元可以进一步被配置成:对于上述至少一个主键组中的每个主键组,执行主键处理步骤:将上述主键组中的数值小的主键减去第一数值,以及将上述主键组中数值大的主键加上第二数值,得到处理后主键组;确定处于两个处理后主键之间的主键集,其中,上述两个处理后主键为上述处理后主键组所包括的两个主键;从上述待查询数据表中查找出与上述主键集相对应的数据集,作为查找数据集;根据所得到的查询数据集组,确定上述所需数据集。
[0021]可选地,上述至少一个目标时间点是基于至少一个时间点确定的时间点,上述至少一个时间点是基于预设时间粒度确定的时间点;以及存储单元可以进一步被配置成:对于上述所需数据集中的每个所需数据,执行键值对数据生成步骤:确定上述所需数据对应的时间点;将上述时间点作为键,上述所需数据作为值,生成针对上述所需数据的键值对数
据;将所得到的键值对数据集进行暂时性存储。
[0022]可选地,上述时间与主键关系表通过以下步骤构建:通过预设时间粒度,确定至少一个时间点;根据上述至少一个时间点,从上述待查询数据表中的各个数据对应的各个时间点中筛选出满足预设时间条件的时间点,作为目标时间点,得到至少一个目标时间点,上述至少一个时间点与上述至少一个目标时间点存在一一对应关系;对于上述至少一个目标时间点中的每个目标时间点,执行时间与主键关系数据生成步骤:确定上述目标时间点对应数据所包括的主键;确定上述目标时间点对应的、上述至少一个时间点中的时间点;根据上述主键和上述时间点,生成针对上述目标时间点对应数据的时间与主键关系数据;根据所得到的时间本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种数据查询方法,包括:获取数据查询时间范围;确定时间与主键关系表中是否存在与所述数据查询时间范围相对应的至少一个主键组,其中,所述时间与主键关系表为基于待查询数据表中至少一个目标数据生成的表,所述至少一个目标数据为对应时间为至少一个目标时间点的数据;响应于确定存在所述至少一个主键组,根据所述至少一个主键组,从所述待查询数据表中查找出所需数据集。2.根据权利要求1所述的方法,其中,所述方法还包括:将所述所需数据集进行存储。3.根据权利要求2所述的方法,其中,所述方法还包括:响应于接收到针对所述数据查询时间范围的数据查询请求,将所存储的所述所需数据集发送至数据请求端。4.根据权利要求1所述的方法,其中,所述根据所述至少一个主键组,从所述待查询数据表中查找出所需数据集,包括:对于所述至少一个主键组中的每个主键组,执行主键处理步骤:将所述主键组中的数值小的主键减去第一数值,以及将所述主键组中数值大的主键加上第二数值,得到处理后主键组;确定处于两个处理后主键之间的主键集,其中,所述两个处理后主键为所述处理后主键组所包括的两个主键;从所述待查询数据表中查找出与所述主键集相对应的数据集,作为查找数据集;根据所得到的查询数据集组,确定所述所需数据集。5.根据权利要求2所述的方法,其中,所述至少一个目标时间点是基于至少一个时间点确定的时间点,所述至少一个时间点是基于预设时间粒度确定的时间点;以及所述将所述所需数据集进行存储,包括:对于所述所需数据集中的每个所需数据,执行键值对数据生成步骤:确定所述所需数据对应的时间点;将所述时间点作为键,所述所需数据作为值,生成针对所述所需数据的键值对数据;将所得到的键值对数据集进行暂时性存储。6.根据权利要求1所述的方法,其中,所述时间与主键关系表通过以下步骤构建:通过预设时间粒度,确定至少一个时间点;根据所述至少一个时间点,从所述待查询数据表中的各个数据对应的各个时间点中筛选出满足预设时间条件的时间点,作为目标时间点,得到至少一个目标时间点,所述至少一个时间点与所述至少一个目标时间点存在一一对应关系;对于所述至少一个目标时间点中的每个目标时间点,执行时间与主键关...

【专利技术属性】
技术研发人员:薛宏伟
申请(专利权)人:北京京东乾石科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1