数据处理方法、装置、设备、存储介质和程序产品制造方法及图纸

技术编号:42016042 阅读:19 留言:0更新日期:2024-07-16 23:09
本公开提供了一种数据处理方法、装置、设备、存储介质和程序产品,可以应用于大数据技术领域和金融领域。该方法包括:解析查询语句,得到语法树;根据语法树的来源节点,从查询语句中确定数据表查询字段;根据数据表查询字段对查询语句进行分区查询检测,得到检测结果;以及在检测结果表征查询语句不满足分区查询条件的情况下,基于分区函数更新查询语句,得到更新后的目标查询语句。

【技术实现步骤摘要】

本公开涉及大数据和金融领域,更具体地,涉及一种数据处理方法、装置、设备、介质和程序产品。


技术介绍

1、随着大数据领域的蓬勃发展,越来越多企业每天都有大量的基于数据库的数据分析需求,若有大量的查询语句触发了未包含分区函数的使用场景,则必然会影响整个分析的效率。


技术实现思路

1、鉴于上述问题,本公开提供了一种数据处理方法、装置、设备、介质和程序产品。

2、根据本公开的第一个方面,提供了一种数据处理方法,包括:解析查询语句,得到语法树;根据语法树的来源节点,从查询语句中确定数据表查询字段;根据数据表查询字段对查询语句进行分区查询检测,得到检测结果;以及在检测结果表征查询语句不满足分区查询条件的情况下,基于分区函数更新查询语句,得到更新后的目标查询语句。

3、根据本公开的实施例,根据所述数据表查询字段对所述查询语句进行分区查询检测,得到检测结果包括:根据数据表查询字段,与来源节点对应的来源字段,从数据表查询字段中确定数据表标识;基于预设分区条件对与数据表标识相对应的数据表进行分区条件检测,本文档来自技高网...

【技术保护点】

1.一种数据处理方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述根据所述数据表查询字段对所述查询语句进行分区查询检测,得到检测结果包括:

3.根据权利要求2所述的方法,其特征在于,所述根据所述数据表查询字段,与所述来源节点对应的来源字段,从所述数据表查询字段中确定数据表标识,包括:

4.根据权利要求2所述的方法,其特征在于,所述数据表满足预设分区条件包括以下至少一项:

5.根据权利要求2所述的方法,其特征在于,所述对所述查询语句进行分区函数检测,得到分区函数检测结果,包括:

6.根据权利要求2所述...

【技术特征摘要】

1.一种数据处理方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述根据所述数据表查询字段对所述查询语句进行分区查询检测,得到检测结果包括:

3.根据权利要求2所述的方法,其特征在于,所述根据所述数据表查询字段,与所述来源节点对应的来源字段,从所述数据表查询字段中确定数据表标识,包括:

4.根据权利要求2所述的方法,其特征在于,所述数据表满足预设分区条件包括以下至少一项:

5.根据权利要求2所述的方法,其特征在于,所述对所述查询语句进行分区函数检测,得到分区函数检测结果,包括:

6.根据权利要求2所述的方法,其特征在于,所述根据所述数据表查询字段,与所述条件节点对...

【专利技术属性】
技术研发人员:黄萌阳万里钱璞昕罗响
申请(专利权)人:中国工商银行股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1