数据处理方法技术

本发明专利技术提供一种数据处理方法

【技术实现步骤摘要】
数据处理方法、装置、存储介质及电子设备


[0001]本专利技术涉及计算机
，尤其涉及一种数据处理方法
、
装置
、
存储介质及电子设备
。

技术介绍

[0002]目前，随着大数据技术
、
海量数据仓库的快速发展以及企业数据质量
、
数据成本等业务分析需求不断增大，大数据场景下的结构化查询语言
(SQL
，
Structured Query Language)
处理技术已被广泛关注，
SQL
处理技术可以提升在离线数据仓库建设的完备性
、
数据溯源的准确性以及企业数据流向的可控性，可对公司发展
、
业务决策以及架构迭代等具有深远潜在价值；但现有技术通常适用于传统型数据库，难以满足数据仓库建设以及数据分析发展要求，从而导致溯源信息
(
即各个分析指标下的目标信息集合
)
的精确性较低
。
基于此，如何获取精确性较高的各个分析指标下的目标信息集合，本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.
一种数据处理方法，其特征在于，包括：从至少一个目标数据仓库中，获取目标结构化查询数据，所述目标结构化查询数据包括多个结构化查询语句；对所述目标结构化查询数据进行语法树分析，以生成语法树；确定至少一个分析指标，并按照所述至少一个分析指标中的各个分析指标，分别从所述语法树中，提取出所述各个分析指标下的初始信息集合；分别基于所述各个分析指标下的初始信息集合，确定所述各个分析指标下的目标信息集合，所述各个分析指标下的目标信息集合用于提供相应业务分析需求的数据支持
。2.
根据权利要求1所述的方法，其特征在于，所述至少一个分析指标包括以下至少一种：表信息指标
、
字段信息指标
、
读写类型信息指标以及操作类型信息指标
。3.
根据权利要求1或2所述的方法，其特征在于，所述至少一个分析指标包括表信息指标和
/
或字段信息指标，所述按照所述至少一个分析指标中的各个分析指标，分别从所述语法树中，提取出所述各个分析指标下的初始信息集合，包括：按照所述至少一个分析指标中的各个分析指标，分别从所述语法树中，确定出所述各个分析指标下的至少一个结构化查询语句，并确定所述各个分析指标下的至少一个结构化查询语句中每个结构化查询语句的结构类型；基于所述各个分析指标下每个结构化查询语句的结构类型，确定所述各个分析指标下每个结构化查询语句对应的待提取语句，一个结构化查询语句对应至少一个待提取语句；从所述各个分析指标下的待提取语句中，分别提取出所述各个分析指标下的初始信息集合
。4.
根据权利要求3所述的方法，其特征在于，所述基于所述各个分析指标下每个结构化查询语句的结构类型，确定所述各个分析指标下每个结构化查询语句对应的待提取语句，包括：针对所述至少一个分析指标中的任一分析指标，遍历所述任一分析指标下的每个结构化查询语句，并将当前遍历的结构化查询语句作为当前结构化查询语句；若所述当前结构化查询语句的结构类型为常规操作类型，则将所述当前结构化查询语句作为所述当前结构化查询语句对应的待提取语句；若所述当前结构化查询语句的结构类型为读写混合类型，则对所述当前结构化查询语句进行拆分处理，得到拆分处理后的结构化查询语句，并将所述拆分处理后的结构化查询语句作为所述当前结构化查询语句对应的待提取语句，所述拆分处理后的结构化查询语句的结构类型为所述常规操作类型；在遍历完所述任一分析指标下的每个结构化查询语句后，得到所述任一分析指标下每个结构化查询语句对应的待提取语句
。5.
根据权利要求1或2所述的方法，其特征在于，所述分别基于所述各个分析指标下的初始信息集合，确定所述各个分析指标下的目标信息集合，包括：分别确定所述各个分析指标对应的匹配规则，一个分析指标对应的匹配规则包括相应分析指标的指标命名规则；基于所述各个分析指标对应匹...

【专利技术属性】
技术研发人员：冯春锋，赵辉，潘丹，
申请(专利权)人：度小满科技，
类型：发明
国别省市：