数据仓库加工方法、系统、电子设备及存储介质技术方案

本发明专利技术涉及计算机技术领域，尤其涉及一种数据仓库加工方法、系统、电子设备及存储介质，该方法包括：基于数据仓库的数据源的元数据和预设的目标语法，对原始脚本进行智能补全，以生成数据仓库脚本，原始脚本为用户通过可视化界面输入的脚本数据；将多个数据仓库脚本拼接成目标工作流，目标工作流为用户在可视化界面通过拖拉拽的方式拼接而成的；接收调度任务配置信息，调度任务配置信息为用户输入或选择的信息；基于调度任务配置信息，生成工作流调度任务；通过对目标工作流及工作流调度任务进行部署与上线，以完成数据仓库加工；该方法能够较好地实现对数据仓库脚本的创建，并通过利用工作流调度任务，实现对数据仓库的逐层加工，成本较低。

【技术实现步骤摘要】

本专利技术涉及计算机，尤其涉及一种数据仓库加工方法、系统、电子设备及存储介质。

技术介绍

1、随着数据化时代的来临，企业在生产和运营过程中，会产生大量数据，这些数据由于建设或产生的时期不同，因此，通常独立存储于不同种类的数据库中，形成数据孤岛，导致企业无法对其数据资产直接进行盘点。对于这种情况，需要使用集中式的数据仓库对这些数据进行统一加工处理。

2、目前，通常通过编写数据仓库脚本，并对数据仓库脚本进行定期执行，从而完成数据仓库开发或加工。然而，此种方式存在以下缺陷：一、这些编写的数据仓库脚本往往缺乏先后执行顺序，导致无法对数据仓库进行逐层脚本加工；二、当需要对数据仓库进行更改或调整时，传统的做法需要对全部的数据仓库脚本进行更改，操作较为复杂，且缺乏变更记录，导致无法快速使用数据仓库脚本的最新版本。

技术实现思路

1、本专利技术提供一种数据仓库加工方法、系统、电子设备及存储介质，以解决现有技术中编写的数据仓库脚本往往缺乏先后执行顺序，导致无法对数据仓库进行逐层脚本加工的问题。</p>

2、本专本文档来自技高网...

【技术保护点】

1.一种数据仓库加工方法，其特征在于，包括：

2.根据权利要求1所述的数据仓库加工方法，其特征在于，基于数据仓库的数据源的元数据和预设的目标语法，对原始脚本进行智能补全，以生成数据仓库脚本的步骤之后还包括：

3.根据权利要求1所述的数据仓库加工方法，其特征在于，将多个所述数据仓库脚本拼接成目标工作流的步骤包括：

4.根据权利要求1至3任一项所述的数据仓库加工方法，其特征在于，将多个所述数据仓库脚本拼接成目标工作流的步骤之后，还包括：

5.根据权利要求1所述的数据仓库加工方法，其特征在于，基于所述调度任务配置信息，生成工作流调度任务的步骤包括...

【技术特征摘要】

1.一种数据仓库加工方法，其特征在于，包括：

2.根据权利要求1所述的数据仓库加工方法，其特征在于，基于数据仓库的数据源的元数据和预设的目标语法，对原始脚本进行智能补全，以生成数据仓库脚本的步骤之后还包括：

3.根据权利要求1所述的数据仓库加工方法，其特征在于，将多个所述数据仓库脚本拼接成目标工作流的步骤包括：

4.根据权利要求1至3任一项所述的数据仓库加工方法，其特征在于，将多个所述数据仓库脚本拼接成目标工作流的步骤之后，还包括：

5.根据权利要求1所述的数据仓库加工方法，其特征在于，基于所述调度任务配置信息，生成工作流调度任务的步骤包括：

6.根据权利要求1所述的数据仓库加工方法，其特征在于，通过对所...

【专利技术属性】
技术研发人员：王晓虎，唐冬晴，
申请(专利权)人：广域铭岛数字科技有限公司，
类型：发明
国别省市：