一种用于数据仓库的数据处理方法、装置及电子设备制造方法及图纸

技术编号:32858114 阅读:30 留言:0更新日期:2022-03-30 19:32
本公开涉及数据仓库技术领域,提供了一种用于数据仓库的数据处理方法、装置及电子设备。该方法包括:拉取业务库的数据;基于该数据,确定该业务库的变化;基于该业务库的变化,对数据仓库的中间库和成果库做出改变,构建得到目标数据仓库,该数据仓库的数据源包括从该业务库拉取的数据。本公开使得拉取业务库中数据的数据仓库能够及时对业务库的变化做出改变,从而避免对业务需求的输出结果造成影响。从而避免对业务需求的输出结果造成影响。从而避免对业务需求的输出结果造成影响。

【技术实现步骤摘要】
一种用于数据仓库的数据处理方法、装置及电子设备


[0001]本公开涉及数据仓库
,尤其涉及一种用于数据仓库的数据处理方法、装置及电子设备。

技术介绍

[0002]数据仓库(英文为Data Warehouse)是为企业所有级别的决策制定过程,提供所有类型数据支持的战略集合。另外,在数据存储量上数据仓库相比于一般的数据库要多很多,在处理的数据量上不是同一个级别,并且,数据仓库中的数据源也可以包括其他数据库中的数据,这样使得数据仓库对该数据库存在一定的依赖性。
[0003]针对这种从其他数据获取数据源的情况,如果所获取数据的数据库发生改动,从而会影响到数据仓库需求的输出结果,导致数据仓库数据不能正常运行。因此,如何克服数据源所在数据库发生改动时导致数据仓库数据异常,是数据仓库使用过程遇到的一个技术问题。

技术实现思路

[0004]有鉴于此,本公开实施例提供了一种用于数据仓库的数据处理方法、装置及电子设备,以解决现有技术中数据源所在数据库发生改动时导致数据仓库数据异常的问题。
[0005]本公开实施例的第一方面,提本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种用于数据仓库的数据处理方法,其特征在于,包括:拉取业务库的数据;基于所述数据,确定所述业务库的变化;基于所述业务库的变化,对数据仓库的中间库和成果库做出改变,构建得到目标数据仓库,所述数据仓库的数据源包括从所述业务库拉取的数据。2.根据权利要求1所述的方法,其特征在于,所述基于所述数据,确定所述业务库的变化,包括:将当前从业务库拉取的数据的字段与数据仓库中保存的之前从所述业务库拉取的数据的字段进行比对,确定所述业务库的变化。3.根据权利要求2所述的方法,其特征在于,所述业务库的变化包括删除数据库表中的字段和新增数据库表中的字段。4.根据权利要求3所述的方法,其特征在于,所述基于所述业务库的变化,对数据仓库的中间库和成果库做出改变,包括:在所述业务库的变化为删除数据库表中的字段的情况下,对所述业务库对应的数据进行降维操作,得到新的第一维度表;基于所述第一维度表更新所述数据仓库的中间库和成果库,得到目标数据仓库。5.根据权利要求3所述的方法,其特征在于,所述基于所述业务库的变化,对数据仓库的中间库和成果库做出改变,包括:在所述业务库的变化为新增数据库表中的字段的...

【专利技术属性】
技术研发人员:付东洋齐心支涛
申请(专利权)人:北京云迹科技股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1