数据库维度的处理方法及装置制造方法及图纸

本发明专利技术公开了一种数据库维度的处理方法及装置。其中，该方法包括：获取数据仓库中预先创建的第一维度表；获取分析数据库中创建的第二维度表，其中，第二维度表用于根据第一维度表进行更新以存储与第一维度表中存储的数据相同的数据；获取第二维度表中的最大数值；获取数据仓库中的最大数值；判断数据仓库中的最大数值是否大于第二维度表中的最大数值；如果数据仓库中的最大数值大于第二维度表中的最大数值，对第一维度表中数据进行更新，解决了对大维度进行加载数据处理时，处理效率低的问题，达到了提升维度表数据处理速度的效果。

【技术实现步骤摘要】
【专利摘要】本专利技术公开了一种数据库维度的处理方法及装置。其中，该方法包括：获取数据仓库中预先创建的第一维度表；获取分析数据库中创建的第二维度表，其中，第二维度表用于根据第一维度表进行更新以存储与第一维度表中存储的数据相同的数据；获取第二维度表中的最大数值；获取数据仓库中的最大数值；判断数据仓库中的最大数值是否大于第二维度表中的最大数值；如果数据仓库中的最大数值大于第二维度表中的最大数值，对第一维度表中数据进行更新，解决了对大维度进行加载数据处理时，处理效率低的问题，达到了提升维度表数据处理速度的效果。【专利说明】数据库维度的处理方法及装置
本专利技术涉及数据处理领域，具体而言，涉及一种数据库维度的处理方法及装置。
技术介绍
数据仓库是一种通用数据处理系统，可以存储一个应用领域的所有有关数据。数 据库中的数据是为众多用户所共享其信息而建立的，已经摆脱了具体程序的限制和制约。 不同的用户可以按各自的用法使用数据库中的数据，多个用户可以同时共享数据库中的数 据资源，即不同的用户可以同时存取数据库中的同一个数据。数据共享性不仅满足了各用 户对信息内容的要求，同时也满足了各用户之间信息通信的要求。 数据分析服务器（SQL Services Analysis Services,简称为SSAS)为合并数据挖 掘的解决方案提供一个集成的平台。在数据分析服务器中具有分析数据库，在分析数据库 从数据仓库里加载完所有数据后，都会将维度的层次结构进行重建，这种重建就相当于对 SQLServer数据库的一个大索引进行重建一样，性能会非常慢，对于上亿级别的维度做添加 一条数据，也不可避免的会所有的维度成员值做维度层次结构的重建，都会耗时十多分钟 以上，随着事实维度数据量的增加，维度的处理性能呈直线下降趋势。 针对相关技术中在对大维度进行加载数据处理时，处理效率低的问题，目前尚未 提出有效的解决方案。
技术实现思路
本专利技术的主要目的在于提供一种数据库维度的处理方法及装置，以解决对大维度 进行加载数据处理时，处理效率低的问题。 为了实现上述目的，根据本专利技术的一个方面，提供了一种数据库维度的处理方法。 根据本专利技术的数据库维度的处理方法包括：获取数据仓库中预先创建的第一维度 表；获取分析数据库中创建的第二维度表，其中，第二维度表用于根据第一维度表进行更新 以存储与第一维度表中存储的数据相同的数据；获取第二维度表中的最大数值；获取数据 仓库中的最大数值；判断数据仓库中的最大数值是否大于第二维度表中的最大数值；如果 数据仓库中的最大数值大于第二维度表中的最大数值，对第一维度表中数据进行更新。 进一步地，获取数据仓库中预先创建的第一维度表包括：查找数据仓库中的事实 表；获取事实表中数据的数量级，其中，事实表用于存储数据仓库中所有的指标数据；将事 实表中数据的数量级扩大至预设数量级；通过预先创建的数据表存储预设数量级的数据； 将预先创建的数据表作为第一维度表。 进一步地，获取第二维度表中的最大数值包括：查找数据仓库中的事实表；获取 事实表中的指标数据，其中，事实表用于存储数据仓库中所有的指标数据；将第二维度表中 的成员值与事实表中的指标数据建立映射关系；通过映射关系在事实表中查找第二维度表 中最大成员值数据。 进一步地，如果数据仓库中的最大数值大于第二维度表中的最大数值，对第一维 度表中数据进行更新包括：查找数据仓库中的事实表；获取事实表中数据的数量级，其中， 事实表用于存储数据仓库中所有的指标数据；将事实表中数据的数量级扩大至预设数量 级；通过预先创建的数据表存储预设数量级的数据；将预先创建的数据表作为第一维度 表；更新第一维度表数据。 进一步地，获取数据仓库中预先创建的第一维度表之前，方法还包括：检测数据仓 库中不可预估的维度表；获取不可预估的维度表；在不可预估的维度表创建相应的代理键 列；通过代理键列，创建第一维度表。 为了实现上述目的，根据本专利技术的另一方面，提供了一种数据库维度的处理装置。 该装置包括：第一获取单元，用于获取数据仓库中预先创建的第一维度表；第二获取单元， 用于获取分析数据库中创建的第二维度表，其中，第二维度表用于根据第一维度表进行更 新以存储与第一维度表中存储的数据相同的数据；第三获取单元，用于获取第二维度表中 的最大数值；第四获取单元，用于获取数据仓库中的最大数值；判断单元，用于判断数据仓 库中的最大数值是否大于第二维度表中的最大数值；更新单元，用于在数据仓库中的最大 数值大于第二维度表中的最大数值的情况下，对第一维度表中数据进行更新。 进一步地，第一获取单元包括：第一查找模块，用于查找数据仓库中的事实表；第 一获取模块，用于获取事实表中数据的数量级，其中，事实表用于存储数据仓库中所有的指 标数据；第一扩大模块，用于将事实表中数据的数量级扩大至预设数量级；第一存储模块， 用于通过预先创建的数据表存储预设数量级的数据；第一处理模块，用于将预先创建的数 据表作为第一维度表。 进一步地，第三获取单元包括：第二查找模块，用于查找数据仓库中的事实表；第 二获取模块，用于获取事实表中的指标数据，其中，事实表用于存储数据仓库中所有的指标 数据；建立模块，用于将第二维度表中的成员值与事实表中的指标数据建立映射关系；第 三查找模块，用于通过映射关系在事实表中查找第二维度表中最大成员值数据。 进一步地，更新单元包括：第三查找模块，用于查找数据仓库中的事实表；第三获 取模块，用于获取事实表中数据的数量级，其中，事实表用于存储数据仓库中所有的指标数 据；第二扩大模块，用于将事实表中数据的数量级扩大至预设数量级；第一存储模块，用于 通过预先创建的数据表存储预设数量级的数据；第一处理模块，用于将预先创建的数据表 作为第一维度表；第一更新模块，用于更新第一维度表数据。 进一步地，第一获取单元之前，装置还包括：检测模块，用于检测数据仓库中不可 预估的维度表；第四获取模块，用于获取不可预估的维度表；第一创建模块，用于在不可预 估的维度表创建相应的代理键列；第二创建模块，用于通过代理键列，创建第一维度表。 本专利技术提供的数据库维度的处理方法，通过获取数据仓库中预先创建的第一维度 表；获取分析数据库中创建的第二维度表，其中，第二维度表用于根据第一维度表进行更新 以存储与第一维度表中存储的数据相同的数据；获取第二维度表中的最大数值；获取数据 仓库中的最大数值；判断数据仓库中的最大数值是否大于第二维度表中的最大数值；如果 数据仓库中的最大数值大于第二维度表中的最大数值，对第一维度表中数据进行更新，解 决了对大维度进行加载数据处理时，处理效率低的问题，进而达到了提升维度表数据处理 速度的效果。 【专利附图】【附图说明】 构成本申请的一部分的附图用来提供对本专利技术的进一步理解，本专利技术的示意性实 施例及其说明用于解释本专利技术，并不构成对本专利技术的不当限定。在附图中： 图1是根据本专利技术的数据库维度的处理方法的第一实施例的流程图； 图2是根据本专利技术的数据库维度的处理方法的第二实施例的流程图； 图3是根据本专利技术的数据库维度的处理方法的第三实施例的流程图； 本文档来自技高网...

【技术保护点】
一种数据库维度的处理方法，其特征在于，包括：获取数据仓库中预先创建的第一维度表；获取分析数据库中创建的第二维度表，其中，所述第二维度表用于根据所述第一维度表进行更新以存储与所述第一维度表中存储的数据相同的数据；获取所述第二维度表中的最大数值；获取所述数据仓库中的最大数值；判断所述数据仓库中的最大数值是否大于所述第二维度表中的最大数值；以及如果所述数据仓库中的最大数值大于所述第二维度表中的最大数值，对所述第一维度表中数据进行更新。

【技术特征摘要】

【专利技术属性】
技术研发人员：洪超，
申请(专利权)人：北京国双科技有限公司，
类型：发明
国别省市：北京;11