一种基于指标仓库切分策略的查询方法、设备及介质技术

技术编号:43002005 阅读:24 留言:0更新日期:2024-10-15 13:29
本发明专利技术公开了一种基于指标仓库切分策略的查询方法、设备及介质,属于数据处理与分析技术领域,用于解决现有的数据库在指标量与数据量大量增长下,数据存储与查询性能下降较多,难以使相同体系下承载更多的维度指标的技术问题。方法包括:基于业务类型信息,将指标数据进行相关配置,得到专属指标体系;通过专属指标体系,对数据库的分库分表进行有关需求判断的配置,得到分库分表配置方案;根据分库分表配置方案,将数据表进行有关维度与指标下的分表组合处理,得到具有多种相关主从表的数据配置策略;将数据配置策略中的相关主从表进行增删处理,确定出新数据配置策略;对新数据配置策略进行业务需求信息的查询处理,得到业务查询结果信息。

【技术实现步骤摘要】

本申请涉及数据处理与分析,尤其涉及一种基于指标仓库切分策略的查询方法、设备及介质


技术介绍

1、在大数据时代下,企业和组织对指标仓库的日益增长的需求以及面临的挑战。随着数据量的爆炸式增长,传统的指标仓库管理方式已经难以应对,特别是在处理超大数据量时,查询性能往往成为瓶颈。

2、传统的指标仓库通常采用“大而全”的存储模式,这种模式虽然能够集中存储大量的数据,但却导致了严重的数据冗余。数据冗余不仅占用了大量的存储空间,增加了存储成本,还使得查询操作变得复杂而低效。此外,由于不同指标之间可能存在复杂的关联关系,传统的指标仓库管理方式往往难以有效地处理这些关联关系,从而影响了数据的准确性和分析效果。

3、为了解决这些问题,如数据库的分库分表技术、冷热存储策略等。但是现有已有诸如数据库分库分表、冷热数据存储等多种关键技术来解决超大数据量的检索问题,这些方法多聚焦于高效地从仓库中提取部分数据,即针对单条sql查询从海量数据中筛选所需信息。然而,当同一用户在短时间内发起大量指标查询时,传统的查询策略往往力不从心,导致查询效率低下,系统资源消耗剧本文档来自技高网...

【技术保护点】

1.一种基于指标仓库切分策略的查询方法,其特征在于,所述方法包括:

2.根据权利要求1所述的一种基于指标仓库切分策略的查询方法,其特征在于,基于业务类型信息,将多种关联指标数据进行相关配置,得到专属指标体系,具体包括:

3.根据权利要求1所述的一种基于指标仓库切分策略的查询方法,其特征在于,通过所述专属指标体系,对数据库的分库分表进行有关需求判断的配置,得到分库分表配置方案,具体包括:

4.根据权利要求3所述的一种基于指标仓库切分策略的查询方法,其特征在于,若需要进行数据分表处理且需要进行分库存储处理,则构建出所述数据分表与所述分库存储之间的关联关系。...

【技术特征摘要】

1.一种基于指标仓库切分策略的查询方法,其特征在于,所述方法包括:

2.根据权利要求1所述的一种基于指标仓库切分策略的查询方法,其特征在于,基于业务类型信息,将多种关联指标数据进行相关配置,得到专属指标体系,具体包括:

3.根据权利要求1所述的一种基于指标仓库切分策略的查询方法,其特征在于,通过所述专属指标体系,对数据库的分库分表进行有关需求判断的配置,得到分库分表配置方案,具体包括:

4.根据权利要求3所述的一种基于指标仓库切分策略的查询方法,其特征在于,若需要进行数据分表处理且需要进行分库存储处理,则构建出所述数据分表与所述分库存储之间的关联关系。

5.根据权利要求1所述的一种基于指标仓库切分策略的查询方法,其特征在于,根据所述分库分表配置方案,将数据表进行有关维度与指标下的分表组合处理,得到具有多种相关主从表的数据配置策略,具体包括:

6.根据权利要求...

【专利技术属性】
技术研发人员:郑伟波王旭
申请(专利权)人:浪潮通用软件有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1