创建实时数据仓库的方法和装置制造方法及图纸

本发明专利技术公开了一种创建实时数据仓库的方法和装置，涉及计算机技术领域。该方法的一具体实施方式包括：根据预设的数据库配置信息，确定待接入的数据；其中，所述数据库配置信息至少包括数据库名和表名；根据所述数据库名和表名，将所述待接入的数据实时发送至不同的消息队列中；将消息队列中的待接入的数据实时存储至数据仓库表，以实现实时数据仓库。该实施方式能够快速还原线上数据库的数据，实现实时数据仓库，从而提高了数据利用率，降低了线上数据查询的压力。

【技术实现步骤摘要】
创建实时数据仓库的方法和装置
本专利技术涉及计算机
，尤其涉及一种创建实时数据仓库的方法和装置。
技术介绍
数据仓库(DataWarehouse)是为企业所有级别的决策制定过程，提供所有类型数据支持的战略集合。随着业务的逐步扩张，用户对实时数据的需求越来越高，更多的人希望可以查到实时的数据。但是，当前的数据仓库，大多存储的是按天加工的离线数据，即当天的数据只能明天才能看到，无法提供实时的数据。若需要实时的查询数据，只能通过直接查询线上数据库来实现。然而，在实现本专利技术过程中，专利技术人发现现有技术中至少存在如下问题：当查询的数据量较大时，线上查询的压力会很大。
技术实现思路
有鉴于此，本专利技术实施例提供一种创建实时数据仓库的方法和装置，能够快速还原线上数据库的数据，实现实时数据仓库，从而提高了数据利用率，并且降低了线上数据查询的压力。为实现上述目的，根据本专利技术实施例的一个方面，提供了一种创建实时数据仓库的方法，包括：根据预设的数据库配置信息，确定待接入的数据；其中，所述数据库配置信息至少包括数据库名和表名；根据所述数据库名和数据表名，将所述待接入的数据实时发送至不同的消息队本文档来自技高网...

【技术保护点】
1.一种创建实时数据仓库的方法，其特征在于，包括：根据预设的数据库配置信息，确定待接入的数据；其中，所述数据库配置信息至少包括数据库名和表名；根据所述数据库名和表名，将所述待接入的数据实时发送至不同的消息队列中；将消息队列中的待接入的数据实时存储至数据仓库表，以实现实时数据仓库。

【技术特征摘要】
1.一种创建实时数据仓库的方法，其特征在于，包括：根据预设的数据库配置信息，确定待接入的数据；其中，所述数据库配置信息至少包括数据库名和表名；根据所述数据库名和表名，将所述待接入的数据实时发送至不同的消息队列中；将消息队列中的待接入的数据实时存储至数据仓库表，以实现实时数据仓库。2.根据权利要求1所述的方法，其特征在于，根据预设的数据库配置信息，确定待接入的数据包括：根据预设的数据库配置信息，读取线上数据库中的日志，将所述日志作为待接入的数据。3.根据权利要求2所述的方法，其特征在于，所述日志的模式为行模式。4.根据权利要求2所述的方法，其特征在于，所述数据库配置信息还包括表结构信息；在将消息队列中的待接入的数据实时存储至数据库表之前，所述方法还包括：根据所述表结构信息，确定线上数据库的表结构；创建与所述表结构相同的数据仓库表。5.一种创建实时数据仓库的装置，其特征在于，包括：待接入数据确定模块，用于根据预设的数据库配置信息，确定待接入的数据；其中，所述数据库配置信息至少包括数据库名和表...

【专利技术属性】
技术研发人员：张爱芸，王科，
申请(专利权)人：北京京东尚科信息技术有限公司，北京京东世纪贸易有限公司，
类型：发明
国别省市：北京,11