一种工作流管理方法及装置制造方法及图纸

本发明专利技术适用于能源数据处理技术领域，提供一种工作流管理方法及装置，方法包括：对能源数据进行第一数据处理，以获取新加载数据，并将所述新加载数据写入细节数据表；对所述细节数据表进行第二数据处理，并将经过所述第二数据处理的数据按照能源设备类型分别加载到各基础数据表；对各所述基础数据表进行第三数据处理，并将经所述第三数据处理的数据写入各数据仓库主题；对所述数据仓库主题进行第四数据处理，并将经所述第四数据处理的数据按照业务单元分别写入各数据集市。本发明专利技术提供的工作流管理方法确保了能源数据仓库系统能自动周期性的有序执行，解决通用数据仓库无法应用于能源领域的问题，有助于形成统一、标准的数据体系。

【技术实现步骤摘要】
一种工作流管理方法及装置
本专利技术属于数据处理
，尤其涉及一种工作流管理方法及装置。
技术介绍
数据仓库是一个面向主题的、集成的、相对稳定的、反映历史变化的数据集合，用于支持管理决策。数据仓库之父BillInmon提出的企业数据仓库架构和RalphKimball提出的维度数据仓库架构是两个主流数据仓库构建方法。传统数据仓库厂商都有比较成熟的数据仓库产品，也有针对某些行业的数据模型。例如，在银行业，Teradata有自己的FS-LDM(TeradataFinancialServicesLogicalDataModel)模型，而IBM有自己的BDWM(BankingDataWarehouseModel)模型；在电信业，Teradata有自己的CLDM(TeradataCommunicationsLogicalDataModel)模型，而IBM有TDWM(TelecomDataWarehouseModel)。由于数据仓库中存在大量的数据采集、加工以及迁移等任务，并且这些任务之间存在依赖关系，为了确保数据仓库自动化周期性有序执行，需要工本文档来自技高网...

【技术保护点】
1.一种工作流管理方法，其特征在于，包括：/n对能源数据进行第一数据处理，以获取新加载数据，并将所述新加载数据写入细节数据表；/n对所述细节数据表进行第二数据处理，并将经过所述第二数据处理的数据按照能源设备类型分别加载到各基础数据表；/n对各所述基础数据表进行第三数据处理，并将经所述第三数据处理的数据写入各数据仓库主题；/n对所述数据仓库主题进行第四数据处理，并将经所述第四数据处理的数据按照业务单元分别写入各数据集市。/n

【技术特征摘要】
1.一种工作流管理方法，其特征在于，包括：
对能源数据进行第一数据处理，以获取新加载数据，并将所述新加载数据写入细节数据表；
对所述细节数据表进行第二数据处理，并将经过所述第二数据处理的数据按照能源设备类型分别加载到各基础数据表；
对各所述基础数据表进行第三数据处理，并将经所述第三数据处理的数据写入各数据仓库主题；
对所述数据仓库主题进行第四数据处理，并将经所述第四数据处理的数据按照业务单元分别写入各数据集市。


2.如权利要求1所述的工作流管理方法，其特征在于，所述对所述数据仓库主题进行第四数据处理，并将经所述第四数据处理的数据按照业务单元分别写入各数据集市步骤后，还包括：
将所述数据集市迁移至报表系统的各业务数据库中。


3.如权利要求1所述的工作流管理方法，其特征在于，所述对能源数据进行第一数据处理，以获取新加载数据，并将所述新加载数据写入细节数据表，包括：
加载数据源中的能源数据至原始数据表；
根据所述能源数据的处理时间解析所述原始数据表，确定所述原始数据表中的新加载数据；
判断所述新加载数据是否为异常数据；
若所述新加载数据不是异常数据，则对所述新加载数据进行格式转换，获取中间数据；
根据能源设备类型和获取时间对所述中间数据进行分区，将所述中间数据写入细节数据表中。


4.如权利要求3所述的工作流管理方法，其特征在于，所述细节数据表中至少包括站点信息、设备类型、设备标识、量测属性、量测时间以及量测值中的一项。


5.如权利要求1所述的工作流管理方法，其特征在于，所述对所述细节数据表进行第二数据处理，并将经过所述第二数据处理的数据按照能源设备类型分别加载到各基础数据表，包括：
根据能源设备类型对所述细节数据表中的数据进行分类，以获取每类能源设备对应的数据；
根据最小时间粒度对所述能源设备对应的数据进行时间对齐，以获取第一数据；
对所述第一...

【专利技术属性】
技术研发人员：李品新，徐锡明，黄博淘，吴建波，
申请(专利权)人：新奥数能科技有限公司，
类型：发明
国别省市：北京;11