一种铝/铜板带材生产全流程数据仓库构建方法技术

本发明专利技术提供一种铝/铜板带材生产全流程数据仓库构建方法，涉及数据仓库技术领域，方法包括以下步骤：获取现有的铝/铜板带材数据文件，识别铝/铜板带材数据文件的数据类型，分析数据文件类型设置导入方式，根据导入方式进行数据导入，得到迁移后的数据；将所述迁移后的数据进行分区存储，查询迁移后的数据中的不规范数据，根据不规范数据的种类确定清洗方案和清洗规则，根据清洗规则对迁移后的数据进行清洗，得到清洗后的数据；构建数据特征表，将清洗后的数据置入数据特征表中，将数据特征表中数据映射至数据仓库中。适用于完成面向铝/铜板带材生产全流程的数据集成方法，形成工业大数据集成处理标准化方案。据集成处理标准化方案。据集成处理标准化方案。

A data warehouse construction method for the whole process of aluminum / copper strip production

【技术实现步骤摘要】
一种铝/铜板带材生产全流程数据仓库构建方法


[0001]本专利技术涉及数据仓库
，尤其涉及一种铝/铜板带材生产全流程数据仓库构建方法。

技术介绍

[0002]数据仓库主要功能仍是将组织透过资讯系统之联机事务处理(OLTP)经年累月所累积的大量资料，透过数据仓库理论所特有的资料储存架构，做有系统的分析整理，以利各种分析方法如联机分析处理(OLAP)、数据挖掘(Data Mining)之进行，并进而支持如决策支持系统(DSS)、主管资讯系统(EIS)之创建，帮助决策者能快速有效的自大量资料中，分析出有价值的资讯，以利决策拟定及快速回应外在环境变动，帮助建构商业智能(BI)。随着分布式储存、分布式计算、数据仓库、数据挖掘分析等新一代大数据信息技术的融合与突破,数据仓库在整个大数据生态中，扮演着承上启下的重要作用。
[0003]综合利用数据仓库在铝/铜板带材生产全流程进行数据集成建模，不仅能高效储存具有价值的历史信息，还能够挖掘影响产品质量、生产成本、生产产量等指标的因素，形成图表结构数据，对产品质量和设备运行状态进行统计分析，并对产品质本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种铝/铜板带材生产全流程数据仓库构建方法，其特征在于，包括以下步骤：获取现有的铝/铜板带材数据文件，识别铝/铜板带材数据文件的数据类型，分析数据文件类型设置导入方式，根据导入方式进行数据导入，得到迁移后的数据；将所述迁移后的数据进行分区存储，查询迁移后的数据中的不规范数据，根据不规范数据的种类确定清洗方案和清洗规则，根据清洗规则对迁移后的数据进行清洗，得到清洗后的数据；构建数据特征表，将清洗后的数据置入数据特征表中，将数据特征表中数据映射至数据仓库中。2.根据权利要求1所述的铝/铜板带材生产全流程数据仓库构建方法，其特征在于，所述分析数据文件类型设置导入方式包括以下步骤：判断预导入文件的类型，根据文件类型的不同采取相应的策略进行导入；判断预导入文件中数据的属性，根据数据属性的不同采取相应策略进行导入；根据数据生产时间的周期性，设置定时智能导入脚本将文件导入分布式文件系统中进行分区存储。3.根据权利要求2所述的铝/铜板带材生产全流程数据仓库构建方法，其特征在于，所述根据清洗规则...

【专利技术属性】
技术研发人员：刘士新，姚明昊，陈大力，温睿，赵梓焱，
申请(专利权)人：东北大学，
类型：发明
国别省市：