一种基于ETL的冷轧集控系统的多维数据集成方法及系统技术方案

本发明专利技术公开了一种基于ETL的冷轧集控系统的多维数据集成方法及系统，本发明专利技术在数据抽取的过程中，集成了不同源头的异构数据，并针对电文数据利用配置化的方式实现了实时的数据抽取，以一种低代码配置化的方式实现了数据的抽取，减少了不同系统的代码开发和数据抽取的工作量。本发明专利技术利用web页面化的调度平台进行作业任务的调度，方便版本的管理和维护，更加易用。本发明专利技术增加了大数据存储技术，针对海量数据可进行数据存储和查询，还可高效的满足不同的应用平台，实现了数据与业务贯通。

【技术实现步骤摘要】

本专利技术属于数据集成，具体涉及一种基于etl的冷轧集控系统的多维数据集成方法及系统。

技术介绍

1、冷轧是以热轧板卷为原料、经过冷加工生产出的薄板产品。冷轧产品具有质量好、光洁度高和尺寸精度高等优点，因此被广泛应用于汽车制造、家用电器等领域。

2、随着信息化和智能化的快速发展，钢铁企业信息化也得到了长足发展，建立了l1(基础自动化系统)、l2(生产过程控制系统)、mes(制造执行系统)、qms(全流程质量管控系统)、表检系统等多个应用系统。然而这些系统的数据层分散于各个网络节点，并存在于不同的硬件系统、操作系统、数据库系统，系统之间彼此独立，形成了一个个的信息孤岛。由于没有统一的数据视图，无法实现多个系统之间的信息集成，经常出现系统数据孤岛、维护困难等问题，严重阻碍了信息的全面获取，阻碍了钢铁企业数字化的进一步发展，从而降低了生产企业的生产效率。

技术实现思路

1、本专利技术的目的在于克服现有技术之缺陷，针对冷轧厂多个业务数据信息孤立、无法统一维护、无法实现多个数据的有效集成、无法实现数据信息共本文档来自技高网...

【技术保护点】

1.一种基于ETL的冷轧集控系统的多维数据集成方法，其特征在于，包括：

2.如权利要求1所述的一种基于ETL的冷轧集控系统的多维数据集成方法，其特征在于，所述不同业务系统包括不同的数据库、API接口、电文中的至少之一。

3.如权利要求2所述的一种基于ETL的冷轧集控系统的多维数据集成方法，其特征在于，在对接数据库方面，使用kettle进行数据库的数据抽取，并将抽取的数据记录到一张数据仓库表中。

4.如权利要求3所述的一种基于ETL的冷轧集控系统的多维数据集成方法，其特征在于，使用kettle进行数据库的数据抽取具体包括：使用kettle定时对数据库进行...

【技术特征摘要】

1.一种基于etl的冷轧集控系统的多维数据集成方法，其特征在于，包括：

2.如权利要求1所述的一种基于etl的冷轧集控系统的多维数据集成方法，其特征在于，所述不同业务系统包括不同的数据库、api接口、电文中的至少之一。

3.如权利要求2所述的一种基于etl的冷轧集控系统的多维数据集成方法，其特征在于，在对接数据库方面，使用kettle进行数据库的数据抽取，并将抽取的数据记录到一张数据仓库表中。

4.如权利要求3所述的一种基于etl的冷轧集控系统的多维数据集成方法，其特征在于，使用kettle进行数据库的数据抽取具体包括：使用kettle定时对数据库进行数据增量抽取。

5.如权利要求2所述的一种基于etl的冷轧集控系统的多维数据集成方法，其特征在于，在对接api接口方面，首先利用rest client组件配置对应的url、请求方式和返回结果；其次利用json组件配置相应的字段内...

【专利技术属性】
技术研发人员：冯莉，贺小国，康郑宇，刘送杰，林萍，
申请(专利权)人：中冶南方工程技术有限公司，
类型：发明
国别省市：