一种多源数据转换服务方法及其装置制造方法及图纸

本发明专利技术涉及一种多源数据转换服务方法及其装置，其中：装置包括数据源接口模块、数据导入模块、数据清洗模块、数据转换模块、统一数据结构模块、统一存储类型模块、统一导出接口模块和灵活导出设置模块。本发明专利技术具有下列优点：１）用独立的装置专门负责如电力调度中心中的各类高级应用系统与各类基本业务系统的数据交换工作，提高数据转换的效率，保证数据转换的正确性和及时性；２）各高级应用系统只需从数据转换服务装置中获取数据，省去了复杂的数据转换工作量，节省了开发成本、维护成本；３）将高级应用系统与数据转换分离，节约了硬件资源，提高了应用系统的运行效率和运行稳定性。

【技术实现步骤摘要】

本专利技术涉及一种高级应用系统(如决策支持、数据挖掘、报表统计等系统)与基本业务系统(如进、销、存系统，管理信息系统，办公自动化系统)之间的数据交换技术，尤其涉及电力、电信、金融、航空、零售等行业系统信息化管理中用以提高数据转换的效率、降低高级应用系统的开发维护成本、节约硬件和网络资源的多源数据转换服务方法及其装置。
技术介绍
当前，电力系统的调度通信中心，已建立了以能量管理系统EMS(EnergyManagement System)、调度信息管理系统DMIS(Dispatching Management InformationSystem)、电力市场运营系统等为代表的基本业务系统。除了这些基本业务系统，电力系统的调度通信中心(简称：电力调度中心)各个部门为了满足具体的工作需要，还需在以上基本业务系统的基础上，针对特定需求建立一些较为高级的应用系统，如可视化监视系统、模拟仿真系统、数据分析系统、报表系统、数据挖掘系统等。这些高级应用系统所需的数据，往往源自一个或多个基本业务系统。因此，在建立高级应用系统的过程中，如何从多个基本业务系统采集、清洗、转换数据，即数据集成工作，是一个必须本文档来自技高网...

【技术保护点】
一种多源数据转换服务装置，其特征在于：它包括依次连接的数据源接口模块、数据导入模块、数据清洗模块、数据转换模块、统一数据结构模块、统一存储类型模块、统一导出接口模块和灵活导出设置模块，其中：　数据源接口模块，用于根据各类基本业务系统的 数据库类型，集成适用于访问各类数据库的接口；　数据导入模块，用于负责导入各基本业务系统的数据。包括：根据各高级应用程序的数据需求，确定待导入数据内容；选择特定数据接口，访问基本业务数据库，导入数据；　数据清洗模块，用于处理坏数据 ，包括：根据各基本业务系统的数据特点和数据内容，确定坏数据处理的具体方法；对导入数据进行全面检验，识别...

【技术特征摘要】
1.一种多源数据转换服务装置，其特征在于：它包括依次连接的数据源接口模块、数据导入模块、数据清洗模块、数据转换模块、统一数据结构模块、统一存储类型模块、统一导出接口模块和灵活导出设置模块，其中：数据源接口模块，用于根据各类基本业务系统的数据库类型，集成适用于访问各类数据库的接口；数据导入模块，用于负责导入各基本业务系统的数据。包括：根据各高级应用程序的数据需求，确定待导入数据内容；选择特定数据接口，访问基本业务数据库，导入数据；数据清洗模块，用于处理坏数据，包括：根据各基本业务系统的数据特点和数据内容，确定坏数据处理的具体方法；对导入数据进行全面检验，识别坏数据；根据事先拟定的坏数据处理方法，对数据进行修补处理；数据转换模块，根据各数据源不同的数据库类型和对应不同的数据存储格式，将数据格式转换为统一的数据格式；统一数据结构模块，用于根据各数据源的数据表结构不同，重新统一数据结构，便于存储和识别；统一存储类型模块，用于为满足运行在不同操作系统、不同数据库程序下的各类高级应用程序的数据需求，将数据存储类型统一为跨平台的文本格式，并设计文本数据库的读写规则；统一导出接口模块，用于负责提供存储的文本数据库数据导出的统一接口，满足各高级应用的不同数据接口需求；灵活导出设置模块，用于根据各高级应用系统的需要，灵活设置导出数据的内容、导出目的地和导出时间，负责数据的定期自动导出。2.根据权利要求1所述的多源数据转换服务装置，其特征在于：所述数据转换模块的转换内容包括：数字类格式的转换、文本类格式的转换、日期类格式的转换或指定类型格式的转换。3.根据权利要求1所述的多源数据转换服务装置，其特征在于：所述统一数据结构模块统一的数据结构的内容包括：时间维度、各分类维度、数...

【专利技术属性】
技术研发人员：王治华，李瑞庆，刘敦楠，何光宇，陈雪青，
申请(专利权)人：上海市电力公司，清华大学，
类型：发明
国别省市：31[中国|上海]