一种数据集成系统及数据集成方法技术方案

本发明专利技术公开了一种数据集成系统及数据集成方法，包括互联网服务器和数据源，所述数据源以电信号传输的方式连接有数据检测模块，所述数据检测模块以电信号传输的方式连接有数据采集模块，所述数据采集模块以电信号传输的方式连接有数据加工模块，所述数据加工模块以电信号传输的方式连接有数据应用模块，所述数据应用模块以电信号传输的方式连接有用户终端，该一种数据集成系统及数据集成方法，该系统可通过数据源对以不同形式接收的数据进行管理和容纳，并且数据检测模块在对数据检测时，可通过告警单元发出警报至用户终端，同时通过防火墙单元在数据源中的网络进行安全防护。护。护。

【技术实现步骤摘要】
一种数据集成系统及数据集成方法


[0001]本专利技术涉及数据集成
，具体为一种数据集成系统及数据集成方法。

技术介绍

[0002]近几十年来，科学技术的迅猛发展和信息化的推进，使得人类社会所积累的数据量已经超过了过去5000年的总和，数据的采集、存储、处理和传播的数量也与日俱增。企业实现数据共享，可以使更多的人更充分地使用已有数据资源，减少资料收集、数据采集等重复劳动和相应费用。但是在实施数据共享的过程当中，由于不同用户提供的数据可能来自不同的途径，其数据内容、数据格式和数据质量千差万别，有时甚至会遇到数据格式不能转换或数据转换格式后丢失信息等棘手问题，严重阻碍了数据在各部门和各软件系统中的流动与共享。因此，如何对数据进行有效的集成管理已成为增强企业商业竞争力的必然选择，而数据集成系统可把不同来源、格式、特点性质的数据在逻辑上或物理上有机地集中，从而为企业提供全面的数据共享，数据集成通常采用联邦式、基于中间件模型和数据仓库等方法来构造集成的系统，这些技术在不同的着重点和应用上解决数据共享和为企业提供决策支持，联邦数据库系统由半自治数据库系统构成，相互之间分享数据，联盟各数据源之间相互提供访问接口，同时联盟数据库系统可以是集中数据库系统或分布式数据库系统及其他联邦式系统，中间件模式通过统一的全局数据模型来访问异构的数据库、遗留系统、Web资源等，中间件位于异构数据源系统和应用程序之间，向下协调各数据源系统，向上为访问集成数据的应用提供统一数据模式和数据访问的通用接口，数据仓库是在企业管理和决策中面向主题的、集成的、与时间相关的和不可修改的数据集合。
[0003]在企业中，由于开发时间或开发部门的不同，往往有多个异构的、运行在不同的软硬件平台上的信息系统同时运行，这些系统的数据源彼此独立、相互封闭，使得数据难以在系统之间交流、共享和融合，并且在接受数据的过程中，数据中可能携带对系统造成威胁的病毒，不及时对病毒进行处理容易造成系统瘫痪。
[0004]所以需要针对上述问题设计一种数据集成系统及数据集成方法。

技术实现思路

[0005]本专利技术的目的在于提供一种数据集成系统及数据集成方法，以解决上述
技术介绍
中提出的问题。
[0006]为实现上述目的，本专利技术提供如下技术方案：一种数据集成系统及数据集成方法，包括互联网服务器和数据源，所述数据源以电信号传输的方式连接有数据检测模块，所述数据检测模块以电信号传输的方式连接有数据采集模块，所述数据采集模块以电信号传输的方式连接有数据加工模块，所述数据加工模块以电信号传输的方式连接有数据应用模块，所述数据应用模块以电信号传输的方式连接有用户终端，所述数据源、数据检测模块、数据采集模块、数据加工模块、数据应用模块和用户终端分别与互联网服务器以电信号传输的方式连接。
[0007]优选的，所述数据检测模块包括告警单元、数据监控单元和防火墙单元，且告警单元、数据监控单元和防火墙单元三者之间均设置为电信号连接，告警单元用于对数据中存在的风险进行预警通知，数据监控单元用于对数据源中的数据进行实时监测，防火墙单元用于对数据源中的网络进行安全防护，构件一道相对隔绝的保护屏障。
[0008]优选的，所述数据源中的数据是从不同来源、格式中获取，用于管理和配置接收的所有数据，而数据检测模块则是对数据源中接收到的数据进行检测，数据检测模块需要特定的权限才能打开进行调试和编辑，且防火墙单元始终处于打开的状态，为系统内外网进行安全防护。
[0009]优选的，所述数据采集模块用于对检测后的数据进行接收和管理，且数据采集模块包括数据采集单片机分机、主机、无线传输单元和PC接口组成，可完成多通道的实时数据采集，并可以对数据进行存贮以构成设备运行档案。
[0010]优选的，所述数据加工模块包括数据转换单元、数据清洗单元和数据加载单元，数据加工模块用于对采集到的数据进行进一步优化处理，其中数据转换单元可将不同形式的数据转化为同一种表现形式的数据进行使用，数据清洗单元可发现并纠正数据文件中可识别的错误，数据加载单元可对数据较多的存储盘进行加载。
[0011]优选的，所述数据应用模块包括统一报表系统和统一查询系统，数据应用模块用于对处理归纳好的数据进行不同功能的提取使用，其中统一报表系统用于对处理好的相关数据进行提取归纳制成表格，统一查询系统则是对数据资料中想要查询的资料进行寻找并列出。
[0012]该集成系统的工作方法包括以下步骤：
[0013]步骤一：通过数据源对各种不同形式的数据进行接收并储存；
[0014]步骤二：数据检测模块则对接收的数据进行检测，其中数据监控单元可对接收的数据进行实时监测，若数据中携带病毒，可通过告警单元发出警报至用户终端，同时通过防火墙单元在数据源中的网络进行安全防护，构件一道相对隔绝的保护屏障；
[0015]步骤三：数据采集模块则对检测后的数据进行接收和管理；
[0016]步骤四：数据加工模块则对采集到的数据进行进一步优化处理，包括对数据进行转换、清洗和加载；
[0017]步骤五：数据应用模块则对加工后的数据对处理归纳好的数据形成不同功能的使用单元，可对数据进行报表提取和信息查询；
[0018]步骤六：用户可通过用户终端对数据进行分析提取使用。
[0019]与现有技术相比，本专利技术的有益效果是：该一种数据集成系统及数据集成方法，
[0020]该系统可通过数据源对以不同形式接收的数据进行管理和容纳，通过数据检测模块对接收的数据进行检测，数据采集模块则对检测后的数据进行接收和管理，数据加工模块则对采集到的数据进行进一步优化处理，数据应用模块则对加工后的数据对处理归纳好的数据形成不同功能的使用单元，可对数据进行报表提取和信息查询，并且数据检测模块在对数据检测时，可通过告警单元发出警报至用户终端，同时通过防火墙单元在数据源中的网络进行安全防护。
附图说明
[0021]图1为本专利技术的结构框图；
[0022]图2为本专利技术数据检测模块的结构框图；
[0023]图3为本专利技术数据加工模块的结构框图；
[0024]图4为本专利技术数据应用模块的结构框图。
具体实施方式
[0025]下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。
[0026]实施例一
[0027]步骤一：首先通过数据源对各种不同形式的数据进行接收并储存；
[0028]步骤二：数据源接收的数据种类较多，且以不同形式的方式存在，数据检测模块则对接收的数据进行检测，其中数据监控单元可对接收的数据进行实时监测，观察数据中是否携带病毒性数据，若数据中携带病毒，可通过告警单元发出警报至用户终端，用户在发现后可控制数据源将该类数据从数据源中移除，同时通过防火墙单元本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种数据集成系统，包括互联网服务器和数据源，其特征在于：所述数据源以电信号传输的方式连接有数据检测模块，所述数据检测模块以电信号传输的方式连接有数据采集模块，所述数据采集模块以电信号传输的方式连接有数据加工模块，所述数据加工模块以电信号传输的方式连接有数据应用模块，所述数据应用模块以电信号传输的方式连接有用户终端，所述数据源、数据检测模块、数据采集模块、数据加工模块、数据应用模块和用户终端分别与互联网服务器以电信号传输的方式连接。2.根据权利要求1所述的一种数据集成系统，其特征在于：所述数据检测模块包括告警单元、数据监控单元和防火墙单元，且告警单元、数据监控单元和防火墙单元三者之间均设置为电信号连接，告警单元用于对数据中存在的风险进行预警通知，数据监控单元用于对数据源中的数据进行实时监测，防火墙单元用于对数据源中的网络进行安全防护，构件一道相对隔绝的保护屏障。3.根据权利要求1所述的一种数据集成系统，其特征在于：所述数据源中的数据是从不同来源、格式中获取，用于管理和配置接收的所有数据，而数据检测模块则是对数据源中接收到的数据进行检测，数据检测模块需要特定的权限才能打开进行调试和编辑，且防火墙单元始终处于打开的状态，为系统内外网进行安全防护。4.根据权利要求1所述的一种数据集成系统，其特征在于：所述数据采集模块用于对检测后的数据进行接收和管理，且数据采集模块包括数据采集单片机分机、主机、无线传输单元和PC接口组成，可完成多通道的实时数据采集，并可以对数据进行存贮以构成设备运...

【专利技术属性】
技术研发人员：ꢀ七四专利代理机构，
申请(专利权)人：上海有间建筑科技有限公司，
类型：发明
国别省市：