一种多数据源综合采集装置及方法制造方法及图纸

本发明专利技术涉及计算机数据处理技术领域，尤其涉及一种多数据源综合采集装置及方法。一种多数据源综合采集装置，包括：接口模块，用于与IT设备相连，并通过IT设备的网络接口与不同的外部应用服务进行数据通信；管理模块，通过IT设备调用，用于将IT设备配置成数据采集端或数据服务端；采集接收模块，针对不同的外部应用服务进行数据采集或数据接收；数据处理模块，用于对采集接收模块采集到的数据或接收到的数据进行数据处理；管理模块，还用于将数据处理模块处理后的数据发送到指定的服务端；本发明专利技术将以往采集用的应用程序植入到硬件上，形成独立运行的采集装置，使对多数据源进行采集数据或接收数据时软件部署变得简单、方便维护。

【技术实现步骤摘要】

本专利技术涉及计算机数据处理
，尤其涉及一种多数据源综合采集装置及方法。
技术介绍
通常IT环境中在处理多类型数据源的采集或接收时，大多会通过人工把采集软件上传到服务器；在服务器进行环境和应用的部署，并需要调试大量的参数配置。尤其在大数据量的采集接收以及处理时，不仅部署难度大，采集配置繁琐，维护的成本也比较高，整个流程需要人为操作，而且容易出现软件BUG或软件运行时的一些自身的故障。
技术实现思路
针对上述现有技术存在的不足，本专利技术的目的在于提供一种多数据源综合采集装置及方法。一方面，本专利技术公开了一种多数据源综合采集装置，该采集装置包括：接口模块，用于与IT设备相连，并通过IT设备的网络接口与不同的外部应用服务进行数据通信；管理模块，通过IT设备调用，用于将IT设备配置成数据采集端或数据服务端；采集接收模块，植有多数据源综合采集用的应用程序，用于将IT设备配置成数据采集端后，针对不同的外部应用服务进行数据采集，或用于将IT本文档来自技高网...

【技术保护点】
一种多数据源综合采集装置，其特征在于，该采集装置包括：接口模块，用于与IT设备相连，并通过IT设备的网络接口与不同的外部应用服务进行数据通信；管理模块，通过IT设备调用，用于将IT设备配置成数据采集端或数据服务端；采集接收模块，植有多数据源综合采集用的应用程序，用于将IT设备配置成数据采集端后，针对不同的外部应用服务进行数据采集，或用于将IT设备配置成数据服务端后，针对不同的外部应用服务进行数据接收；数据处理模块，用于对采集接收模块采集到的数据或接收到的数据进行数据处理；管理模块，还用于将数据处理模块处理后的数据发送到指定的服务端；其中，所述接口模块分别与所述管理模块和所述采集接收模块相连；所...

【技术特征摘要】
1.一种多数据源综合采集装置，其特征在于，该采集装置包括：
接口模块，用于与IT设备相连，并通过IT设备的网络接口与不同的外
部应用服务进行数据通信；
管理模块，通过IT设备调用，用于将IT设备配置成数据采集端或数据
服务端；
采集接收模块，植有多数据源综合采集用的应用程序，用于将IT设备配
置成数据采集端后，针对不同的外部应用服务进行数据采集，或用于将IT
设备配置成数据服务端后，针对不同的外部应用服务进行数据接收；
数据处理模块，用于对采集接收模块采集到的数据或接收到的数据进行
数据处理；
管理模块，还用于将数据处理模块处理后的数据发送到指定的服务端；
其中，所述接口模块分别与所述管理模块和所述采集接收模块相连；
所述数据处理模块分别与所述采集接收模块与所述管理模块相连。
2.根据权利要求1所述的多数据源综合采集装置，其特征在于，该采集
装置还包括：
数据缓存模块，用于缓存所述数据处理模块处理后的数据；
其中，所述数据处理模块通过所述数据缓存模块与所述管理模块相连。
3.根据权利要求2所述的多数据源综合采集装置，其特征在于，所述采
集接收模块包括：文件传输协议FTP模块、套接字SOCKET模块、Web服
务WEBSERVICE模块中的一种或多种，每种模块实现相应的协议类型。
4.根据权利要求3所述的多数据源综合采集装置，其特征在于，所述管
理模块将IT设备配置成数据采集端的配置项目包括：采集源地址、服务端地
址、服务接口类型和采集频率。
5.根据权利要求4所述的多数据源综合采集装置，其特征在于，所述数
据处理模块对所述采集接收模块采集到的数据进行的数据处理包括：数据归
一化、异常数据剔除和敏感数据脱敏。
6.根据权利要求1-5中任一所述的多数据源综合采集装置，其特征在于，
所述管理模块将IT设备配置成数据服务端的配置项目包括：服务类型、服务
属性配置和存储地址。
7.根据权利要求6所述的多数据源综合采集装置，其特征在于，所...

【专利技术属性】
技术研发人员：贾凤爽，高峰，张淑娟，
申请(专利权)人：北京神州泰岳软件股份有限公司，
类型：发明
国别省市：北京;11