【技术实现步骤摘要】
一种基于Web管理和调度Kettle抽数工具的方法
本专利技术涉及Web管理Kettle工具
,特别涉及一种基于Web管理和调度Kettle抽数工具的方法。
技术介绍
信息是现代企业的重要资源,是企业运用科学管理、决策分析的基础。目前,大多数企业花费大量的资金和时间来构建联机事务处理OLTP的业务系统和办公自动化系统,用来记录事务处理的各种相关数据。据统计,数据量每2~3年时间就会成倍增长,这些数据蕴含着巨大的商业价值,而企业所关注的通常只占在总数据量的2%~4%左右。因此,企业仍然没有最大化地利用已存在的数据资源,以致于浪费了更多的时间和资金,也失去制定关键商业决策的最佳契机。于是,企业如何通过各种技术手段,并把数据转换为信息、知识,已经成了提高其核心竞争力的主要瓶颈。而ETL(Extraction-Transformation-Loading,数据抽取、转换和加载)工具则是主要的一个技术手段。ETL是数据抽取(Extract)、清洗(Cleaning)、转换(Transform)、装载(Load)的过程,是构建数据仓库的重要一环。用户从数据源抽取出所需的 ...
【技术保护点】
1.一种基于Web管理和调度Kettle抽数工具的方法,其特征在于:由于Kettle抽数工具本身为开源项目,源代码共享,因而可以将Kettle源码集成到包含前端架构的Web应用中,通过适配器模式开发出能够正常调用Kettle API类的方法来执行转换和作业,并且使用time‑quartz框架完成调度工作。
【技术特征摘要】
1.一种基于Web管理和调度Kettle抽数工具的方法,其特征在于:由于Kettle抽数工具本身为开源项目,源代码共享,因而可以将Kettle源码集成到包含前端架构的Web应用中,通过适配器模式开发出能够正常调用KettleAPI类的方法来执行转换和作业,并且使用time-quartz框架完成调度工作。2.根据权利要求1所述的基于Web管理和调度Kettle抽数工具的方法,其特征在于:所述Web应用前端采用bootstrap,后端采用springboot+springmvc+spring+mybatis,数据库使用MySQL数据库。3.根据权利要求2所述的基于Web管理和调度Kettle抽数工具的方法,其特征在于:所述Web应用打包部署到Tomcat服务器后,可以通过浏览器Web页面直接调度Kettle任务,管理作业转换,监控作业状态,并实时监控Kettle调度任务,邮件通知工作人员数据转换结果,将Kettle任务状态及时反馈给工作人员,使工作人员能够第一时间掌握数据转换结果。4.根据权利要求3所述的基于Web管理和调度Kettle抽数工具的方法,其特征在于:当一个任务,包括作业和转换,启动后,这个任务就处于系统的监控状态下;所述Web应用UI...
【专利技术属性】
技术研发人员:张亚飞,刘天智,刘鹏,
申请(专利权)人:浪潮软件股份有限公司,
类型:发明
国别省市:山东,37
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。