一种基于Web管理和调度Kettle抽数工具的方法技术

技术编号:22022138 阅读:192 留言:0更新日期:2019-09-04 01:15
本发明专利技术特别涉及一种基于Web管理和调度Kettle抽数工具的方法。该基于Web管理和调度Kettle抽数工具的方法,将Kettle源码集成到包含前端架构的Web应用中,通过适配器模式开发出能够正常调用Kettle API类的方法来执行转换和作业,并且使用time‑quartz框架完成调度工作。该基于Web管理和调度Kettle抽数工具的方法,使用Web页面就能够管理和调度Kettle任务,不但减少了Kettle对自身GUI的依赖,还减少了系统环境对使用Kettle便利性的影响,同时支持对Kettle调用日志的监控,使开发人员能够更精准的监控Kettle任务,能够随时掌握Kettle工具中各个任务的工作状态,能够保证Kettle工具的稳定运行。

A Method Based on Web Management and Scheduling Kettle Counting Tool

【技术实现步骤摘要】
一种基于Web管理和调度Kettle抽数工具的方法
本专利技术涉及Web管理Kettle工具
,特别涉及一种基于Web管理和调度Kettle抽数工具的方法。
技术介绍
信息是现代企业的重要资源,是企业运用科学管理、决策分析的基础。目前,大多数企业花费大量的资金和时间来构建联机事务处理OLTP的业务系统和办公自动化系统,用来记录事务处理的各种相关数据。据统计,数据量每2~3年时间就会成倍增长,这些数据蕴含着巨大的商业价值,而企业所关注的通常只占在总数据量的2%~4%左右。因此,企业仍然没有最大化地利用已存在的数据资源,以致于浪费了更多的时间和资金,也失去制定关键商业决策的最佳契机。于是,企业如何通过各种技术手段,并把数据转换为信息、知识,已经成了提高其核心竞争力的主要瓶颈。而ETL(Extraction-Transformation-Loading,数据抽取、转换和加载)工具则是主要的一个技术手段。ETL是数据抽取(Extract)、清洗(Cleaning)、转换(Transform)、装载(Load)的过程,是构建数据仓库的重要一环。用户从数据源抽取出所需的数据,经过数据清洗,本文档来自技高网...

【技术保护点】
1.一种基于Web管理和调度Kettle抽数工具的方法,其特征在于:由于Kettle抽数工具本身为开源项目,源代码共享,因而可以将Kettle源码集成到包含前端架构的Web应用中,通过适配器模式开发出能够正常调用Kettle API类的方法来执行转换和作业,并且使用time‑quartz框架完成调度工作。

【技术特征摘要】
1.一种基于Web管理和调度Kettle抽数工具的方法,其特征在于:由于Kettle抽数工具本身为开源项目,源代码共享,因而可以将Kettle源码集成到包含前端架构的Web应用中,通过适配器模式开发出能够正常调用KettleAPI类的方法来执行转换和作业,并且使用time-quartz框架完成调度工作。2.根据权利要求1所述的基于Web管理和调度Kettle抽数工具的方法,其特征在于:所述Web应用前端采用bootstrap,后端采用springboot+springmvc+spring+mybatis,数据库使用MySQL数据库。3.根据权利要求2所述的基于Web管理和调度Kettle抽数工具的方法,其特征在于:所述Web应用打包部署到Tomcat服务器后,可以通过浏览器Web页面直接调度Kettle任务,管理作业转换,监控作业状态,并实时监控Kettle调度任务,邮件通知工作人员数据转换结果,将Kettle任务状态及时反馈给工作人员,使工作人员能够第一时间掌握数据转换结果。4.根据权利要求3所述的基于Web管理和调度Kettle抽数工具的方法,其特征在于:当一个任务,包括作业和转换,启动后,这个任务就处于系统的监控状态下;所述Web应用UI...

【专利技术属性】
技术研发人员:张亚飞刘天智刘鹏
申请(专利权)人:浪潮软件股份有限公司
类型:发明
国别省市:山东,37

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1