一种任务部署的方法、装置、设备及存储介质制造方法及图纸

技术编号:38596827 阅读:30 留言:0更新日期:2023-08-26 23:32
本申请公开了一种任务部署的方法、装置、设备及存储介质,可应用于大数据领域或金融领域。通过根据用户的任务部署请求,配置任务部署的策略文件;根据所述策略文件中的数据表和工作流,更新大数据平台的原数据表和原工作流,获得更新后的数据表和更新后的工作流;将系统数据添加至所述更新后的数据表,获得已配置数据表;所述系统数据用于调用所述更新后的工作流中的任务;根据所述已配置数据表,调用所述更新后的工作流中的任务。本申请通过配置的策略文件,根据已配置数据表,调用更新后的工作流中的任务,实现自动调度和部署,有效降低了作业过程中的人为干预程度,提高了任务调度和部署的安全性以及可靠性。度和部署的安全性以及可靠性。度和部署的安全性以及可靠性。

【技术实现步骤摘要】
一种任务部署的方法、装置、设备及存储介质


[0001]本申请涉及数据处理
,特别是涉及一种任务部署的方法、装置、设备及存储介质。

技术介绍

[0002]随着云计算和大数据的兴起和发展,大数据处理平台受到广泛的应用,运用大数据平台完成数据处理,可以提升加快数据处理效率。
[0003]现有技术中需要通过在大数据平台上进行大量的手动操作以实现任务部署,例如建立数据表、配置系统表信息、上传数据加工脚本、上传工作流配置文件以及上传部署脚本文件等操作。
[0004]然而,现有技术中人为干预程度较高,为任务部署过程引入了许多不确定因素,特别是面对日益庞大的数据量,任务部署过程的安全性以及可靠性都不能得到有效的保障。

技术实现思路

[0005]基于上述问题,本申请提供了一种任务部署的方法、装置、设备及存储介质。
[0006]本申请实施例公开了如下技术方案:
[0007]本申请实施例提供一种任务部署的方法,包括:
[0008]根据用户的任务部署请求,配置任务部署的策略文件;
>[0009]根据所本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种任务部署的方法,其特征在于,包括:根据用户的任务部署请求,配置任务部署的策略文件;根据所述策略文件中的数据表和工作流,更新大数据平台的原数据表和原工作流,获得更新后的数据表和更新后的工作流;将系统数据添加至所述更新后的数据表,获得已配置数据表;所述系统数据用于调用所述更新后的工作流中的任务;根据所述已配置数据表,调用所述更新后的工作流中的任务。2.根据权利要求1所述的方法,其特征在于,所述根据所述策略文件中的数据表和工作流,更新大数据平台的原数据表和原工作流,获得更新后的数据表和更新后的工作流,包括:将所述策略文件中的数据表和工作流与所述原数据表和所述原工作流进行对比,获得对比结果;若所述对比结果表示更新数据表和工作流,将所述原数据表和所述原工作流更新为所述策略文件中的数据表和工作流,获得所述更新后的数据表和所述更新后的工作流;若所述对比结果表示新增数据表和工作流,根据所述策略文件中的数据表和工作流创建数据表和工作流,获得所述更新后的数据表和所述更新后的工作流。3.根据权利要求2所述的方法,其特征在于,所述若所述对比结果表示更新数据表和工作流,将所述原数据表和所述原工作流更新为所述策略文件中的数据表和工作流,获得所述更新后的数据表和所述更新后的工作流之后,还包括:将所述原数据表和所述原工作流进行备份。4.根据权利要求1

3任一项所述的方法,其特征在于,还包括:当需要终止所述工作流中的任务时,对所述任务进行冻结、终止和/或停止。5.根据权利要求1

3任一项所述的方法,其特征在于,还包括:查询所述工作流的状态,获得所述工作流的当前状态;反馈所述当前状态。6.一种任务部署的装置,其特征在于,包括:配置模块、更新模块、获得模块以及调用模块;所述配置模...

【专利技术属性】
技术研发人员:黄钊港敖倩
申请(专利权)人:中国银行股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1