自动化任务排程方法、电子设备及存储介质技术

技术编号:36578215 阅读:31 留言:0更新日期:2023-02-04 17:37
本申请提供一种自动化任务排程方法、电子设备及存储介质,所述方法包括:获取数据处理任务及数据源;根据所述数据处理任务生成作业队列;从所述作业队列中依次提取作业任务;根据提取到的作业任务分配计算资源;基于所述数据源,通过预先训练完成的模型得到数据处理任务结果。通过本申请可以提高任务排程的效率。通过本申请可以提高任务排程的效率。通过本申请可以提高任务排程的效率。

【技术实现步骤摘要】
自动化任务排程方法、电子设备及存储介质


[0001]本申请涉及数据分析领域,尤其涉及一种自动化任务排程方法、电子设备及存储介质。

技术介绍

[0002]目前的边缘运算架构,多数依赖于云端进行无隐私的数据运算,边缘运算装置仅能进行数据收集或简单的数据前处理。对于有数据隐私考虑的企业或单位,数据云并不可行。此外,若自行搭建整套私有云,建构维护成本又太高。因此,产生了搭载图形处理器(Graphic Processing Unit,GPU)等具有较高运算资源的边缘计算装置,但是目前缺乏一个充分且能有效利用资源的架构。现有的平台需具备足够的数据科学领域知识的人员才能操作,因此局限了其他领域的人员对数据进行自动分析。

技术实现思路

[0003]鉴于以上内容,有必要提供一种自动化任务排程方法、电子设备及存储介质,能提高任务排程的效率。
[0004]本申请提供一种自动化任务排程方法,所述方法包括:获取数据处理任务及数据源;根据所述数据处理任务生成作业队列;从所述作业队列中依次提取作业任务;根据提取到的作业任务分配计算资源;基于所述数据源本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种自动化任务排程方法,其特征在于,所述自动化任务排程方法包括:获取数据处理任务及数据源;根据所述数据处理任务生成作业队列;从所述作业队列中依次提取作业任务;根据提取到的作业任务分配计算资源;基于所述数据源,通过预先训练完成的模型得到数据处理任务结果。2.根据权利要求1所述的自动化任务排程方法,其特征在于,所述数据源的获取包括以下一种或多种的组合:接收通过服务器接口发送的数据源;接收通过客户端接口发送的数据源;接收通过档案储存协议发送的数据源。3.根据权利要求1所述的自动化任务排程方法,其特征在于,所述根据所述数据处理任务生成作业队列包括:拆分所述数据处理任务为所述作业任务;为所述作业任务建立逻辑依赖关系;设置每个所述作业任务的执行频率;根据所述作业任务、所述逻辑依赖关系和所述执行频率生成所述作业队列。4.根据权利要求3所述的自动化任务排程方法,其特征在于,所述从所述作业队列中依次提取所述作业任务包括:根据所述逻辑依赖关系确定作业顺序;根据所述作业顺序从所述作业队列中依次提取所述作业任务。5.根据权利要求4所述的自动化任务排程方法,其特征在于,所述根据提取到的作业任务分配计算资源包括:获取每个所述作业任务的资源用量;基于所述资源用量,获取资源许可时间点;在所述资源许可时间点将所述计算资源分配给所述提取到的作业任务。6.根据权利要求5所述的自动化任务排程方法,其特征在于,所述在所述资源许可时间点将所述计算资源分配给所述提...

【专利技术属性】
技术研发人员:江启钧樊绍萱
申请(专利权)人:深圳富联富桂精密工业有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1