基于联盟的分布式任务执行方法、装置、设备及介质制造方法及图纸

技术编号:43880012 阅读:19 留言:0更新日期:2024-12-31 19:03
本申请公开了一种基于联盟的分布式任务执行方法、装置、设备及介质,涉及数据安全技术领域,应用于分布式平台的发起方工作节点,该方法包括:接收第一目标联盟下发的与待执行任务对应的流程表单,并基于所述流程表单获取第一进程状态命令,利用所述第一进程状态命令控制本地计算框架拉起第一算法组件;将携带所述流程表单的流程命令发送至第二目标联盟,以便参与方工作节点接收所述第二目标联盟基于所述流程命令下发的所述流程表单,并利用基于所述流程表单获取的第二进程状态命令拉起第二算法组件;利用所述第一算法组件和所述第二算法组件执行所述待执行任务。通过上述方案,将调度逻辑和业务逻辑分离,以提高分布式平台任务执行时的稳定性。

【技术实现步骤摘要】

本专利技术涉及数据安全,特别涉及基于联盟的分布式任务执行方法、装置、设备及介质


技术介绍

1、随着计算机技术的发展数据变得越来越重要,其中蕴藏着巨大的价值,对于数据价值的共享需要越来越强烈,但随着数据安全的重视程度越来越高,数据的共享限制越来越多,渐渐地形成了一个个的数据孤岛,数据拥有方不敢对外进行数据共享,数据需求方无法使用需要的数据。目前数据共享的基础原则为“原始数据不出域,数据可用不可见”,即将三方的应用放到原始数据所在域内进行计算,那么需要对应用进行全面审计,很难杜绝应用的恶意攻击行为,比如偷数据等。为此,多方安全计算技术成为了解决数据共享问题的不二之选,既满足了“原始数据不出域,数据可用不可见”的要求,又可以进行安全地数据计算。由于多方安全计算是一个天然的分布式计算场景,所以需要借助分布式调度引擎来完成调度逻辑。

2、目前市面上存在着两种分布式调度器,一种是基于传统的分布式框架,采用spark、ray、eggroll等分布式计算框架来完成跨节点调度,在框架之下去实现自身业务逻辑;另一种是采用自研的调度器来完成分布式调度任务,目前的隐本文档来自技高网...

【技术保护点】

1.一种基于联盟的分布式任务执行方法,其特征在于,应用于分布式平台的发起方工作节点,包括:

2.根据权利要求1所述的基于联盟的分布式任务执行方法,其特征在于,所述发起方工作节点中的第一流程引擎包括第一流程调度器、第一任务调度器、第一执行器,所述参与方工作节点中的第二流程引擎包括第二流程调度器、第二任务调度器、第二执行器。

3.根据权利要求2所述的基于联盟的分布式任务执行方法,其特征在于,所述接收第一目标联盟下发的与待执行任务对应的流程表单,包括:

4.根据权利要求3所述的基于联盟的分布式任务执行方法,其特征在于,所述基于所述流程表单获取第一进程状态命令...

【技术特征摘要】

1.一种基于联盟的分布式任务执行方法,其特征在于,应用于分布式平台的发起方工作节点,包括:

2.根据权利要求1所述的基于联盟的分布式任务执行方法,其特征在于,所述发起方工作节点中的第一流程引擎包括第一流程调度器、第一任务调度器、第一执行器,所述参与方工作节点中的第二流程引擎包括第二流程调度器、第二任务调度器、第二执行器。

3.根据权利要求2所述的基于联盟的分布式任务执行方法,其特征在于,所述接收第一目标联盟下发的与待执行任务对应的流程表单,包括:

4.根据权利要求3所述的基于联盟的分布式任务执行方法,其特征在于,所述基于所述流程表单获取第一进程状态命令,包括:

5.根据权利要求2至4任一项所述的基于联盟的分布式任务执行方法,其特征在于,所述利用所述第一进程状态命令控制...

【专利技术属性】
技术研发人员:陆文金徐志泽
申请(专利权)人:中电科网络安全科技股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1