【技术实现步骤摘要】
本申请涉及计算机,尤其涉及一种任务数据处理方法、装置、计算机、存储介质及程序产品。
技术介绍
1、通过互联网执行任务已经成为一个应用比较普遍的场景,而随着任务的数据量的增大,对于任务的处理就极为重要。目前,一般是通过流式框架计算和处理一个个任务,无法长时间地等待某个任务执行完成,适用于实时处理数据本身,然而任务的数据量过大时,可能会出现任务丢失的情况,导致任务数据处理安全性较差。或者,采用用于处理由用户发起的操作的调度任务的框架处理任务,该框架对外提供同步接口,使得无法同时处理过多的任务,可能会导致任务丢失等问题,从而导致任务数据处理的效率及安全性较低。
技术实现思路
1、本申请实施例提供了一种任务数据处理方法、装置、计算机、存储介质及程序产品,可以提高任务数据处理的效率及安全性。
2、本申请实施例一方面提供了一种任务数据处理方法,该方法由调度服务节点执行,该方法包括:
3、获取第一任务信息,将第一任务信息转换为属于任务数据格式的第一任务元数据,将第一任务元数据添加
...【技术保护点】
1.一种任务数据处理方法,其特征在于,所述方法由调度服务节点执行,所述方法包括:
2.根据权利要求1所述的方法,其特征在于,所述获取第一任务信息,包括:
3.根据权利要求1所述的方法,其特征在于,所述调度服务节点属于调度节点集群;所述获取第一任务信息,包括:
4.根据权利要求3所述的方法,其特征在于,所述方法还包括:
5.根据权利要求1所述的方法,其特征在于,所述将所述第一任务信息转换为属于任务数据格式的第一任务元数据,包括:
6.根据权利要求1所述的方法,其特征在于,所述将所述第一任务信息转换为属于任务数据
...【技术特征摘要】
1.一种任务数据处理方法,其特征在于,所述方法由调度服务节点执行,所述方法包括:
2.根据权利要求1所述的方法,其特征在于,所述获取第一任务信息,包括:
3.根据权利要求1所述的方法,其特征在于,所述调度服务节点属于调度节点集群;所述获取第一任务信息,包括:
4.根据权利要求3所述的方法,其特征在于,所述方法还包括:
5.根据权利要求1所述的方法,其特征在于,所述将所述第一任务信息转换为属于任务数据格式的第一任务元数据,包括:
6.根据权利要求1所述的方法,其特征在于,所述将所述第一任务信息转换为属于任务数据格式的第一任务元数据,包括:
7.根据权利要求1所述的方法,其特征在于,所述当所述调度服务节点进行任务下发时,基于所述第一任务数据库中的实例数据的实例状态,从所述第一任务数据库中的实例数据中获取待处理实例数据,包括:
8.根据权利要求1所述的方法,其特征在于,所述方法还包括:
9.根据权利要求1所述的方法,其特征在于,所述执行服务节点的数量为m,m为正整数;所述将所述待处理实例数据及所述待处理实例数据所关联的任务元数据发送至执行服务节点,包括:
10.一种...
【专利技术属性】
技术研发人员:叶强盛,蒋杰,陈鹏,罗韩梅,唐暾,邓启斌,程广旭,
申请(专利权)人:腾讯科技深圳有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。