基于分片任务的分布式异步延迟任务处理方法和系统技术方案

技术编号:44186167 阅读:24 留言:0更新日期:2025-02-06 18:27
本发明专利技术涉及任务处理技术领域,涉及一种基于分片任务的分布式异步延迟任务处理方法和系统,包括:对预先获取的任务参数进行任务转化以及任务入库操作,得到任务信息;对所述任务信息进行触发分片以及轮询打包,得到任务消息集;对所述任务消息集进行订阅传输以及消息解包,得到解包任务集;对所述解包任务集进行任务逻辑分析以及业务执行,得到执行状态集;根据所述执行状态集对所述进行解包任务集进行状态反馈以及任务重试,得到任务处理日志。本发明专利技术可以提高分布式异步延迟任务处理的效率。

【技术实现步骤摘要】

本专利技术涉及任务处理,尤其涉及一种基于分片任务的分布式异步延迟任务处理方法和系统


技术介绍

1、分布式异步延迟任务是一种任务调度机制,涉及在分布式系统中安排任务在未来的某个时间点或在指定的延迟后执行,分布式异步延迟任务在数据备份,临时数据清洗以及邮件、短信等通知信息的延时推送场景中具有广泛应用。

2、现有的分布式异步延迟任务处理方法包括消息队列、分布式锁以及定时器等处理方法,即将任务放入队列中,根据延迟时间或特定条件触发进行任务处理,实际应用中,消息队列系统可能会因为网络分区、节点故障等问题导致消息丢失,且分布式环境的分区以及负载分配较为复杂,可能导致进行任务处理时的效率较低。


技术实现思路

1、本专利技术提供一种基于分片任务的分布式异步延迟任务处理方法和系统,其主要目的在于解决导致进行任务处理时的效率较低的问题。

2、为实现上述目的,本专利技术提供的一种基于分片任务的分布式异步延迟任务处理方法,包括:

3、对预先获取的任务参数进行任务转化以及任务入库操作,得到任务信息本文档来自技高网...

【技术保护点】

1.一种基于分片任务的分布式异步延迟任务处理方法,其特征在于,所述方法包括:

2.如权利要求1所述的基于分片任务的分布式异步延迟任务处理方法,其特征在于,所述对预先获取的任务参数进行任务转化以及任务入库操作,得到任务信息,包括:

3.如权利要求1所述的基于分片任务的分布式异步延迟任务处理方法,其特征在于,所述对所述任务信息进行触发分片以及轮询打包,得到任务消息集,包括:

4.如权利要求3所述的基于分片任务的分布式异步延迟任务处理方法,其特征在于,所述对所述触发子任务信息集进行哈希时量业务特征提取,得到子任务类型特征集、子任务时间特征集、子任务数据特征集...

【技术特征摘要】

1.一种基于分片任务的分布式异步延迟任务处理方法,其特征在于,所述方法包括:

2.如权利要求1所述的基于分片任务的分布式异步延迟任务处理方法,其特征在于,所述对预先获取的任务参数进行任务转化以及任务入库操作,得到任务信息,包括:

3.如权利要求1所述的基于分片任务的分布式异步延迟任务处理方法,其特征在于,所述对所述任务信息进行触发分片以及轮询打包,得到任务消息集,包括:

4.如权利要求3所述的基于分片任务的分布式异步延迟任务处理方法,其特征在于,所述对所述触发子任务信息集进行哈希时量业务特征提取,得到子任务类型特征集、子任务时间特征集、子任务数据特征集、子任务优先级特征集以及子任务哈希特征集,包括:

5.如权利要求3所述的基于分片任务的分布式异步延迟任务处理方法,其特征在于,所述对所述子任务类型特征集、所述子任务时间特征集、所述子任务数据特征集、所述子任务优先级特征集以及所述子...

【专利技术属性】
技术研发人员:夏璨张雄周逸峰陈晓俊朱黄华温德森谢伟忠
申请(专利权)人:招商局智融供应链服务有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1