数据处理方法、装置、计算机设备和存储介质制造方法及图纸

技术编号:41696714 阅读:31 留言:0更新日期:2024-06-19 12:31
本申请涉及一种数据处理方法、装置、计算机设备和存储介质。数据处理方法包括:获取当前数据处理任务,当前数据处理任务为当前业务场景对应的数据处理任务,将当前数据处理任务发送至模型平台,获取预先为当前业务场景配置的关键模型,关键模型为当前业务场景依赖的模型平台中的模型,从模型平台获取当前业务场景对应的关键模型的处理结果,并根据当前业务场景对应的关键模型的处理结果确定当前数据处理任务的处理结果。采用本方法能够灵活调整当前业务场景所依赖的关键模型,从而基于关键模型的处理结果确定当前数据处理任务的处理结果,无需阻塞等待非依赖模型的处理结果,提高数据处理效率。

【技术实现步骤摘要】

本申请涉及数据处理,特别是涉及一种数据处理方法、装置、计算机设备和存储介质


技术介绍

1、随着大数据相关领域的技术快速发展,数据系统中对用户的数据传输和处理变得日益复杂。在这样的背景下,常常会针对数据提供多个模型来并行完成数据的计算来提高性能和效率。

2、在传统数据加工处理过程中,常常会基于业务制定一定的策略,提前将模型的加工顺序设置好。这种方式容易出现的问题是,当业务场景多样化时,由于模型的加工顺序比较固化,导致很多业务场景下数据处理任务的处理流程的执行过程需要阻塞等待一些非相关的模型的数据加工结果,导致数据处理效率低下。


技术实现思路

1、基于此,有必要针对上述技术问题,提供一种能够提高数据处理效率的数据处理方法、装置、计算机设备和存储介质。

2、一种数据处理方法,方法应用于数据平台,方法包括:

3、获取当前数据处理任务,当前数据处理任务为当前业务场景对应的数据处理任务;

4、将当前数据处理任务发送至模型平台,模型平台包括至少一个模型,至少一个模型用于处理本文档来自技高网...

【技术保护点】

1.一种数据处理方法,其特征在于,所述方法应用于数据平台,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述获取预先为所述当前当前业务场景配置的关键模型,包括:

3.根据权利要求1所述的方法,其特征在于,所述从所述模型平台获取所述当前业务场景对应的关键模型的处理结果,并根据所述当前业务场景对应的关键模型的处理结果确定所述当前数据处理任务的处理结果,包括:

4.根据权利要求1所述的方法,其特征在于,所述方法还包括:

5.根据权利要求1所述的方法,其特征在于,所述方法还包括:

6.根据权利要求1所述的方法,其特征在于,所...

【技术特征摘要】

1.一种数据处理方法,其特征在于,所述方法应用于数据平台,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述获取预先为所述当前当前业务场景配置的关键模型,包括:

3.根据权利要求1所述的方法,其特征在于,所述从所述模型平台获取所述当前业务场景对应的关键模型的处理结果,并根据所述当前业务场景对应的关键模型的处理结果确定所述当前数据处理任务的处理结果,包括:

4.根据权利要求1所述的方法,其特征在于,所述方法还包括:

5.根据权利要求1所述的方法,其特征在于,所述方法还包括:

6.根据权利要求1所述的方法,其特征在于,所述当前业务场景对应的关键模型包括多个,所述从...

【专利技术属性】
技术研发人员:赵庆鹤
申请(专利权)人:上海数禾信息科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1