数据消费对象开发、流数据处理方法、装置、设备及介质制造方法及图纸

技术编号:40007302 阅读:24 留言:0更新日期:2024-01-16 14:43
本公开提供了一种数据消费对象开发、流数据处理方法、装置、设备及存储介质,应用于数据消费对象开发系统,包括用于管理目标服务对应的至少一个数据消费对象的数据消费对象管理器,不同的数据消费对象对应于不同的逻辑集群。当接收到针对目标服务的数据消费对象创建请求时,分配逻辑集群。接收在该逻辑集群上为目标数据消费对象创建数据源接入模块、数据处理模块和数据存储模块,并将该数据消费对象创建请求中携带的数据源地址配置于该数据源接入模块中,完成对目标数据消费对象的开发。本公开基于通用模块实现对不同数据消费对象的开发,使得开发人员只需关注核心处理逻辑,即可完成数据消费对象的开发,提升了数据消费对象的开发效率。

【技术实现步骤摘要】

本公开涉及数据处理领域,尤其涉及一种数据消费对象开发、流数据处理方法、装置、设备以及存储介质。


技术介绍

1、随着计算机技术的不断发展,某些应用场景下可能存在大量数据消费需求。

2、现有开发模式下,一旦提出数据消费需求,开发人员需要针对本次需求单独开发数据消费对象,并将完成开发的数据消费对象部署到服务器上。由于每个数据消费对象都是独立开发,在大量数据消费需求的开发场景下,显然上述数据消费对象开发方式效率较低。因此,如何提高对数据消费对象开发的效率,是目前亟需解决的技术问题。


技术实现思路

1、为了解决上述技术问题,本公开提供了一种数据消费对象开发方法,通过模块化的数据消费对象开发方式,提升对数据消费对象的开发效率。

2、第一方面,本公开提供了一种数据消费对象开发方法,所述方法包括;

3、当接收到针对所述目标服务的数据消费对象创建请求时,针对所述数据消费对象创建请求分配逻辑集群;其中,所述逻辑集群用于运行所述数据消费对象创建请求对应的目标数据消费对象;p>

4、接收在本文档来自技高网...

【技术保护点】

1.一种数据消费对象开发方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述接收在所述逻辑集群上为所述目标数据消费对象创建的数据处理模块,包括:

3.根据权利要求1所述的方法,其特征在于,所述接收在所述逻辑集群上为所述目标数据消费对象创建的数据存储模块,包括:

4.根据权利要求1所述的方法,其特征在于,所述方法还包括:

5.根据权利要求4所述的方法,其特征在于,所述提示组件具有接口类型,所述接口类型用于标识所述数据接入模块的接口、所述数据处理模块的接口或者所述数据存储模块的接口,所述提示组件用于基于所述提示路径和...

【技术特征摘要】

1.一种数据消费对象开发方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述接收在所述逻辑集群上为所述目标数据消费对象创建的数据处理模块,包括:

3.根据权利要求1所述的方法,其特征在于,所述接收在所述逻辑集群上为所述目标数据消费对象创建的数据存储模块,包括:

4.根据权利要求1所述的方法,其特征在于,所述方法还包括:

5.根据权利要求4所述的方法,其特征在于,所述提示组件具有接口类型,所述接口类型用于标识所述数据接入模块的接口、所述数据处理模块的接口或者所述数据存储模块的接口,所述提示组件用于基于所述提示路径和所述接口类型进行提示。

6.一种流数据处理方法,其特征在于,所述方法应用于目标服务对应的数据消费对象中,所述目标服务对应的不同数据消费对象分别运行于不同的逻辑集群上,所述目标服务对应的不同数据消费对象由数据消费对象管理器管理,所述数据消费对象包括数据接入模块、数据处理模块和数据存储模块;所述方法包括:

7.根据权利要求6所述的方法,其特征在于,所述数据处理模块包括至少一个数据处理算子,所述至少一个数据转换算子之间属于链式连接;

8.根据权利要求6所述的方法,其特征在于,所述数据存储模块包括至少一个数据存储算子;所述调用所述数据存储模块对所述处理结果数据进行...

【专利技术属性】
技术研发人员:方宏彪杨晔萌
申请(专利权)人:北京字跳网络技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1