流数据处理方法、装置、计算机设备及存储介质制造方法及图纸

技术编号:37863047 阅读:19 留言:0更新日期:2023-06-15 20:53
本申请实施例属于大数据领域,涉及一种流数据处理方法、装置、计算机设备及存储介质,方法包括:从目标设备处获取设备源数据;基于所述目标设备所对应的物模型,对所述设备源数据进行标准化处理,得到设备流数据;获取所述目标设备所对应的流数据处理任务链,所述流数据处理任务链中包含多个数据处理任务,数据处理任务存在于任务池,数据处理任务包含通用类型任务和自定义类型任务;通过所述流数据处理任务链对所述设备流数据进行数据处理。本申请提高了流数据处理效率。高了流数据处理效率。高了流数据处理效率。

【技术实现步骤摘要】
流数据处理方法、装置、计算机设备及存储介质


[0001]本申请涉及大数据
,尤其涉及一种流数据处理方法、装置、计算机设备及存储介质。

技术介绍

[0002]在AIoT(人工智能物联网,融合AI(人工智能)技术和IoT(物联网)技术)领域中,流数据处理是一种对设备数据进行清洗、汇聚等重新赋能的重要手段。在流数据处理中,会根据业务需求确定流数据处理功能,其中会包含多个流数据的处理环节,其中的某些处理环节例如数据的过滤可能是通用的。然而现有的流数据处理技术,通常是由开发人员针对不同的业务场景编写流数据处理代码,代码编写过程复杂、难以上手,并且代码开发是一次性的,无法动态编排,通用的数据处理环节需要重复实现,导致流数据处理效率较低。

技术实现思路

[0003]本申请实施例的目的在于提出一种流数据处理方法、装置、计算机设备及存储介质,以解决流数据处理效率较低的问题。
[0004]为了解决上述技术问题,本申请实施例提供一种流数据处理方法,采用了如下所述的技术方案:
[0005]从目标设备处获取设备源数据;
[0本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种流数据处理方法,其特征在于,包括下述步骤:从目标设备处获取设备源数据;基于所述目标设备所对应的物模型,对所述设备源数据进行标准化处理,得到设备流数据;获取所述目标设备所对应的流数据处理任务链,所述流数据处理任务链中包含多个数据处理任务,数据处理任务存在于任务池,数据处理任务包含通用类型任务和自定义类型任务;通过所述流数据处理任务链对所述设备流数据进行数据处理。2.根据权利要求1所述的流数据处理方法,其特征在于,在所述获取所述目标设备所对应的流数据处理任务链的步骤之前,还包括:获取在创建页面中添加的各数据处理任务;获取所述各数据处理任务间的任务连接线;根据所述各数据处理任务以及所述各数据处理任务间的任务连接线进行任务封装,得到流数据处理任务链。3.根据权利要求2所述的流数据处理方法,其特征在于,所述获取在创建页面中添加的各数据处理任务的步骤包括:展示任务池,所述任务池中包含多个数据处理任务;根据对所述任务池中至少一个数据处理任务的选取指令,将所述至少一个数据处理任务添加到创建页面。4.根据权利要求2所述的流数据处理方法,其特征在于,所述获取在创建页面中添加的各数据处理任务的步骤还包括:获取在所述创建页面中添加的任务配置信息;根据所述任务配置信息创建至少一个数据处理任务,并将所述至少一个数据处理任务添加到任务池中。5.根据权利要求1所述的流数据处理方法,其特征在于,所述获取所述目标设备所对应的流数据处理任务链的步骤包括:查询所述目标设备所对应的任务链信息,并提取所述任务链信息中的各任务标识;从任务池中提取与所述各任务标识分别对应的数据处理任务;根据所述任务链信息和各数据处理任务进行任务封装,得到所述目标设...

【专利技术属性】
技术研发人员:尹力澜杜海
申请(专利权)人:远光软件股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1