数据处理方法、装置、电子设备和存储介质制造方法及图纸

技术编号:31009894 阅读:28 留言:0更新日期:2021-11-30 00:06
本申请实施例提供了数据处理方法、装置、电子设备和存储介质,所述方法包括:接收任务相关信息,所述任务相关信息包括任务分析信息和任务配置信息;依据所述任务分析信息确定分析数据;基于所述任务配置信息,确定对应的数据解析器并进行配置;基于配置的数据解析器和分析数据,确定数据分析结果。能够提升数据处理效率。理效率。理效率。

【技术实现步骤摘要】
数据处理方法、装置、电子设备和存储介质


[0001]本申请涉及计算机
,特别是涉及一种数据处理方法、一种数据处理装置、一种电子设备和一种存储介质。

技术介绍

[0002]数据分析是指用适当的统计分析方法对收集来的大量数据进行分析,将它们加以汇总和理解并消化,以求最大化地开发数据的功能,发挥数据的作用。数据分析是为了提取有用信息和形成结论而对数据加以详细研究和概括总结的过程。
[0003]一种现有的分析过程是:用户将需求和待分析的数据线下提供给技术人员,技术人员按照用户的需求开发一个算法模型,以通过算法模型来对相关数据进行解析,以确定对应的分析结果、预测结果等。
[0004]但是采用这种方式,对于一些相似的需求,同样需要耗费大量时间来重新开发算法模型,数据分析的过程耗费时间长。

技术实现思路

[0005]本申请实施例提供了一种数据处理方法,以提高处理效率。
[0006]相应的,本申请实施例还提供了一种数据处理装置、一种电子设备和一种存储介质,用以保证上述系统的实现及应用。
[0007]为了解决本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种数据处理方法,其特征在于,所述方法包括:接收任务相关信息,所述任务相关信息包括任务分析信息和任务配置信息;依据所述任务分析信息确定分析数据;基于所述任务配置信息,确定对应的数据解析器并进行配置;基于配置的数据解析器和分析数据,确定数据分析结果。2.根据权利要求1所述的方法,其特征在于,所述基于配置的数据解析器和分析数据,确定数据分析结果,包括:基于所述分析数据和所述配置的数据解析器,确定目标处理任务;给目标计算设备发送指示信息,以将所述目标处理任务部署到目标计算设备进行分析处理;接收对应的数据分析结果。3.根据权利要求2所述的方法,其特征在于,还包括:将所述目标处理任务加入到任务队列中;按照所述目标处理任务在所述任务队列中的顺序,部署所述目标处理任务。4.根据权利要求3所述的方法,其特征在于,还包括:获取至少一个计算设备的运行资源信息;基于所述运行资源信息和所述目标处理任务对运行资源的占用信息,确定对应的目标计算设备。5.根据权利要求2-4所述的方法,其特征在于,还包括:对所述目标处理任务在所述目标计算设备中的运行状态进行监控;在所述目标计算设备对所述目标处理任务的运行状态为异常的情况下,向所述目标计算设备发送重试指令,以使所述目标计算设备重新运行所述目标处理任务。6.根据权利要求5所述的方法,其特征在于,还包括:在所述目标计算设备对所述目标处理任务的运行状态为失败的情况下,确定备选计算设备;将所述目标处理任务部署到所述备选计算设备,以通过所述备选计算设备进行解析。7.根据权利要求1所述的方法,其特征在于,还包括:建立用户组并设置用户组中用户的权限,以依据所述用户权限对用户组关联的处理任务进行共享。8.根据权利要求1所述的方法,其特征在于,所述依据所述任务分析信息确定分析数据,包括:根据所述任务分析信息,从目标数据源中获取目标数据;按照预设的转换规则,将所述目标数据转换为目标版本的分析数据。9.根据权利要求1所述的方法,其特征在于,还包括:基于任务创建请求,发送任务接收页面的页面数据,以展示所述任务接收页面;接收基于任务接收页面的任务相关信息。10.根据权利要求1所述的方法,其特征在于,所述任务接收页面包括用于确定任务分析信息的第一页面和用于确定任务配置信息的第二页面。11.根据权利要求1所述的方法,其特征在于,所述任务配置信息包括解析器信息和参
数配置信息,所述第二页面包括运行控件,所述运行控件用于触发指示信息。12.根据权利要求1所述的方法,其特征在于,还包括:提供第三页面,所述第三页面用于展示数据分析结果;接收展示请求;依据所述展示请求反馈第三页面的页面数据,以便在所述第三页面中展示目标处理任务的数据分析结果。13.根据权利要求2所述的方法,其特征在于,还包括:接收任务查看请求;基于任务展示请求,发送第四页面的页面数据,以基于所述第四页面展示已建立的分析任务。14.根据权利要求1所述的方法,其特征在于,还包括:提供第五页面,所述第五页面用于接收数据解析器;接收上传请求,并依据所述上传请求发送第五页面的页面数据,所述第五页面包括上传控件;接收上传的数据解析器。15.一种数据处理方法,其特征在于,包括:获取目标处理任务,所述目标处理任务依据分析数据和配置的数据解析器确定,所述分析数据根据任务分析信息确定,所述配置的数据解析器依据任务配置信息配置得到;通过配置的数据解析器对所述分析数据进行分析处理,确定数据分析结果;输出所述数据分析结果。16.一种数据处理方法,其特征在于,包括:提供任务接收页面;根据在所述任务接收页面的操作,确定任务相关信息,所述任务相关信息包括任务分析信息和任务配置信息,所述任务分析信息用于确定分析数据,所述任务配置信息用于配置数据解析器,以便对所述分析数据进行分析处理;发送所述任务相关信息。17.根据权利要求16所述的方法,其特征在于,还包括:发送任务创建请求,以获取所述任务接收页面的页面数据。18.根据权利要求...

【专利技术属性】
技术研发人员:谢明枫燕存
申请(专利权)人:菜鸟智能物流控股有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1