数据的处理方法、装置、电子设备和可读存储介质制造方法及图纸

技术编号:40070314 阅读:20 留言:0更新日期:2024-01-17 00:04
本申请公开了一种数据的处理方法、装置、电子设备和可读存储介质,属于数据处理技术领域。数据的处理方法,包括:获取标记文件,标记文件用于评估已处理文件中的样本数据的质量;获取待处理文件的文件信息,待处理文件是第一服务节点需要处理的文件,待处理文件存储有样本数据;基于标记文件确定与第一服务节点对应的数据质量标记字典;基于数据质量标记字典和文件信息的比对结果执行或取消执行对待处理文件进行处理的流程。

【技术实现步骤摘要】

本申请属于数据处理,具体涉及一种数据的处理方法、装置、电子设备和可读存储介质


技术介绍

1、电子产品或智能设备在运行过程中,会产生大量的数据,通过对上述数据进行挖掘,能够挖掘出具有价值的信息。具体地,上述数据需要从电子产品或智能设备中采集,并上传到数据存储平台或云平台,以便基于数据存储平台或云平台对其进行数据挖掘。

2、然而,在将数据从电子产品或智能设备中采集,并上传到数据存储平台或云平台的过程中,上述数据可能存在异常。对于异常数据,相关技术方案所采用的手段主要分为两种:

3、第一种:基于数据存储平台或云平台,采集人员手动修改数据进行修复;

4、第二种:采集人员重新采集样本数据,当对异常数据修复完毕之后,上传到数据存储平台,调度平台会执行任务对数据再次进行处理。

5、对于大量的数据来说,上述两种手段需要的人工成本比较高,同时,对于第二种手段,在采集人员重新采集样本数据,当对异常数据修复完毕之后,被修复后的异常数据会与无异常的数据会再次一起上传到数据存储平台,以供数据存储平台对其进行再次处理。

6本文档来自技高网...

【技术保护点】

1.一种数据的处理方法,其特征在于,包括:

2.根据权利要求1所述的数据的处理方法,其特征在于,所述数据质量标记字典包括身份识别信息以及与所述身份识别信息对应的质量标记信息,所述基于所述数据质量标记字典和所述文件信息的比对结果执行或取消执行对所述待处理文件进行处理的流程,具体包括:

3.根据权利要求2所述的数据的处理方法,其特征在于,所述基于所述数据质量标记字典和所述文件信息的比对结果执行或取消执行对所述待处理文件进行处理的流程,还包括:

4.根据权利要求1所述的数据的处理方法,其特征在于,执行对所述待处理文件进行处理的流程之后,所述数据的处理方法还包...

【技术特征摘要】

1.一种数据的处理方法,其特征在于,包括:

2.根据权利要求1所述的数据的处理方法,其特征在于,所述数据质量标记字典包括身份识别信息以及与所述身份识别信息对应的质量标记信息,所述基于所述数据质量标记字典和所述文件信息的比对结果执行或取消执行对所述待处理文件进行处理的流程,具体包括:

3.根据权利要求2所述的数据的处理方法,其特征在于,所述基于所述数据质量标记字典和所述文件信息的比对结果执行或取消执行对所述待处理文件进行处理的流程,还包括:

4.根据权利要求1所述的数据的处理方法,其特征在于,执行对所述待处理文件进行处理的流程之后,所述数据的处理方法还包括:

5.根据权利要求1至4中任一项所述的数据的处理方法,其特征在于,所述第一服务节点包括以下任一服务节点:

6.一种数据的处理装置,其特征在于,包括:

7.根据...

【专利技术属性】
技术研发人员:宋尚静
申请(专利权)人:维沃移动通信有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1