数据调整方法、装置、计算机设备和存储介质制造方法及图纸

技术编号:43420346 阅读:18 留言:0更新日期:2024-11-22 17:54
本申请涉及一种数据调整方法、装置、计算机设备和存储介质。所述方法包括:获取不同原始数据中预设字段对应的至少一个目标数据,并提取各目标数据中的目标数据特征;将与预设的参考数据特征相匹配的目标数据特征所对应的目标数据,作为目标参考数据;分别通过预设的质量评估规则对各目标参考数据进行质量评估,得到相应目标参考数据的质量评估结果;根据各质量评估结果,对各原始数据进行调整,得到相应原始数据的调整数据。采用本方法能够有效提高对目标数据的评估效率,进而提高数据质量检查和调整的效率。

【技术实现步骤摘要】

本申请涉及计算机,特别是涉及一种数据调整方法、装置、计算机设备和存储介质


技术介绍

1、多种业务的分析开展依赖于大数据,数据处理的第一步是需要对数据的质量进行检查,防止不正确或不符合处理格式的数据进入下一步处理,影响数据处理效率。

2、传统技术中,对于采集到的不同数据,一般都是人工设置对应的检查规则,例如a字段不能出现文字、b字段不能出现空值等。但是实际上,很多数据的字段虽然命名不同,但是检查规则可能是一致的,在数据种类繁多的情况下,针对每一种数据分别人工设置对应的检查规则,需要耗费大量的时间,效率低下。


技术实现思路

1、基于此,有必要针对上述技术问题,提供一种能够提高数据处理效率的数据调整方法、装置、计算机设备和存储介质。

2、第一方面,本申请提供了一种数据调整方法,包括:

3、获取不同原始数据中预设字段对应的至少一个目标数据,并提取各目标数据中的目标数据特征;

4、将与预设的参考数据特征相匹配的目标数据特征所对应的目标数据,作为目标参考数据;

...

【技术保护点】

1.一种数据调整方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述根据各所述质量评估结果,对各所述原始数据进行调整,得到相应原始数据的调整数据,包括:

3.根据权利要求2所述的方法,其特征在于,所述根据各所述待调整数据的基础质量评分,对各原始数据进行调整,得到相应原始数据的调整数据,包括:

4.根据权利要求3所述的方法,其特征在于,所述根据所述待调整数据的基础质量评分,确定所述待调整数据对应各原始数据的可信评分,包括:

5.根据权利要求3所述的方法,其特征在于,根据各所述原始数据的可信评分,对各所述原始数据进行...

【技术特征摘要】

1.一种数据调整方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述根据各所述质量评估结果,对各所述原始数据进行调整,得到相应原始数据的调整数据,包括:

3.根据权利要求2所述的方法,其特征在于,所述根据各所述待调整数据的基础质量评分,对各原始数据进行调整,得到相应原始数据的调整数据,包括:

4.根据权利要求3所述的方法,其特征在于,所述根据所述待调整数据的基础质量评分,确定所述待调整数据对应各原始数据的可信评分,包括:

5.根据权利要求3所述的方法,其特征在于,根据各所述原始数据的可信评分,对各所述原始数据进行调整,得到相应原始数据的调整数据,包括:

【专利技术属性】
技术研发人员:桂媛刘厚钦黄山王谦陈令曦夏武张桂源
申请(专利权)人:南方电网互联网服务有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1