数据处理方法及装置制造方法及图纸

本公开涉及一种数据处理方法及装置。所述方法包括：将第一数据表的第一字段与标准数据表的第二字段进行映射生成第二数据表，其中，所述第二字段为所述第一字段的标准字段，在所述第二数据表中包括所述第一字段和所述第二字段之间的关联关系；根据所述第二数据表对第一数据表中第一字段的数据进行更新，生成第三数据表。本公开可以达到治理业务数据的目的，可以提升数据质量、业务系统数据的规范性，并且可以提升数据对业务系统分析的支持度。

【技术实现步骤摘要】
数据处理方法及装置
本公开涉及计算机
，尤其涉及一种数据处理方法及装置。
技术介绍
随着计算机技术、网络技术的高速发展发展，信息化建设的需求逐步转化为业务系统全局范围内开展综合应用的需求，对数据的共享和数据的质量提出了更高要求，业务方希望有效解决各应用系统之间的主数据共享与交换，积累高质量的数据。因此，如何保证业务方各应用系统之间的数据共享与交换，如何为数据分析提供高质量的数据成了当下急需解决的问题。
技术实现思路
有鉴于此，本公开提出了一种数据处理方法及装置，用于提升业务系统中的数据质量，达到数据治理的目的。根据本公开的一方面，提出了一种数据处理方法，所述方法包括：将第一数据表的第一字段与标准数据表的第二字段进行映射生成第二数据表，其中，所述第二字段为所述第一字段的标准字段，在所述第二数据表中包括所述第一字段和所述第二字段之间的关联关系；根据所述第二数据表对第一数据表中第一字段的数据进行更新，生成第三数据表。在一种可能的实施方式中，所述将第一数据表的第一字段与标准数据表的第二字段进行映射生成第二数据表，包括：对所述第一字段中的数据进行去重，获取去重后的第一字段；将所述去重后的第一本文档来自技高网...

【技术保护点】
1.一种数据处理方法，其特征在于，所述方法包括：将第一数据表的第一字段与标准数据表的第二字段进行映射生成第二数据表，其中，所述第二字段为所述第一字段的标准字段，在所述第二数据表中包括所述第一字段和所述第二字段之间的关联关系；根据所述第二数据表对第一数据表中第一字段的数据进行更新，生成第三数据表。

【技术特征摘要】
1.一种数据处理方法，其特征在于，所述方法包括：将第一数据表的第一字段与标准数据表的第二字段进行映射生成第二数据表，其中，所述第二字段为所述第一字段的标准字段，在所述第二数据表中包括所述第一字段和所述第二字段之间的关联关系；根据所述第二数据表对第一数据表中第一字段的数据进行更新，生成第三数据表。2.根据权利要求1所述的方法，其特征在于，所述将第一数据表的第一字段与标准数据表的第二字段进行映射生成第二数据表，包括：对所述第一字段中的数据进行去重，获取去重后的第一字段；将所述去重后的第一字段的数据与所述第二字段的数据进行匹配，获取匹配数据及非匹配数据，其中，所述匹配数据为所述去重后的第一字段中与所述第二字段中的数据一致的数据，所述非匹配数据为所述去重后的第一字段中与所述第二字段中的数据不一致的数据；将所述非匹配数据与所述标准数据表的第二字段的数据进行映射，生成映射结果，所述映射结果包括所述非匹配数据的第一字段与所述第二字段的关联关系；根据所述匹配数据和所述映射结果生成第二数据表。3.根据权利要求2所述的方法，其特征在于，所述将第一数据表的第一字段与标准数据表的第二字段进行映射生成第二数据表，还包括：在“对所述第一字段中的数据进行去重”之前，根据所述第一字段中的数据的关键词对所述第一字段中的数据进行分组，以将所述第一字段中具有相同关键词的数据划分到一个分组。4.根据权利要求3所述的方法，其特征在于，对所述第一字段中的数据进行去重，获取去重后的第一字段，包括：对每个分组中第一字段的数据进行去重，获取去重后的第一字段。5.根据权利要求1任一项所述的方法，其特征在于，所述根据所述第二数据表对第一数据表中第一字段的数据进行更新，包括：在所述第一数据表中的第一字段的数据与所述第二数据表中的第一字段的数据相同时，将所述第一数据表中该第一字段的数据更新为所述第二数据表中该第一字段对应的第二字段的数据。6.一种数据处理装置，其特征在于，所述装置包括：映射模块，用于将第一数据表的第一字段与标准数据表的第二字段进行映射生成第二数据表，其中，所述第二字段为所述第一字段的标准字段，在所述第二数据表中包括所述第一...

【专利技术属性】
技术研发人员：吴亚兵，
申请(专利权)人：新华三大数据技术有限公司，
类型：发明
国别省市：河南,41