多源异构数据的自动化转换方法和装置制造方法及图纸

本申请提供了一种多源异构数据的自动化转换方法和装置，涉及数据管理技术领域，其中，所述方法包括：接收多个数据源发送的数据，其中，所述数据的数据结构包括多种格式；对于其中的一种格式的当前数据，对所述当前数据的格式类型进行识别，确定对应的编码；根据所述编码，确定对应的转换规则；根据所述转换规则对所述当前数据的格式进行转换，输出标准化数据。以此方式，能够对输入的数据进行自动识别和转换，从而能够提高数据转换的效率，降低数据转换的成本。据转换的成本。据转换的成本。

【技术实现步骤摘要】
多源异构数据的自动化转换方法和装置


[0001]本申请的实施例一般涉及数据管理
，并且更具体地，涉及多源异构数据的自动化转换方法和装置。

技术介绍

[0002]在大数据管理系统中，需要对各类原始输入数据进行读取和转换。由于这些数据往往都是多源异构的数据，即不仅来源不同且结构也不一样，所以往往需要大量的人工进行预先分析处理。人工处理方式不仅效率低下，而且经常会进行重复性的工作，造成人力成本的浪费，同时也不利于对数据的管理。

技术实现思路

[0003]有鉴于此，本申请的实施例，提供了一种多源异构数据的自动化转换方法和装置，用于对输入的数据进行自动识别和转换。
[0004]在本申请的第一方面，提供一种多源异构数据的自动化转换方法，包括：接收多个数据源发送的数据，其中，所述数据的数据结构包括多种格式；对于其中的一种格式的当前数据，对所述当前数据的格式类型进行识别，确定对应的编码；根据所述编码，确定对应的转换规则；根据所述转换规则对所述当前数据的格式进行转换，输出标准化数据。
[0005]在一些实施例中，所述对所述当本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.多源异构数据的自动化转换方法，其特征在于，包括：接收多个数据源发送的数据，其中，所述数据的数据结构包括多种格式；对于其中的一种格式的当前数据，对所述当前数据的格式类型进行识别，确定对应的编码；根据所述编码，确定对应的转换规则；根据所述转换规则对所述当前数据的格式进行转换，输出标准化数据。2.根据权利要求1所述的自动化转换方法，其特征在于，所述对所述当前数据的格式类型进行识别，确定对应的编码，包括：使用统一接口定义识别方式，对数据的格式类型进行识别，确定对应的编码。3.根据权利要求2所述的自动化转换方法，其特征在于，所述根据所述编码，确定对应的转换规则，包括：将所述编码与转换规则库中的转换规则进行匹配，将匹配成功的转换规则确定为所述编码的转换规则。4.根据权利要求3所述的自动化转换方法，其特征在于，所述转换规则库中存储有不同的编码标识以及与编码标识对应的转换规则；所述将所述编码与转换规则库中的转换规则进行匹配，将匹配成功的转换规则确定为所述编码的转换规则，包括：将所述编码与转换规则库中的编码标识进行匹配，若匹配成功，则将匹配成功的转换规则确定为所述编码的转换规则。5.根据权利要求4所述的自动化转换方法，其特征在于，还包括：若匹配不成功，则由人...

【专利技术属性】
技术研发人员：郝伟，沈传宝，李宏发，纪文，刘文亮，沈立翔，
申请(专利权)人：安徽华云安科技有限公司，
类型：发明
国别省市：