一种异构数据的转换方法、装置及存储介质制造方法及图纸

本公开涉及计算机领域，公开了一种异构数据的转换方法、装置及存储介质，该方法为：客户端获取异构数据集合，并确定其包含的各个异构数据对应的多种不同的初始数据格式，将每一种初始数据格式对应的一个异构数据，转换为与一个异构数据对应的目标数据库的目标数据格式，基于转换过程，生成一种初始数据格式对应的格式转换方式，转换过程中按照格式转换方式，将异构数据集合中符合一种初始数据格式的各个异构数据，均转换为相应的目标数据格式，并分别读取各个异构数据的数值，将获得的各个数值与相应的目标数据格式进行组合，获得相应的目标数据并存储至目标数据库中，省去了大量异构数据逐一进行结构转换所消耗的工作量，提升了转换效率。转换效率。转换效率。

【技术实现步骤摘要】
一种异构数据的转换方法、装置及存储介质


[0001]本申请涉及计算机技术，特别涉及一种异构数据的转换方法、装置及存储介质。

技术介绍

[0002]信息化时代，不同的应用场景中需要很多不同的电子设备，而每一个电子设备在处理过程中都会产生大量的处理数据。例如，交通领域，行车道上抓拍摄像头产生的车辆数据、公司门禁产生的上下班打卡数据、手机使用过程中产生的通信数据等等。
[0003]由于，电子设备的差异，通常上述处理数据的格式也不相同，这样，在综合运用过程中，即不同数据库在调用上述这些数据时，就需要将上述这些结构各异、内容不同的数据，逐一进行格式转换，在格式统一后才能提取数据进行综合处理，显然上述处理过程会耗费大量的工作，不同格式数据处理的过程效率低下。

技术实现思路

[0004]本公开实施例提供一种异构数据的转换方法、装置及存储介质，用以提升不同格式数据的转换效率。
[0005]本公开提供的具体技术方案如下：
[0006]第一方面，一种异构数据的转换方法，方法应用于客户端，包括：
[0007]获取异构数据集合，并确定异构数据集合包含的各个异构数据对应的多种不同的初始数据格式；
[0008]将一种初始数据格式对应的一个异构数据，转换为与一个异构数据对应的目标数据库的目标数据格式，以及基于转换过程，生成一种初始数据格式对应的格式转换方式；
[0009]按照格式转换方式，将异构数据集合中符合一种初始数据格式的各个异构数据，均转换为相应的目标数据格式；
[0010]分别读取各个异构数据的数值，以及，分别将获得的各个数值与相应的目标数据格式进行组合，获得相应的目标数据；
[0011]将获得的各个目标数据，分别存储至目标数据库中。
[0012]可选地，获取异构数据集合，并确定异构数据集合包含的各个异构数据对应的多种不同的初始数据格式之后，以及，在将获得的各种初始数据格式分别转换为相应的目标数据格式之前，还包括：
[0013]判断异构数据集合中的各个异构数据是否包括字符和数字；
[0014]若是，剔除各个异构数据中的字符和数字。
[0015]可选地，将一种初始数据格式对应的一个异构数据，转换为与一个异构数据对应的目标数据库的目标数据格式，以及基于转换过程，生成一种初始数据格式对应的格式转换方式，包括：
[0016]查找一种初始数据格式对应的一个异构数据对应的目标数据库，并获取目标数据库的目标数据格式；其中，目标数据库用于存储格式转换后的异构数据；
[0017]将初始数据格式转换为目标数据格式；
[0018]基于转换过程中初始数据格式和目标数据格式之间的映射关系，获得一种初始数据格式对应的格式转换方式。
[0019]可选地，查找一种初始数据格式对应的一个异构数据对应的目标数据库，并获取目标数据库的目标数据格式，包括：
[0020]当查找到一种初始数据格式对应的一个异构数据对应的目标数据库的个数为多个时，分别获取各个目标数据库的目标数据格式；
[0021]或者，
[0022]当查找到一种初始数据格式对应的一个异构数据对应的目标数据库包括多个目标数据表时，分别获取各个目标数据表的目标数据格式。
[0023]可选地，按照格式转换方式，将异构数据集合中符合一种初始数据格式的各个异构数据，均转换为相应的目标数据格式，包括：
[0024]查找异构数据集合中待转换的各个异构数据符合的一种初始数据格式；
[0025]获取一种初始数据格式对应的格式转换方式；
[0026]分别将待转换的各个异构数据按照格式转换方式，均转换为相应的目标数据格式。
[0027]可选地，初始数据格式至少包括以下格式中的任意一种或任意组合：
[0028]映射map格式；
[0029]链表list格式；
[0030]对象简谱JSON格式；
[0031]超文本标记语言HTML格式。
[0032]可选地，目标数据库至少包括以下数据库中的任意一种或任意组合：
[0033]对比关系型ES数据库；
[0034]开源对象关系型PG数据库；
[0035]分析型ADS数据库；
[0036]实例型ORACLE数据库。
[0037]第二方面，一种异构数据的转换装置，包括：
[0038]获取单元，用于获取异构数据集合，并确定异构数据集合包含的各个异构数据对应的多种不同的初始数据格式；
[0039]执行单元，用于将一种初始数据格式对应的一个异构数据，转换为与一个异构数据对应的目标数据库的目标数据格式，以及基于转换过程，生成一种初始数据格式对应的格式转换方式；
[0040]转换单元，用于按照格式转换方式，将异构数据集合中符合一种初始数据格式的各个异构数据，均转换为相应的目标数据格式；
[0041]读取单元，用于分别读取各个异构数据的数值，以及，分别将获得的各个数值与相应的目标数据格式进行组合，获得相应的目标数据；
[0042]存储单元，用于将获得的各个目标数据，分别存储至目标数据库中。
[0043]可选地，获取异构数据集合，并确定异构数据集合包含的各个异构数据对应的多种不同的初始数据格式之后，以及，在将获得的各种初始数据格式分别转换为相应的目标
数据格式之前，还包括判断单元，判断单元用于：
[0044]判断异构数据集合中的各个异构数据是否包括字符和数字；
[0045]若是，剔除各个异构数据中的字符和数字。
[0046]可选地，将一种初始数据格式对应的一个异构数据，转换为与一个异构数据对应的目标数据库的目标数据格式，以及基于转换过程，生成一种初始数据格式对应的格式转换方式，执行单元用于：
[0047]查找一种初始数据格式对应的一个异构数据对应的目标数据库，并获取目标数据库的目标数据格式；其中，目标数据库用于存储格式转换后的异构数据；
[0048]将初始数据格式转换为目标数据格式；
[0049]基于转换过程中初始数据格式和目标数据格式之间的映射关系，获得一种初始数据格式对应的格式转换方式。
[0050]可选地，查找一种初始数据格式对应的一个异构数据对应的目标数据库，并获取目标数据库的目标数据格式，执行单元用于：
[0051]当查找到一种初始数据格式对应的一个异构数据对应的目标数据库的个数为多个时，分别获取各个目标数据库的目标数据格式；
[0052]或者，
[0053]当查找到一种初始数据格式对应的一个异构数据对应的目标数据库包括多个目标数据表时，分别获取各个目标数据表的目标数据格式。
[0054]可选地，按照格式转换方式，将异构数据集合中符合一种初始数据格式的各个异构数据，均转换为相应的目标数据格式，转换单元用于：
[0055]查找异构数据集合中待转换的各个异构数据符合的一种初始数据格式；
[0056]获本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种异构数据的转换方法，其特征在于，所述方法应用于客户端，该方法包括：获取异构数据集合，并确定所述异构数据集合包含的各个异构数据对应的多种不同的初始数据格式；将一种初始数据格式对应的一个异构数据，转换为与所述一个异构数据对应的目标数据库的目标数据格式，以及基于转换过程，生成所述一种初始数据格式对应的格式转换方式；按照所述格式转换方式，将所述异构数据集合中符合所述一种初始数据格式的各个异构数据，均转换为相应的目标数据格式；分别读取所述各个异构数据的数值，以及，分别将获得的各个数值与相应的目标数据格式进行组合，获得相应的目标数据；将获得的所述各个目标数据，分别存储至所述目标数据库中。2.如权利要求1所述的方法，其特征在于，所述获取异构数据集合，并确定所述异构数据集合包含的各个异构数据对应的多种不同的初始数据格式之后，以及，在将获得的各种初始数据格式分别转换为相应的目标数据格式之前，还包括：判断所述异构数据集合中的所述各个异构数据是否包括字符和数字；若是，剔除所述各个异构数据中的所述字符和所述数字。3.如权利要求1所述的方法，其特征在于，所述将一种初始数据格式对应的一个异构数据，转换为与所述一个异构数据对应的目标数据库的目标数据格式，以及基于转换过程，生成所述一种初始数据格式对应的格式转换方式，包括：查找所述一种初始数据格式对应的一个异构数据对应的目标数据库，并获取所述目标数据库的目标数据格式；其中，所述目标数据库用于存储格式转换后的所述异构数据；将所述初始数据格式转换为所述目标数据格式；基于转换过程中所述初始数据格式和所述目标数据格式之间的映射关系，获得所述一种初始数据格式对应的格式转换方式。4.如权利要求3所述的方法，其特征在于，所述查找所述一种初始数据格式对应的一个异构数据对应的目标数据库，并获取所述目标数据库的目标数据格式，包括：当查找到所述一种初始数据格式对应的一个异构数据对应的目标数据库的个数为多个时，分别获取所述各个目标数据库的目标数据格式；或者，当查找到所述一种初始数据格式对应的一个异构数据对应的目标数据库包括多个目标数据表时，分...

【专利技术属性】
技术研发人员：余鹏展，周明伟，
申请(专利权)人：浙江大华技术股份有限公司，
类型：发明
国别省市：