数据接入处理方法和装置制造方法及图纸

本申请提出一种数据接入处理方法和装置，其中，所述方法包括：从至少一个接入终端的业务数据中提取原始数据；将原始数据与标准格式数据的字段进行匹配，确定与原始数据对应的映射字段；根据原始数据与映射字段的对应关系，生成与接入终端对应的转换脚本。本申请实施例的数据接入处理方法和装置，可在接收接入终端的业务数据后，自动将异构格式的业务数据映射成标准格式数据，提高了业务数据的转换效率，节省了人力，且有利于业务拓展。

Data access processing method and device

The invention provides a data access processing method and device, wherein, the method comprises the following steps: extracting the original data from the business data of at least one access terminal; the matching field of original data and the standard data, determine the mapping field corresponding to the original data; according to the correspondence between the original data and the mapping field. Convert and access terminal corresponding to the script. Access to the data processing method and device of the embodiment of the invention, the business data receiving terminal, automatic map business heterogeneous data format into a standard format of data, improve the conversion efficiency of business data, save manpower, and is conducive to business development.

【技术实现步骤摘要】
数据接入处理方法和装置
本申请涉及数据处理领域，尤其涉及一种数据接入处理方法和装置。
技术介绍
为了减少水、电、气等收费单位以及银行等的发账单成本，出现了与互联网对接的电子形式的账单数据，即电子账单。以支付宝的电子账单发送平台为例，该平台业务流程大体是：若干水、电、气等收费单位以及银行将数据提供给支付宝，由支付宝对数据信息进行处理，进而将处理后的数据推送给相应用户。出于准确性和可靠性的考虑，处理平台一般都需要标准化结构的数据，而上述的水、电、气等收费单位以及银行提供的数据的结构一般都不相同，尤其是当数据提供单位规模较大时，这种“映射”的工作量和沟通是非常大的，因此需要花费大量的人工成本将个性化的数据结构转换为标准的数据结构。这必然会使得处理平台接入业务数据模型的成本高，对处理平台本身的支撑能力是一个挑战，且业务数据接入的效率低，不利于处理平台自身业务的拓展。
技术实现思路
本申请旨在至少在一定程度上解决相关技术中的技术问题之一。为此，本申请的第一个目的在于提出一种数据接入处理方法，该方法能够使将接收的异构格式数据，自动映射成标准格式数据，提高了异构格式数据的转换效率，节省了人力，有利于处本文档来自技高网...

【技术保护点】
一种数据接入处理方法，其特征在于，包括以下步骤：从至少一个接入终端的业务数据中提取原始数据；将所述原始数据与标准格式数据的字段进行匹配，确定与所述原始数据对应的映射字段；根据所述原始数据与所述映射字段的对应关系，生成与接入终端对应的转换脚本。

【技术特征摘要】
1.一种数据接入处理方法，其特征在于，包括以下步骤：从至少一个接入终端的业务数据中提取原始数据；将所述原始数据与标准格式数据的字段进行匹配，确定与所述原始数据对应的映射字段；根据所述原始数据与所述映射字段的对应关系，生成与接入终端对应的转换脚本。2.如权利要求1所述的方法，其特征在于，所述从至少一个接入终端的业务数据中提取原始数据，包括：从所述业务数据中提取实验数据；从所述实验数据中提取所述原始数据。3.如权利要求1所述的方法，其特征在于，所述业务数据包括：至少一个接入终端初次上传的业务数据；或者，至少一个接入终端上传到的历史业务数据。4.如权利要求1所述的方法，其特征在于，所述从至少一个接入终端的业务数据中提取原始数据，包括：根据预设的分隔符列表识别所述业务数据中的分隔符；如果所述业务数据包括一种类型的分隔符，则根据所述分隔符对所述业务数据进行数据拆分获取原始数据。5.如权利要求4所述的方法，其特征在于，还包括：如果所述业务数据包括多种类型的分隔符，则根据所有类型的分隔符，依次对所述业务数据进行数据拆分获取多组候选的原始数据；根据所述标准格式数据的格式信息与所述多组候选的原始数据进行匹配，分别获取每组候选的原始数据与所述标准格式数据的匹配度；比较所有的匹配度，选择匹配度最高的候选原始数据。6.如权利要求5所述的方法，其特征在于，所述标准格式数据的格式信息包括以下至少之一：字段数量，关键字符。7.如权利要求1所述的方法，其特征在于，所述将所述原始数据与标准格式数据的字段进行匹配，确定与所述原始数据对应的映射字段，包括：根据与所述标准格式数据的各字段对应的解析器，识别所述标准格式数据中与所述原始数据匹配的字段；如果与所述原始数据匹配成功的为一个字段，则将所述字段确定为与所述原始数据对应的映射字段。8.如权利要求7所述的方法，其特征在于，还包括：如果与所述原始数据匹配成功的为多个候选字段，则确定与每个候选字段对应的权重，并发送到控制中心进行确认，并将与确认结果对应的字段确定为与所述原始数据对应的映射字段。9.如权利要求7所述的方法，其特征在于，在所述识别所述标准格式数据中与所述原始数据匹配的字段之前，还包括：根据业务类型以及所述标准格式数据中的字段特征，生成与所述标准格式数据的每个字段对应的解析器。10.如权利要求1所述的方法，其特征在于，在所述生成与各接入终端对应的转换脚本之后，还包括：检测接入终端的业务运行状况；如果检测获知所述业务运行状况不符合预设指标，则调整相应接入终端中所述原始数据与所述映射字段的对应关系，并更新对应的转换脚本。11.一种数据接入处理方法，其特征在于，包括以下步骤：接收携带接入终端标识的业务数据；获取与所述接入终端标识对应的转换脚本，其中，所述转换脚本是根据所述业务数据中的原始数据与标准格式数据的映射字段的对应关系生成的；根据所述转换脚本完成所述业务数据到所述标准格式数据的映射。12.如权利要求11所述的方法，其特征在于，还包括：如果没有存储与所述接入终端标识对应的转换脚本，则将所述业务数据中的原始数据与所述标准格式数据的字段进行匹配，确定与所述原始数据对应的映射字段，进而生成与所述接入终端标识对应的转换脚本。13.一种数据接入处理装置，其特征在于，包括：提取模块，用于从至少一个接入终端的业务数据中提取原始数据；匹配确定模块...

【专利技术属性】
技术研发人员：冯照临，
申请(专利权)人：阿里巴巴集团控股有限公司，
类型：发明
国别省市：开曼群岛,KY