一种数据处理方法和装置制造方法及图纸

本申请实施例提供了一种数据处理方法和装置，所述方法包括：从预设数据源加载原始数据集；将所述原始数据集转换为预设数据格式的格式化数据集；获取针对预设算子的编排信息；采用所述预设算子以及所述编排信息，生成数据集运算模型；按照所述数据集运算模型对至少两个格式化数据集进行分析处理，得到数据分析结果。通过本申请实施例的数据处理方法，用户可以从不同的数据源加载原始数据集，将原始数据集转换为预设数据格式的格式化数据集，完成对多种数据集的统一对接，对算子的编排操作简单、便捷，便于用户对数据集实现所需的数据集计算。计算。计算。

【技术实现步骤摘要】
一种数据处理方法和装置


[0001]本申请涉及数据
，特别是涉及一种数据处理方法和一种数据处理装置。

技术介绍

[0002]随着互联网、物联网的发展，很多领域的数据都发生了爆炸性的增长，这些庞大的数据资源，大数据分析是一种发现数据之中的规律的数据处理方法，随着大数据业务的不断扩展，业务场景越来越复杂，需要编写各种模型才能有效对数据进行分析。
[0003]对于大部分不懂得的数据分析模型的用户而言，即使拥有数据资源，也不懂得分析出数据中的信息。而对于懂得的数据分析模型的用户而言，仍然需要针对数据特性发开出特定的模型，费时费力，不能实时、快速地完成数据分析。

技术实现思路

[0004]鉴于上述问题，提出了本申请实施例以便提供一种克服上述问题或者至少部分地解决上述问题的一种数据处理方法和相应的一种数据处理装置。
[0005]为了解决上述问题，本申请实施例公开了一种数据处理方法，包括：
[0006]从预设数据源加载原始数据集；
[0007]将所述原始数据集转换为预设数据格式的格式化数据集；
[本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种数据处理方法，其特征在于，包括：从预设数据源加载原始数据集；将所述原始数据集转换为预设数据格式的格式化数据集；获取针对预设算子的编排信息；采用所述预设算子以及所述编排信息，生成数据集运算模型；按照所述数据集运算模型对至少两个格式化数据集进行分析处理，得到数据分析结果。2.根据权利要求1所述的方法，其特征在于，所述从预设数据源加载原始数据集，包括：针对预设数据源创建挂载点；从所述挂载点加载原始数据集。3.根据权利要求1所述的方法，其特征在于，在将所述原始数据集转换为预设数据格式的格式化数据集之前，还包括：获取用户输入的字段数目和字段类型；按照所述字段数目和字段类型，确定目标数据格式。4.根据权利要求3所述的方法，其特征在于，所述将所述原始数据集转换为预设数据格式的格式化数据集，包括：将所述原始数据集，转换为所述目标数据格式的格式化数据集。5.根据权利要求1所述的方法，其特征在于，在获取针对预设算子的编排信息之前，还包括；生成并展现数据集运算模型编辑界面；检测用户在所述数据集运算模型编辑界面触发的算子选择操作，并响应所述算子选择操作确定对应目标预设算子；检测用户在所述数据集运算模型编辑界面的编排操作，并响应所述编排操作，生成针对所述目标预设算子的编排信息。6.根据权利要求1所述的方法，其特征在于，所述数据集运算模型具有至少两个输入节点；在按照所述数据集运算模型对至少两个格式化数据集进行数据集运行，得到数据分析结果之前，还包括：生成并展现输入节点选择界面；接收用户在所述输入节点选择界面输入的选择信息；将所述选择信息对应的格式化数据集，作为输入节点对应的格式化数据集。7.根据权利要求1所述的方法，其特征在于，所述按照所述数据集运算模型对至少两个格式化数据集进行分析处理，得到数据分析结果，包括：采用所述数据集运算模型和所述格式化数据，生成可执行实例；运行所述可执行实例，得到数据分析结果。8.一种数据处理装置，其特征在于，包括：原始数据集加载模块，用于从预设数据源加载原始数据集；格式转换模块，用于将所述原始数据集转换为预设数据格式的格式化数据集；编排信息获取模块，用于获取针对预设算子的编排信息；数据集运算模型生成模块，用于采用所述预设算子以及所述编排信息，生成数据集运
算模型；数据分析模块，用于按照所述数据集运算模型对至少两个格式化数据集进...

【专利技术属性】
技术研发人员：江小辉，杨馨惠，杨斌，叶志坚，
申请(专利权)人：阿里巴巴集团控股有限公司，
类型：发明
国别省市：