数据处理的方法、装置及存储介质制造方法及图纸

本发明专利技术实施例公开了一种数据处理方法、装置及存储介质，该数据处理的方法包括：服务器接收由终端发送的上传信息，上传信息包括待上传文件、目标存储方式、存储数据表的标识和目标存储路径；进而，服务器根据存储数据表的标识在目标存储路径确定的文件夹中查找述存储数据表；最后，服务器将待上传文件以目标存储方式存储到存储数据表中。可以知道，服务器通过获取上传信息，自动将上传信息包括的待上传文件存储到大数据平台指定的存储数据表中，提高了将文件上传到大数据平台的效率，也减少了人为上传数据文件导致的失误率。

【技术实现步骤摘要】
数据处理的方法、装置及存储介质
本专利技术涉及大数据领域，尤其涉及一种数据处理的方法、装置及存储介质。
技术介绍
大数据平台是一种集数据接入、数据处理、数据存储、查询检索、分析挖掘、应用接口等为一体的平台，数据表是大数据平台存储信息的重要存储形式。现有技术中，将数据文件上传至大数据平台，需要手动编写针对每一个数据文件的代码，从而使服务器执行相应的命令，将数据文件上传至大数据平台保存。可以知道，人为编写代码上传数据文件难免导致效率低下、容易出错等情况。因此，如何提高将数据文件上传至大数据平台的效率，是目前亟待解决的技术问题。
技术实现思路
本专利技术实施例提供了一种数据处理的方法、装置及存储介质，可以实现自动将上传信息包括的待上传文件存储到大数据平台指定的存储数据表中，从而提高数据上传到大数据平台的效率，减少人工操作的失误率。第一方面，本专利技术实施例提供了一种数据处理方法，所述数据处理方法包括：接收由终端发送的上传信息，所述上传信息包括待上传文件、目标存储方式、存储数据表的标识和目标存储路径；根据所述存储数据表的标识在所述目标存储路径确定的文件夹中查找所述存储数据表；将所述待上传文件以所述目标存储方式存储到所述存储数据表中。在一种可能的实现方式中，所述上传信息还包括表结构，所述表结构包括N个字段，所述根据所述存储数据表的标识在所述目标存储路径确定的文件夹中查找所述存储数据表之前，所述方法还包括：根据所述存储数据表的标识和所述表结构在所述目标存储路径下创建所述存储数据表，所述存储数据表包括所述N个字段。在一种可能的实现方式中，所述待上传文件包括M个字段分别对应的数据，M为正整数，所述将所述待上传文件以所述目标存储方式存储到所述存储数据表中，具体包括：从所述待上传文件中获取所述M个字段分别对应的数据；将获取到的数据以所述目标存储方式存储到所述存储数据表中。在一种可能的实现方式中，所述从所述待上传文件中获取所述M个字段分别对应的数据之前，所述方法还包括：在判断所述待上传文件的格式为xls或xlsx的情况下，将所述待上传文件的格式转换为CSV格式。在一种可能的实现方式中，所述待上传文件包括M个字段分别对应的数据，M为正整数，所述存储数据表包括N个字段，所述将所述待上传文件以所述目标存储方式存储到所述存储数据表中，包括：从所述M字段中获取待存储字段；在所述N个字段中包括所述待存储字段时，将所述待存储字段对应的数据以所述目标存储方式存储到所述存储数据表中所述待存储字段对应的目标位置。在一种可能的实现方式中，所述目标存储方式用于指示所述待上传文件的数据存储至所述存储数据表中的所述目标位置。第二方面，本申请实施例公开一种数据处理方法，所述数据处理方法包括：根据接收到的待上传文件、目标存储方式、存储数据表的标识和目标存储路径生成上传信息；向服务器发送所述上传信息，所述上传信息用于指示所述服务器根据所述存储数据表的标识在所述目标存储路径确定的文件夹中查找所述存储数据表，并将所述待上传文件以所述目标存储方式存储到所述存储数据表中。在一种可能的实现方式中，所述待上传文件的格式为CSV、xls、xlsx、txt中的至少一种。第三方面，本申请实施例公开一种数据处理装置，包括：接收单元，用于接收由终端发送的上传信息，所述上传信息包括待上传文件、目标存储方式、存储数据表的标识和目标存储路径；查找单元，用于根据所述存储数据表的标识在所述目标存储路径确定的文件夹中查找所述存储数据表；存储单元，用于将所述待上传文件以所述目标存储方式存储到所述存储数据表中。在一种可能的实现方式中，所述上传信息还包括表结构，所述表结构包括N个字段，所述查找单元根据所述存储数据表的标识在所述目标存储路径确定的文件夹中查找所述存储数据表之前，所述装置还包括：创建单元，用于根据所述存储数据表的标识和所述表结构在所述目标存储路径下创建所述存储数据表，所述存储数据表包括所述N个字段。在一种可能的实现方式中，所述待上传文件包括M个字段分别对应的数据，M为正整数，所述存储单元将所述待上传文件以所述目标存储方式存储到所述存储数据表中，具体包括：从所述待上传文件中获取所述M个字段分别对应的数据；将获取到的数据以所述目标存储方式存储到所述存储数据表中。在一种可能的实现方式中，所述存储单元从所述待上传文件中获取所述M个字段分别对应的数据之前，所述装置还包括：转换单元，用于在判断所述待上传文件的格式为xls或xlsx的情况下，将所述待上传文件的格式转换为CSV格式。在一种可能的实现方式中，所述待上传文件包括M个字段分别对应的数据，M为正整数，所述存储数据表包括N个字段，所述存储单元将所述待上传文件以所述目标存储方式存储到所述存储数据表中，具体包括：从所述M字段中获取待存储字段；在所述N个字段中包括所述待存储字段时，将所述待存储字段对应的数据以所述目标存储方式存储到所述存储数据表中所述待存储字段对应的目标位置。在一种可能的实现方式中，所述目标存储方式用于指示所述待上传文件的数据存储至所述存储数据表中的所述目标位置。第四方面，本申请实施例公开一种数据处理装置，包括：生成单元，用于根据接收到的待上传文件、目标存储方式、存储数据表的标识和目标存储路径生成上传信息；发送单元，用于向服务器发送所述上传信息，所述上传信息用于指示所述服务器根据所述存储数据表的标识在所述目标存储路径确定的文件夹中查找所述存储数据表，并将所述待上传文件以所述目标存储方式存储到所述存储数据表中。在一种可能的实现方式中，所述待上传文件的格式为CSV、xls、xlsx、txt中的至少一种。第五方面，本申请实施例公开一种数据处理的装置，该数据处理装置包括处理器和存储器，所述处理器和存储器耦合，其中，所述存储器用于存储计算机指令，所述处理器用于执行所述计算机指令，调用所述程序代码，以实现第一方面的实施例所公开的数据处理方法。第六方面，本申请实施例公开一种数据处理的装置，该数据处理装置包括处理器和存储器，所述处理器和存储器耦合，其中，所述存储器用于存储计算机指令，所述处理器用于执行所述计算机指令，调用所述程序代码，以实现第二方面的实施例所公开的数据处理方法。第七方面，本申请实施例提供了一种计算机可读存储介质，该计算机可读存储介质存储有计算机程序，当所述计算机程序被计算机设备运行时，实现第一方面的实施例所公开的数据处理的方法。第八方面，本申请实施例提供了一种计算机可读存储介质，该计算机可读存储介质存储有计算机程序，当所述计算机程序被计算机设备运行时，实现第二方面的实施例所公开的数据处理的方法。第九方面，本申请实施例提供了一种计算机程序，当所述计算机程序被计算机设备运行时，实现第一方面的实施例所公开的获取信息的方法。<本文档来自技高网...

【技术保护点】
1.一种数据处理方法，其特征在于，所述方法包括：/n接收由终端发送的上传信息，所述上传信息包括待上传文件、目标存储方式、存储数据表的标识和目标存储路径；/n根据所述存储数据表的标识在所述目标存储路径确定的文件夹中查找所述存储数据表；/n将所述待上传文件以所述目标存储方式存储到所述存储数据表中。/n

【技术特征摘要】
1.一种数据处理方法，其特征在于，所述方法包括：
接收由终端发送的上传信息，所述上传信息包括待上传文件、目标存储方式、存储数据表的标识和目标存储路径；
根据所述存储数据表的标识在所述目标存储路径确定的文件夹中查找所述存储数据表；
将所述待上传文件以所述目标存储方式存储到所述存储数据表中。


2.根据权利要求1所述的方法，其特征在于，所述上传信息还包括表结构，所述表结构包括N个字段，所述根据所述存储数据表的标识在所述目标存储路径确定的文件夹中查找所述存储数据表之前，所述方法还包括：
根据所述存储数据表的标识和所述表结构在所述目标存储路径下创建所述存储数据表，所述存储数据表包括所述N个字段。


3.根据权利要求2所述的方法，其特征在于，所述待上传文件包括M个字段分别对应的数据，M为正整数，所述将所述待上传文件以所述目标存储方式存储到所述存储数据表中，具体包括：
从所述待上传文件中获取所述M个字段分别对应的数据；
将获取到的数据以所述目标存储方式存储到所述存储数据表中。


4.根据权利要求3所述的方法，其特征在于，所述从所述待上传文件中获取所述M个字段分别对应的数据之前，所述方法还包括：
在判断所述待上传文件的格式为xls或xlsx的情况下，将所述待上传文件的格式转换为CSV格式。


5.根据权利要求1或2所述的方法，其特征在于，所述待上传文件包括M个字段分别对应的数据，M为正整数，所述存储数据表包括N个字段，所述将所述待上传文件以所述目标存储方式存储到所述存储数据表中，具体包括：
从所述M字段中获取待存储字段；
在所述N个字段中包括所述待存储字段时，将所述待存储字段对应的数据以所述目标存储方式存储到所述存储数据表中所述待存储字段对应的目标位置。


6.根据权利要求5所述的方法，所述目标存储方式用于指示所述待上传文件的数据存储至所述存储数据表中的所述目标位置。


7.一种数据处理方法，其特征在于，所述方法包括：
根据接收到的待上传文件、目标存储方式、存储数据表的标识和目标存储路径生成上传信息；
向服务器发送所述上传信息，...

【专利技术属性】
技术研发人员：程飞，
申请(专利权)人：深圳市融壹买信息科技有限公司，
类型：发明
国别省市：广东;44