数据导出方法、装置、计算机设备和可读存储介质制造方法及图纸

本申请涉及数据导出方法、装置、计算机设备和可读存储介质，其中，数据导出方法包括：获取服务器中待导出文件的读取数据，根据所述待导出文件的读取数据，确定所述读取数据的数据量，若所述数据量大于所述导出上限则将所述读取数据进行拆分，并通过多次导出所述读取数据，完成所述待导出文件的导出，反之，通过单次导出所述读取数据，完成所述待导出文件的导出，解决了相关技术中，采用一次导出、持续等待的大规模数据导出方式，存在占用内存资源过大甚至服务器崩溃的问题，降低了大规模数据导出时所占用的服务器的内存资源，避免服务器崩溃的问题。的问题。的问题。

【技术实现步骤摘要】
数据导出方法、装置、计算机设备和可读存储介质


[0001]本申请涉及数据处理
，特别是涉及数据导出方法、装置、计算机设备和可读存储介质。

技术介绍

[0002]在很多应用场景下，需要将信息系统后台数据库中的数据导出为EXCEL表格。随着信息化大数据的发展，在数据导出中，经常需要处理大规模的数据，例如，对于服装定制行业，厂商定期需要将一年或者一季度的订单量进行导出。
[0003]在相关技术中，处理大规模数据导出业务，一般采用“一次导出、持续等待”，该导出方式占用内存资源过大，导致系统性能下降，且在大规模数据导出的过程中，存在导出时间很久甚至服务器崩溃的情况。
[0004]目前针对相关技术中，采用一次导出、持续等待的大规模数据导出方式，存在占用内存资源过大，甚至服务器崩溃的问题，尚未提出有效的解决方案。

技术实现思路

[0005]本申请实施例提供了一种数据导出方法、装置、计算机设备和可读存储介质，解决了相关技术中，采用一次导出、持续等待的大规模数据导出方式，存在占用内存资源过大甚至服务器崩溃的问题。
[本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种数据导出方法，其特征在于，应用于服务器，所述方法包括：获取所述服务器中待导出文件的读取数据；根据所述待导出文件的读取数据，确定所述读取数据的数据量；若所述数据量大于所述导出上限则将所述读取数据进行拆分，并通过多次导出所述读取数据，完成所述待导出文件的导出，反之，通过单次导出所述读取数据，完成所述待导出文件的导出。2.根据权利要求1所述的数据导出方法，其特征在于，获取待导出文件的读取数据包括：获取待导出文件的存储属性，所述存储属性至少包括存储数据库；根据所述存储属性，从第一数据库中调取与所述存储属性相匹配的文件读取类型，其中，所述第一数据库中至少存储有两种不同的文件读取类型；根据与所述待导出文件的存储属性相匹配的文件读取类型，对所述待导出文件进行读取，生成所述待导出文件的读取数据。3.根据权利要求2所述的数据导出方法，其特征在于，所述待导出文件的存储数据库至少为以下类型之一：elasticsearch数据库、mysql数据库。4.根据权利要求3所述的数据导出方法，其特征在于，所述第一数据库中包括快照读取的文件读取类型和拆分读取的文件读取类型；若所述待导出文件的存储数据库为elasticsearch数据库，采用快照读取的文件读取类型对所述待导出文件进行读取，若所述待导出文件的存储数据库为mysql数据库，采用拆分读取的文件读取类型对所述待导出文件进行读取。5.根据权利要求4所述的数据导出方法，其特征在于，若所述待导出文件的存储数据库为elasticsearch数据库，则根据与所述待导出文件的存储属性相匹配的文件读取类型，对所述待导出文件进行读取，生成所述待导出文件的读取数据包括：设置基于所述elasticsearch数据库的查询参数；根据所述查询参数，批量查询所述elastics...

【专利技术属性】
技术研发人员：朱兵兵，杨阳，钟文宇，
申请(专利权)人：杭州贝嘟科技有限公司，
类型：发明
国别省市：