数据下载方法、装置、终端、系统及存储介质制造方法及图纸

技术编号:34038643 阅读:71 留言:0更新日期:2022-07-06 12:55
本发明专利技术实施例公开了一种数据下载方法、装置、终端、系统及存储介质,该方法包括:获取数据下载任务;向数据服务集群发送数据下载任务,以使得数据服务集群根据数据下载任务从源数据表中获取目标数据并根据目标数据创建目标数据表;从中间存储设备下载目标数据表,目标数据表由数据服务集群发送至中间存储设备。即本发明专利技术实施例中,数据服务集群会将创建的目标数据表发送至中间存储设备,从而便于终端随时从中间存储设备下载目标数据表,解决了目标数据表由于处于缓存状态而导致存储时间较短的问题,满足了用户在长时间后再次获取目标数据表或者部分目标数据的需求,为用户提供了更加便捷、经济和高效的数据下载方式。经济和高效的数据下载方式。经济和高效的数据下载方式。

【技术实现步骤摘要】
数据下载方法、装置、终端、系统及存储介质


[0001]本专利技术实施例涉及计算机技术,尤其涉及一种数据下载方法、装置、终端、系统及存储介质。

技术介绍

[0002]传统的数据下载方案,用户的本地客户端必须处于在线状态。但由于下载过程影响因素(如数据文件大、网速慢)较多,下载数据的过程耗时较长,因此离线下载数据的方案越来越多。
[0003]现有离线数据下载的方案,由用户向服务器发送数据下载请求,服务器检测对应的数据是否处于缓存中,若数据处于缓存中则告知用户,用户直接从缓存中获取整个数据文件;若不是,服务器把数据下载请求转发给任务调度器,由任务调度器进行下载;任务调度器在下载完数据后将数据加入缓存中并通知用户从缓存中获取整个数据文件。
[0004]但由于离线数据下载方案中的数据存储于缓存中,难以满足用户长时间之后再次获取数据或者部分数据的需求。

技术实现思路

[0005]本专利技术实施例提供一种数据下载方法、装置、终端、系统及存储介质,满足了用户在长时间后再次获取目标数据表或者部分目标数据的需求,为用户提供了更加便捷本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种数据下载方法,其特征在于,所述方法包括:获取数据下载任务;向数据服务集群发送所述数据下载任务,以使得所述数据服务集群根据所述数据下载任务从源数据表中获取目标数据并根据所述目标数据创建目标数据表;从中间存储设备下载所述目标数据表,所述目标数据表由所述数据服务集群发送至所述中间存储设备。2.根据权利要求1所述的方法,其特征在于,所述向数据服务集群发送所述数据下载任务,包括:将所述数据下载任务加入下载任务表;在预设时间范围内确定所述下载任务表中的数据下载任务的当前数量是否超过预设数量;在所述当前数量超过所述预设数量时,向所述数据服务集群发送所述预设数量的数据下载任务;在所述当前数量不超过所述预设数量时,向所述数据服务集群发送所述当前数量的数据下载任务。3.根据权利要求1所述的方法,其特征在于,所述数据服务集群包括集群调度服务器和源数据服务器,所述向数据服务集群发送所述数据下载任务,以使得所述数据服务集群根据所述数据下载任务从源数据表中获取目标数据并根据所述目标数据创建目标数据表,包括:向所述集群调度服务器发送所述数据下载任务,以使得所述集群调度服务器将所述数据下载任务发送给所述源数据服务器,所述数据下载任务用于所述源数据服务器从源数据表中获取目标数据并根据所述目标数据创建所述目标数据表。4.根据权利要求3所述的方法,其特征在于,所述源数据服务器包括多个,所述向所述集群调度服务器发送所述数据下载任务,以使得所述集群调度服务器将所述数据下载任务发送给所述源数据服务器,包括:向所述集群调度服务器发送所述数据下载任务,以使得所述集群调度服务器从所述多个源数据服务器中确定出目标源数据服务器并向所述目标源数据服务器发送所述数据下载任务。5.根据权利要求3所述的方法,其特征在于,在向所述集...

【专利技术属性】
技术研发人员:吴爽
申请(专利权)人:中国农业银行股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1