数据导入方法技术

技术编号:39648690 阅读:11 留言:0更新日期:2023-12-09 11:16
本公开的实施例公开了数据导入方法

【技术实现步骤摘要】
数据导入方法、装置、电子设备和计算机可读介质


[0001]本公开的实施例涉及计算机
,具体涉及数据导入方法

装置

电子设备和计算机可读介质


技术介绍

[0002]数据导入,是一种向业务系统导入数据的技术

目前,在进行数据导入时,通常采用的方式为:各个业务系统各自研发并上传数据导入组件,并在服务端解析后导入数据文件

[0003]然而,当采用上述进行数据导入时,经常会存在如下技术问题:
[0004]第一,各个业务系统重复的研发并上传数据导入组件,导致研发成本高;
[0005]第二,缺少发控制机制,当遇到较为耗资源的数据导入任务时,无法控制并发度,可能导致业务系统卡顿甚至拓机;
[0006]第三,数据导入功能与业务系统的耦合度较高


技术实现思路

[0007]本公开的内容部分用于以简要的形式介绍构思,这些构思将在后面的具体实施方式部分被详细描述

本公开的内容部分并不旨在标识要求保护的技术方案的关键特征或必要特征,也不旨在用于限制所要求的保护的技术方案的范围

[0008]本公开的一些实施例提出了数据导入方法

装置

电子设备和计算机可读介质,来解决以上
技术介绍
部分提到的技术问题中的一项或多项

[0009]第一方面,本公开的一些实施例提供了一种数据导入方法,该方法包括:接收业务数据文件,其中,上述业务数据文件对应于目标业务系统;创建数据导入任务,以及确定上述目标业务系统当前的数据导入任务并发量,得到当前任务并发量;响应于确定上述当前任务并发量小于上述目标业务系统的数据导入任务并发量阈值,将上述业务数据文件上传至云存储空间;生成业务数据导入通知消息,以及将上述业务数据导入通知消息发送至上述目标业务系统;响应于接收到上述目标业务系统发送的数据导入任务执行状态和导入结果明细文件的地址,确定上述数据导入任务执行完毕

[0010]第二方面,本公开的一些实施例提供了一种数据导入装置,装置包括:接收单元,被配置成接收业务数据文件,其中,上述业务数据文件对应于目标业务系统;创建以及确定单元,被配置成创建数据导入任务,以及确定上述目标业务系统当前的数据导入任务并发量,得到当前任务并发量;上传单元,被配置成响应于确定上述当前任务并发量小于上述目标业务系统的数据导入任务并发量阈值,将上述业务数据文件上传至云存储空间;生成以及发送单元,被配置成生成业务数据导入通知消息,以及将上述业务数据导入通知消息发送至上述目标业务系统;确定单元,被配置成响应于接收到上述目标业务系统发送的数据导入任务执行状态和导入结果明细文件的地址,确定上述数据导入任务执行完毕

[0011]第三方面,本公开的一些实施例提供了一种电子设备,包括:一个或多个处理器;
存储装置,其上存储有一个或多个程序,当一个或多个程序被一个或多个处理器执行,使得一个或多个处理器实现上述第一方面任一实现方式所描述的方法

[0012]第四方面,本公开的一些实施例提供了一种计算机可读介质,其上存储有计算机程序,其中,程序被处理器执行时实现上述第一方面任一实现方式所描述的方法

[0013]本公开的上述各个实施例具有如下有益效果:通过本公开的一些实施例的数据导入方法,将业务数据文件的上传与业务数据文件的导入进行了分割,使得业务系统可以更专注于业务数据处理本身的逻辑,各个业务系统无需单独的研发并上传数据导入组件,从而极大的简化了业务数据导入的研发工作,提升了数据导入功能的适用性

具体来说,造成相关研发成本高的原因在于:各个业务系统重复的研发并上传数据导入组件

基于此,本公开的一些实施例的数据导入方法,首先,接收业务数据文件,其中,上述业务数据文件对应于目标业务系统

然后,创建数据导入任务,以及确定上述目标业务系统当前的数据导入任务并发量,得到当前任务并发量

接着,响应于确定上述当前任务并发量小于上述目标业务系统的数据导入任务并发量阈值,将上述业务数据文件上传至云存储空间

再接着,生成业务数据导入通知消息,以及将上述业务数据导入通知消息发送至上述目标业务系统

由此,目标业务系统仅负责根据业务数据导入通知消息进行业务数据文件的导入,实现了业务数据文件的上传与业务数据文件的导入之间的分割

最后,响应于接收到上述目标业务系统发送的数据导入任务执行状态和导入结果明细文件的地址,确定上述数据导入任务执行完毕

进而,可以极大的简化业务数据导入的研发工作,提升数据导入功能的适用性

附图说明
[0014]结合附图并参考以下具体实施方式,本公开各实施例的上述和其他特征

优点及方面将变得更加明显

贯穿附图中,相同或相似的附图标记表示相同或相似的元素

应当理解附图是示意性的,元件和元素不一定按照比例绘制

[0015]图1是根据本公开的数据导入方法的一些实施例的流程图;
[0016]图2是本公开的数据导入装置的一些实施例的结构示意图;
[0017]图3是适于用来实现本公开的一些实施例的电子设备的结构示意图

具体实施方式
[0018]下面将参照附图更详细地描述本公开的实施例

虽然附图中显示了本公开的某些实施例,然而应当理解的是,本公开可以通过各种形式来实现,而且不应该被解释为限于这里阐述的实施例

相反,提供这些实施例是为了更加透彻和完整地理解本公开

应当理解的是,本公开的附图及实施例仅用于示例性作用,并非用于限制本公开的保护范围

[0019]另外还需要说明的是,为了便于描述,附图中仅示出了与有关专利技术相关的部分

在不冲突的情况下,本公开中的实施例及实施例中的特征可以相互组合

[0020]需要注意,本公开中提及的“第一”、“第二”等概念仅用于对不同的装置

模块或单元进行区分,并非用于限定这些装置

模块或单元所执行的功能的顺序或者相互依存关系

[0021]需要注意,本公开中提及的“一个”、“多个”的修饰是示意性而非限制性的,本领域技术人员应当理解,除非在上下文另有明确指出,否则应该理解为“一个或多个”。
[0022]本公开实施方式中的多个装置之间所交互的消息或者信息的名称仅用于说明性
的目的,而并不是用于对这些消息或信息的范围进行限制

[0023]下面将参考附图并结合实施例来详细说明本公开

[0024]图1示出了本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.
一种数据导入方法,包括:接收业务数据文件,其中,所述业务数据文件对应于目标业务系统;创建数据导入任务,以及确定所述目标业务系统当前的数据导入任务并发量,得到当前任务并发量;响应于确定所述当前任务并发量小于所述目标业务系统的数据导入任务并发量阈值,将所述业务数据文件上传至云存储空间;生成业务数据导入通知消息,以及将所述业务数据导入通知消息发送至所述目标业务系统;响应于接收到所述目标业务系统发送的数据导入任务执行状态和导入结果明细文件的地址,确定所述数据导入任务执行完毕
。2.
根据权利要求1所述的方法,其中,所述生成业务数据导入通知消息,以及将所述业务数据导入通知消息发送至所述目标业务系统,包括:将所述数据导入任务的任务编号

所述业务数据文件在所述云存储空间中的存储地址和所述业务数据文件的业务数据类型进行组合,得到业务数据导入通知消息;根据所述目标业务系统的业务系统编号,查询消息通知编号,得到目标消息通知编号,其中,业务系统编号和消息通知编号一一对应;利用所述目标消息通知编号所表征的消息通道,将所述业务数据导入通知消息发送至所述目标业务系统
。3.
根据权利要求2所述的方法,其中,在所述响应于接收到所述目标业务系统发送的数据导入任务执行状态和导入结果明细文件的地址,确定所述数据导入任务执行完毕之前,所述方法还包括:接收所述目标业务系统发送的业务数据导入执行进度信息
。4.
根据权利要求3所述的方法,其中,所述业务数据导入执行进度信息和所述导入结果明细文件的地址通过以下步骤生成:根据所述业务数据导入通知消息中的存储地址从所述云存储空间获取所述业务数据文件;读取所述业务数据文件的文件内容,以及调用所述业务数据导入通知消息中的任务编号所对应的数据导入任务对所读取的文件内容执行导入操作;在执行所述导入操作的过程中,根据所述任务编号对应的数据导入任务的执行进度,生成业务数据导入执行进度信息;响应于确定所述业务数据文件的文件内容导入完毕,生成处理结果明细文件,以及将所述处理结果明细文件上传至所述云存储空间;根据所述任务编号对应的数据导入任务,确定数据导入任务执行状态...

【专利技术属性】
技术研发人员:张舒栋
申请(专利权)人:多点生活成都科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1