多数据源之间的数据传输方法及装置、电子设备制造方法及图纸

技术编号:44833905 阅读:20 留言:0更新日期:2025-04-01 19:34
本发明专利技术公开了一种多数据源之间的数据传输方法及装置、电子设备,涉及大数据技术领域或其他相关领域,该方法包括:接收待同步数据源与目标数据源的数据源信息,建立待同步数据源与目标数据源的通信连接;接收传输方式与存放路径,基于传输方式确定目标传输数据,目标传输数据包括一个或多个目标传输文件;对于每个目标传输文件,将该目标传输文件从待同步数据源分批次导出至存放路径,在检测到目标传输文件全部导出时将目标传输文件导入至目标数据源;在检测到目标传输数据全部导入至目标数据源时对目标数据源中的目标传输数据进行数据验证,输出验证结果。本发明专利技术解决了相关技术中数据传输依赖于整体传输,导致传输稳定性差、效率低的技术问题。

【技术实现步骤摘要】

本专利技术涉及大数据或其他相关领域,具体而言,涉及一种多数据源之间的数据传输方法及装置、电子设备


技术介绍

1、在当前数字化转型的大背景下,数据已成为驱动企业决策、优化业务流程和提升服务效率的关键资产。随着企业对数据整合和迁移需求的日益增长,尤其是在金融、电信、互联网等行业,数据的跨平台、跨系统的传输变得越来越频繁。这种需求促使了数据传输工具的快速发展,旨在实现不同数据源之间的数据传输,以支持业务的连续性和数据的统一管理。

2、相关技术中,现有的多数据源之间的数据传输策略是先将目标数据从一个数据源导出后放入指定目录,再将目标数据从指令目录导入至目标数据源。然而,现有的多数据源之间的数据传输策略存在众多缺点。例如,成本较大,现有的多数据源之间的数据传输策略需要大量的前期准备,包括对待同步数据源和目标数据源的空间估计、导出目录空间估计、导出文件大小评估等,这不仅消耗了大量的人力和时间资源,还可能因评估不准确而增加额外的存储和网络成本。其次,效率较低,尤其是在处理大规模数据时,一次性导出和导入大文件不仅效率低下,还会因为数据库的性能存在瓶颈,导致数本文档来自技高网...

【技术保护点】

1.一种多数据源之间的数据传输方法,其特征在于,应用于预先构建的数据传输工具,包括:

2.根据权利要求1所述的数据传输方法,其特征在于,建立所述待同步数据源与所述目标数据源之间的通信连接的步骤,包括:

3.根据权利要求1所述的数据传输方法,其特征在于,基于所述传输方式确定目标传输数据的步骤,包括:

4.根据权利要求1所述的数据传输方法,其特征在于,在将所述目标传输文件从所述待同步数据源导出之前,还包括:

5.根据权利要求1所述的数据传输方法,其特征在于,将所述目标传输文件从所述存放路径导入至所述目标数据源的步骤,包括:</p>

6.根据...

【技术特征摘要】

1.一种多数据源之间的数据传输方法,其特征在于,应用于预先构建的数据传输工具,包括:

2.根据权利要求1所述的数据传输方法,其特征在于,建立所述待同步数据源与所述目标数据源之间的通信连接的步骤,包括:

3.根据权利要求1所述的数据传输方法,其特征在于,基于所述传输方式确定目标传输数据的步骤,包括:

4.根据权利要求1所述的数据传输方法,其特征在于,在将所述目标传输文件从所述待同步数据源导出之前,还包括:

5.根据权利要求1所述的数据传输方法,其特征在于,将所述目标传输文件从所述存放路径导入至所述目标数据源的步骤,包括:

6.根据权利要求1所述的数据传输方法,其特征在于,在所述目标传输文件全部导入至...

【专利技术属性】
技术研发人员:刘良壮
申请(专利权)人:中国工商银行股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1