数据传输方法、装置、设备和存储介质制造方法及图纸

本公开提供了一种数据传输方法，可以应用于数据处理技术领域或金融科技领域。该数据传输方法包括：响应于数据传输指令，通过预设程序获取数据传输指令中携带的数据库表；基于数据库表，从数据仓库中提取元数据；对元数据进行流量分析，得到流量分析结果；监测消息队列链路的运行数据，并在运行数据超过预设条件的情况下，根据流量分析结果自动创建至少一个空闲的消息队列链路，其中，消息队列链路用于进行数据传输；基于至少一个空闲的消息队列链路，执行数据传输指令。本公开还提供了一种数据传输装置、设备和存储介质。设备和存储介质。设备和存储介质。

【技术实现步骤摘要】
数据传输方法、装置、设备和存储介质


[0001]本公开涉及数据处理
或金融科技领域，更具体地涉及一种数据处理方法、装置、设备、存储介质和程序产品。

技术介绍

[0002]主机系统的DB2(Relational Database Management System，关系型数据库系统)迁移到平台系统，一般是先获取DB2数据，再发送到主机系统的消息队列，由主机的消息队列和平台的消息队列之间建立数据通道并完成数据传输。在实现本公开专利技术构思的过程中，专利技术人发现相关技术中一般存在如下问题：在传输的数据量较大的情况下，会存在传输瓶颈，无法做到数据的横向扩展传输，进而降低了数据传输的效率和灵活性。

技术实现思路

[0003]鉴于上述问题，本公开提供了提高数据传输的效率和智能化程度的数据传输方法、装置、设备、存储介质和程序产品。
[0004]本公开的一个方面提供了一种数据传输方法，包括：响应于数据传输指令，通过预设程序获取所述数据传输指令中携带的数据库表；基于所述数据库表，从所述数据仓库中提取元数据；对所述元数据进行流量分析本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种数据传输方法，包括：响应于数据传输指令，通过预设程序获取所述数据传输指令中携带的数据库表；基于所述数据库表，从所述数据仓库中提取元数据；对所述元数据进行流量分析，得到所述流量分析结果；监测消息队列链路的运行数据，并在所述运行数据超过预设条件的情况下，根据所述流量分析结果自动创建至少一个空闲的消息队列链路，其中，所述消息队列链路用于进行数据传输；基于所述至少一个空闲的消息队列链路，执行所述数据传输指令。2.根据权利要求1所述的方法，其中，所述元数据包括所述数据库表的标识；所述方法还包括：将所述至少一个空闲的消息队列链路登记到消息队列路由表中；通过所述数据库表的标识，从所述消息队列路由表中返回至少一个所述空闲的消息队列链路。3.根据权利要求2所述的方法，还包括：在返回m个空闲的消息队列链路的情况下，利用哈希算法从所述m个空闲的消息队列链路中确定n个目标消息队列链路，其中，m＞1，1≤n≤m。4.根据权利要求3所述的方法，其中，所述利用哈希算法从所述m个空闲的消息队列链路中确定n个目标消息队列链路包括：提取所述数据库表中的主键字段；通过将所述主键字段的字段值和m值进行哈希运算，得到的哈希值作为n。5.根据权利要求1所述的方法，还包括：对在执行所述数据传输指令的过程中产生的运行参数进行监测，得到监测结果；在所述监测结果表征执行异常的情况下，生成告警信息并执行重试操作；在所述重试操作的执行次数超过预设阀值的情况下，停止执行，并通知相关运维人员。6.根据权利要求1所述的方法，其中，所述元数据包括所述数据库表所...

【专利技术属性】
技术研发人员：杨诗平，陈雅峰，孙扬，柳彬娥，
申请(专利权)人：中国工商银行股份有限公司，
类型：发明
国别省市：