文件传输预测方法、装置、设备、存储介质及产品制造方法及图纸

技术编号:38098600 阅读:23 留言:0更新日期:2023-07-06 09:15
本发明专利技术公开了文件传输预测方法、装置、设备、存储介质及产品。本发明专利技术涉及人工智能技术领域。该方法包括:获取待预测数据表对应的历史传输特征,其中,历史传输特征包括预设历史传输周期内待预测数据表对应的预设类型文件的第一传输行为特征、目标预设业务系统中的数据表对应的预设类型文件的第二传输行为特征、以及多个预设业务系统中的数据表对应的预设类型文件的第三传输行为特征,根据历史传输特征构建输入特征,将输入特征输入至目标预设预测模型中,预测待预测数据表在本传输周期内对应的预设类型文件是否将发生传输延迟。通过采用上述技术方案,可以准确地预测待预测数据表在本周期内对应的预设类型文件是否会发生传输延时。输延时。输延时。

【技术实现步骤摘要】
文件传输预测方法、装置、设备、存储介质及产品


[0001]本专利技术实施例涉及人工智能
,尤其涉及一种文件传输预测方法、装置、设备、存储介质及产品。

技术介绍

[0002]数据仓库(Data Warehouse,DW或DWH),是企业内部的一个数据存储集合,具有面向多主题、分层、整合企业内部数据、减少加工冗余和反映历史变化等特点。
[0003]通常,数据仓库需要对接很多上游业务系统,各上游业务系统将数据库中的表先导出成表文件,再把表文件传输至数据仓库,数据仓库每天收到的表文件可达上千个,而数据仓库每天的跑批任务能否顺利完成依赖于表文件的到达情况,上千个文件必须要在规定的时间点之前传输到数据仓库,数据仓库的跑批任务才能在期望的时间点之前完成,只要有一个文件未能按时到达,就会引起一个或多个数据仓库的作业处于等待状态,导致跑批任务延迟完成,从而影响了数据仓库下游的各个报表系统的使用。
[0004]在实际的应用场景中,经常会出现上游业务系统因为各种原因而不能把文件在规定的时间点之前传输到数据仓库的现象,若达到规定时间点后,发现存在本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种文件传输预测方法,其特征在于,包括:获取待预测数据表对应的历史传输特征,其中,所述待预测数据表为数据仓库对接的目标预设业务系统向所述数据仓库传输的预设类型文件对应的数据表,所述数据仓库对接有多个预设业务系统,所述历史传输特征包括所述待预测数据表对应的预设类型文件在预设历史传输周期内的第一传输行为特征、所述目标预设业务系统中的多个数据表对应的预设类型文件在所述预设历史传输周期内的第二传输行为特征、以及所述多个预设业务系统中的多个数据表对应的预设类型文件在所述预设历史传输周期内的第三传输行为特征;根据所述历史传输特征构建输入特征;将所述输入特征输入至所述目标预设业务系统对应的目标预设预测模型中,并根据所述目标预设预测模型的输出结果预测所述待预测数据表在本传输周期内对应的预设类型文件是否将发生传输延迟。2.根据权利要求1所述的方法,其特征在于,所述目标预设预测模型包括基于逻辑回归模型训练得到的模型;其中,所述根据所述历史传输特征构建输入特征,包括:从所述历史传输特征中挑选至少两个目标特征;基于预设计算方式,对所述至少两个目标特征进行计算,得到扩展特征;根据所述历史传输特征和所述扩展特征,构建输入特征。3.根据权利要求2所述的方法,其特征在于,所述从所述历史传输特征中挑选至少两个目标特征,包括:从所述第一传输行为特征、所述第二传输行为特征和所述第三传输行为特征中的两项中,分别挑选至少一个目标特征,得到至少一个目标特征对;其中,基于预设计算方式,对所述至少两个目标特征进行计算,得到扩展特征,包括:针对所述至少一个目标特征对中的每个目标特征对,基于预设计算方式对当前目标特征对中的两个目标特征进行计算,得到所述当前目标特征对对应的扩展特征。4.根据权利要求3所述的方法,其特征在于,所述从所述第一传输行为特征、所述第二传输行为特征和所述第三传输行为特征中的两项中,分别挑选至少一个目标特征,得到至少一个目标特征对,包括:从所述第二传输行为特征和所述第三传输行为特征中,分别挑选至少一个目标特征,得到至少一个目标特征对。5.根据权利要求4所述的方法,其特征在于,所述第二传输行为特征包括第一平均传输延迟时长和/或第一传输延迟率;所述第三传输行为特征包括第二平均传输延迟时长和/或第二传输延迟率。6.根据权利要求5所述的方法,其特征在于,所述目标特征对包括第一平均传输延迟时长和第二平均传输延迟时长,和/或,第一传输延迟率和第二传输延迟率。7.根据权利要求3

6任一所述的方法,其特征在于,所述针对所述至少一个目标特征对中的每个目标特征对,基于预设计算方式对当前目标特征对中的两个目标特征进行计算,得到所述当前目标特征对对应的扩展特征,包括:针对所述至少一个目标特征对中的每个目标特征对,计算当前目标特征对中的两个目标特征的乘积,得到所述当前目标特征对对应的扩展特征。
8.根据权利要求1所述的方法,其特征在于,所述第一传输行为特征包括文...

【专利技术属性】
技术研发人员:盛俊杰
申请(专利权)人:建信金融科技有限责任公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1