一种数据文件的断点续做方法、装置和系统制造方法及图纸

技术编号:33893465 阅读:11 留言:0更新日期:2022-06-22 17:29
本发明专利技术实施例提供了一种数据文件的断点续做方法、装置和系统,可用于人工智能技术领域,所述方法包括:对待处理数据文件处理过程中检测到存在断点时,根据待处理数据文件中的数据单元的标识值,从索引文件中查询出断点数据单元;从断点数据单元开始进行业务处理,生成处理后的目标数据单元,能够从数据文件中的断点处继续进行业务处理,提高对数据文件的处理效率,降低主机侧的等待时间,从而提高数据文件的传输效率。文件的传输效率。文件的传输效率。

【技术实现步骤摘要】
一种数据文件的断点续做方法、装置和系统


[0001]本专利技术涉及数据传输
,特别涉及人工智能
,尤其涉及一种数据文件的断点续做方法、装置和系统。

技术介绍

[0002]传统银行采用大型主机作为核心业务系统,以提升系统运行能力且满足核心业务的交易需求。相关技术中,外围平台系统通过通用文件传输应用对多个数据文件依次进行业务处理,大型主机侧定时获取处理后的数据文件以实现文件传输,当数据量剧增导致对某个数据文件的业务处理失败,需要从第一个数据文件开始重新进行业务处理,对数据文件的处理效率较低,增加了大型主机侧获取处理后的数据文件的等待时长,导致数据文件的传输效率低下。

技术实现思路

[0003]本专利技术的一个目的在于提供一种数据文件的断点续做方法,能够从数据文件中的断点处继续进行业务处理,提高对数据文件的处理效率,降低主机侧的等待时间,从而提高数据文件的传输效率。本专利技术的另一个目的在于提供一种数据文件的断点续做装置。本专利技术的再一个目的在于提供一种数据文件的断点续做系统。本专利技术的还一个目的在于提供一种计算机可读介质。本专利技术的还一个目的在于提供一种计算机设备。
[0004]为了达到以上目的,本专利技术一方面公开了一种数据文件的断点续做方法,数据文件包括多个数据单元;包括:
[0005]对待处理数据文件处理过程中检测到存在断点时,根据待处理数据文件中的数据单元的标识值,从索引文件中查询出断点数据单元;
[0006]从断点数据单元开始进行业务处理,生成处理后的目标数据单元。
[0007]优选的,根据待处理数据文件中的数据单元的标识值,从索引文件中查询出断点数据单元,包括:
[0008]根据数据单元的标识值,从索引文件中查询出数据单元的处理状态;
[0009]将处理状态为待处理的数据单元确定为断点数据单元。
[0010]优选的,方法还包括:
[0011]当待处理数据文件中所有数据单元完成业务处理,对所有生成的目标数据单元的属性信息进行校验;
[0012]若校验通过,根据所有生成的目标数据单元,生成目标文件;
[0013]将目标文件存储至预设的目标地址,并向主机服务器发送处理完成消息,处理完成消息包括目标地址,以供主机服务器根据目标地址获取目标文件。
[0014]优选的,属性信息包括数据大小和数据长度;
[0015]对所有生成的目标数据单元的属性信息进行校验,包括:
[0016]统计目标数据单元的数据大小和数据长度;
[0017]通过标识值与共享内存中的文件列表位置序号进行匹配,从共享内存中查询出对应的数据单元的目标大小和目标长度;
[0018]若每个目标数据单元的数据大小与对应的目标大小相同且数据长度与对应的目标长度相同,则校验通过;
[0019]若存在至少一个目标数据单元的数据大小与对应的目标大小不同或数据长度与对应的目标长度不同,则校验失败。
[0020]优选的,在从断点数据单元开始进行业务处理,生成处理后的目标数据单元之后,还包括:
[0021]将索引文件中断点数据单元对应的处理状态更新为已处理;
[0022]通过标识值与共享内存中的文件列表位置序号进行匹配,从共享内存中查询出对应的数据单元的处理状态;
[0023]将数据单元的处理状态更新为已处理。
[0024]优选的,在根据所有生成的目标数据单元,生成目标文件之后,还包括:
[0025]根据标识值,从索引文件中删除对应的数据单元;
[0026]通过标识值与共享内存中的文件列表位置序号进行匹配,从共享内存中删除对应的数据单元。
[0027]本专利技术还公开了一种数据文件的断点续做系统,数据文件包括多个数据单元;系统包括:外围平台和调度模块;包括:
[0028]外围平台用于向调度模块发送待处理数据文件;
[0029]调度模块用于对待处理数据文件处理过程中检测到存在断点时,根据待处理数据文件中的数据单元的标识值,从索引文件中查询出断点数据单元;从断点数据单元开始进行业务处理,生成处理后的目标数据单元。
[0030]优选的,系统还包括:主机服务器;
[0031]调度模块还用于当待处理数据文件中所有数据单元完成业务处理,对所有生成的目标数据单元的属性信息进行校验;若校验通过,根据所有生成的目标数据单元,生成目标文件;将目标文件存储至预设的目标地址;
[0032]主机服务器用于接收调度模块发送的处理完成消息,处理完成消息包括目标地址;根据目标地址获取目标文件。
[0033]本专利技术还公开了一种数据文件的断点续做装置,数据文件包括多个数据单元;装置包括:
[0034]查询单元,用于对待处理数据文件处理过程中检测到存在断点时,根据待处理数据文件中的数据单元的标识值,从索引文件中查询出断点数据单元;
[0035]业务处理单元,用于从断点数据单元开始进行业务处理,生成处理后的目标数据单元。
[0036]本专利技术还公开了一种计算机可读介质,其上存储有计算机程序,该程序被处理器执行时实现如上所述方法。
[0037]本专利技术还公开了一种计算机设备,包括存储器和处理器,所述存储器用于存储包括程序指令的信息,所述处理器用于控制程序指令的执行,所述处理器执行所述程序时实现如上所述方法。
[0038]本专利技术还公开了一种计算机程序产品,包括计算机程序/指令,计算机程序/指令被处理器执行时实现如上所述方法。
[0039]本专利技术对待处理数据文件处理过程中检测到存在断点时,根据待处理数据文件中的数据单元的标识值,从索引文件中查询出断点数据单元;从断点数据单元开始进行业务处理,生成处理后的目标数据单元,能够从数据文件中的断点处继续进行业务处理,提高对数据文件的处理效率,降低主机侧的等待时间,从而提高数据文件的传输效率。
附图说明
[0040]为了更清楚地说明本专利技术实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本专利技术的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
[0041]图1为本专利技术实施例提供的一种数据文件的断点续做系统的结构示意图;
[0042]图2为本专利技术实施例提供的一种数据文件的断点续做方法的流程图;
[0043]图3为本专利技术实施例提供的又一种数据文件的断点续做方法的流程图;
[0044]图4为本专利技术实施例提供的一种数据文件的断点续做装置的结构示意图;
[0045]图5为本专利技术实施例提供的一种计算机设备的结构示意图。
具体实施方式
[0046]下面将结合本专利技术实施例中的附图,对本专利技术实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本专利技术一部分实施例,而不是全部的实施例。基于本专利技术中的实施例,本领域普通技术人员在没有做出创造性劳动本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种数据文件的断点续做方法,其特征在于,所述数据文件包括多个数据单元;所述方法包括:对待处理数据文件处理过程中检测到存在断点时,根据待处理数据文件中的数据单元的标识值,从索引文件中查询出断点数据单元;从所述断点数据单元开始进行业务处理,生成处理后的目标数据单元。2.根据权利要求1所述的数据文件的断点续做方法,其特征在于,所述根据待处理数据文件中的数据单元的标识值,从索引文件中查询出断点数据单元,包括:根据所述数据单元的标识值,从索引文件中查询出所述数据单元的处理状态;将处理状态为待处理的数据单元确定为所述断点数据单元。3.根据权利要求1所述的数据文件的断点续做方法,其特征在于,所述方法还包括:当所述待处理数据文件中所有数据单元完成业务处理,对所有生成的目标数据单元的属性信息进行校验;若校验通过,根据所有生成的目标数据单元,生成目标文件;将所述目标文件存储至预设的目标地址,并向主机服务器发送处理完成消息,所述处理完成消息包括所述目标地址,以供所述主机服务器根据所述目标地址获取目标文件。4.根据权利要求3所述的数据文件的断点续做方法,其特征在于,所述属性信息包括数据大小和数据长度;所述对所有生成的目标数据单元的属性信息进行校验,包括:统计所述目标数据单元的数据大小和数据长度;通过所述标识值与共享内存中的文件列表位置序号进行匹配,从共享内存中查询出对应的数据单元的目标大小和目标长度;若每个目标数据单元的数据大小与对应的目标大小相同且数据长度与对应的目标长度相同,则校验通过;若存在至少一个目标数据单元的数据大小与对应的目标大小不同或数据长度与对应的目标长度不同,则校验失败。5.根据权利要求1所述的数据文件的断点续做方法,其特征在于,在所述从所述断点数据单元开始进行业务处理,生成处理后的目标数据单元之后,还包括:将所述索引文件中断点数据单元对应的处理状态更新为已处理;通过所述标识值与共享内存中的文件列表位置序号进行匹配,从共享内存中查询出对应的数据单元的处理状态;将所述数据单元的处理状态更新为已处理。6.根据权利要求3所述的数据文件的断点续做方法,其特...

【专利技术属性】
技术研发人员:伊布拉音江
申请(专利权)人:中国工商银行股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1