一种服务器集群中的数据处理方法与装置制造方法及图纸

技术编号:26970144 阅读:41 留言:0更新日期:2021-01-05 23:59
本申请实施例公开了一种服务器集群中的数据处理方法与装置,属于数据处理技术领域。该方法包括:第一服务器对多个第一文件进行轮询,所述第一服务器为服务器集群中的任一服务器,所述第一文件中包含所述第一服务器对应的标签;所述第一服务器从所述多个第一文件中确定状态为待处理的目标文件;所述第一服务器对所述目标文件中的数据进行处理,并将所述目标文件的状态改为正在处理;所述第一服务器在所述目标文件中的数据均处理结束后,将所述目标文件的状态改为处理完成。本申请实施例避免了多机争抢,减轻数据库压力。

【技术实现步骤摘要】
一种服务器集群中的数据处理方法与装置
本申请实施例涉及数据处理
,特别涉及一种服务器集群中的数据处理方法与装置。
技术介绍
通过文件处理大批量交易是常见的交易模式之一,通常客户上传一个文件包含几笔至十几万笔交易数据,对于每日百万级甚至千万级的交易数据进行处理,单个文件及总体文件处理时效性十分重要。现有技术中,为了处理海量的交易数据,利用服务器集群对数据库中存储的文件进行轮询并处理。在集群模式下,存在多机争抢的情况,即多台服务器会同时查询到同一个未处理的文件,这样会造成数据库压力较大的问题,浪费了服务器线程资源。
技术实现思路
本申请实施例提供了一种服务器集群中的数据处理方法与装置,以避免多机争抢,减轻数据库压力。一方面,本申请实施例提供了一种服务器集群中的数据处理方法,该方法包括:第一服务器对多个第一文件进行轮询,所述第一服务器为服务器集群中的任一服务器,所述第一文件中包含所述第一服务器对应的标签;所述第一服务器从所述多个第一文件中确定状态为待处理的目标文件;所述第一服务器对所述目标文件本文档来自技高网...

【技术保护点】
1.一种服务器集群中的数据处理方法,其特征在于,所述方法包括:/n第一服务器对多个第一文件进行轮询,所述第一服务器为服务器集群中的任一服务器,所述第一文件中包含所述第一服务器对应的标签;/n所述第一服务器从所述多个第一文件中确定状态为待处理的目标文件;/n所述第一服务器对所述目标文件中的数据进行处理,并将所述目标文件的状态改为正在处理;/n所述第一服务器在所述目标文件中的数据均处理结束后,将所述目标文件的状态改为处理完成。/n

【技术特征摘要】
1.一种服务器集群中的数据处理方法,其特征在于,所述方法包括:
第一服务器对多个第一文件进行轮询,所述第一服务器为服务器集群中的任一服务器,所述第一文件中包含所述第一服务器对应的标签;
所述第一服务器从所述多个第一文件中确定状态为待处理的目标文件;
所述第一服务器对所述目标文件中的数据进行处理,并将所述目标文件的状态改为正在处理;
所述第一服务器在所述目标文件中的数据均处理结束后,将所述目标文件的状态改为处理完成。


2.根据权利要求1所述的方法,其特征在于,所述第一服务器获取存储的第一文件之前,还包括:
接收终端发送的文件;
根据服务器集群中的服务器数量,确定所述文件对应的标签;
将所述文件进行存储,并将所述文件的状态设置为待处理。


3.根据权利要求2所述的方法,其特征在于,所述第一服务器接收终端发送的文件之后,还包括:
根据所述文件的接收时间以及所述文件中的数据量,确定所述文件的优先级;
所述第一服务器对多个第一文件进行轮询,包括:
所述第一服务器根据优先级以及第一文件的存储时间,对所述多个第一文件进行轮询。


4.根据权利要求1至3任一项所述的方法,其特征在于,还包括:
所述第一服务器按照设定频率在签到表中进行签到,并检测所述服务器集群中的其余服务器的签到记录;
所述第一服务器在设定时间内未检测到第二服务器的签到记录,对第二文件进行轮询,所述第二文件中包含所述第二服务器对应的标签,所示第一服务器为所述第二服务器的备服务器。


5.一种服务器集群中的数据处理装置,其特征在于,所述装置包括:
轮询单元,用于对多个第一文件进行轮询,所述第一服务器为服务器集群中的任一服务器,所述第一...

【专利技术属性】
技术研发人员:陈卫冀乃庚牛天耘查骏陈超
申请(专利权)人:中国银联股份有限公司
类型:发明
国别省市:上海;31

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1