数据处理方法、装置、电子设备、介质及程序产品制造方法及图纸

技术编号:42217835 阅读:15 留言:0更新日期:2024-07-30 18:57
本公开提供了一种数据处理方法、装置、电子设备、介质及程序产品,可以应用于大数据、分布式系统以及金融技术领域。该数据处理方法应用于消息消费端,该方法包括:根据与交易属性变更数据相关的数据属性,确定查询键值信息。利用查询键值信息在分布式缓存集群的至少一个缓存节点进行数据状态查询,得到与交易属性变更数据相对应的数据处理状态,数据处理状态表征变更数据是否已经被消费。以及在数据处理状态表征交易属性变更数据已经被消费的情况下,从消息队列中获取第一目标变更数据,第一目标变更数据与交易属性变更数据不同。

【技术实现步骤摘要】

本公开涉及大数据、分布式系统以及金融,更具体地涉及一种数据处理方法、装置、电子设备、介质及程序产品


技术介绍

1、随着信息化和数字化程度的提高,各个行业对数据实时性的要求也越来越高。无论是金融市场的交易数据、物流系统的订单状态,还是在线服务的用户行为数据,都需要进行实时的处理和推送。然而在如今的大数据时代,数据的规模呈爆炸式增长,传统的数据处理方式无法满足实时性的需求。因此,需要利用大数据处理技术,例如,通过分布式系统实现对数据进行实时的收集、分析和推送。

2、然而在跨地域的分布式系统中,会涉及多个地理位置的节点之间的通信和协作,在网络传输不稳定的状态下会对数据推送的准确性产生不利的影响。


技术实现思路

1、鉴于上述问题,本公开提供了一种数据处理方法、装置、电子设备、介质及程序产品。

2、本公开的第一个方面提供了一种数据处理方法,应用于消息消费端,方法包括:根据与交易属性变更数据相关的数据属性,确定查询键值信息;利用查询键值信息在分布式缓存集群的至少一个缓存节点进行数据状态查询,得到本文档来自技高网...

【技术保护点】

1.一种数据处理方法,其特征在于,应用于消息消费端,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,利用所述查询键值信息在分布式缓存集群的至少一个缓存节点进行数据状态查询,得到与所述交易属性变更数据相对应的数据处理状态包括:

3.根据权利要求2所述的方法,其特征在于,所述缓存节点包括N个,N为大于1的整数;

4.根据权利要求3所述的方法,其特征在于,所述方法还包括:

5.根据权利要求1所述的方法,其特征在于,从所述消息队列中获取第一目标变更数据包括:

6.根据权利要求1所述的方法,其特征在于,所述方法还包括:

<...

【技术特征摘要】

1.一种数据处理方法,其特征在于,应用于消息消费端,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,利用所述查询键值信息在分布式缓存集群的至少一个缓存节点进行数据状态查询,得到与所述交易属性变更数据相对应的数据处理状态包括:

3.根据权利要求2所述的方法,其特征在于,所述缓存节点包括n个,n为大于1的整数;

4.根据权利要求3所述的方法,其特征在于,所述方法还包括:

5.根据权利要求1所述的方法,其特征在于,从所述消息队列中获取第一目标变更数据包括:

6.根据权利要求1所述的方法,其特征在于,所述方法还包括:

7.一种数据处理方法,其特征在于,应用于消息生产端,所述方法包...

【专利技术属性】
技术研发人员:郑晓琳胡慧丽林苏燕熊明豪
申请(专利权)人:中国工商银行股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1