基于大数据架构的实时支付标签处理方法、装置、终端制造方法及图纸

技术编号:37961302 阅读:33 留言:0更新日期:2023-06-30 09:36
本发明专利技术公开了基于大数据架构的实时支付标签处理方法、装置、终端,方法包括:将获取的下单数据及对应的支付数据采用Kafka消息队列作为传输介质,进行数据传输;对采用Kafka消息队列传输的下单数据及对应的支付数据,通过Flink计算工具进行接收并解析下单数据及对应的支付数据;当解析后的下单数据及对应的支付数据为主键唯一,则按数据明细进行数据存储;当解析后的下单数据及对应的支付数据为主键不唯一,则根据主键替换数据后进行数据存储;根据条件提取数据。本发明专利技术采用大数据中Kafka作为日志的传输介质,可以达到每秒10万的吞吐量,采用大数据中Flink作为计算工具,可以达到毫秒计算数据。毫秒计算数据。毫秒计算数据。

【技术实现步骤摘要】
基于大数据架构的实时支付标签处理方法、装置、终端


[0001]本专利技术涉及支付处理
,尤其涉及的是一种基于大数据架构的实时支付标签处理方法、装置、智能终端及存储介质。

技术介绍

[0002]随着科技的发展和人们生活水平的不断提高,各种智能终端的使用越来普及,智能终端已经成为人们生活中不可缺少的必备工具,用户经常需使用智能终端进行支付处理。
[0003]而在电商及OTT行业,用户画像的支付标签大多都是离线处理的。部分支付信息只能采用老旧的架构实现,一旦涉及到一天内上亿的支付和下单信息,很难达到标签的实时性,支付标签无法达到实时性不利于数据处理统计。
[0004]因此,现有技术还有待改进和发展。

技术实现思路

[0005]本专利技术要解决的技术问题在于,针对现有技术的上述缺陷,提供一种基于大数据架构的实时支付标签处理方法、装置、智能终端及存储介质,本专利技术可以解决实时支付标签一天在上亿数据情况下可以秒级响应的问题。
[0006]本专利技术解决问题所采用的技术方案如下:
[0007]本专利技术本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于大数据架构的实时支付标签处理方法,其特征在于,所述方法包括:获取下单数据,以及获取与下单数据对应的支付数据;将获取的下单数据及对应的支付数据采用Kafka消息队列作为传输介质,进行数据传输;对采用Kafka消息队列传输的下单数据及对应的支付数据,通过Flink计算工具进行接收并解析下单数据及对应的支付数据;当解析后的下单数据及对应的支付数据为主键唯一,则按数据明细进行数据存储;当解析后的下单数据及对应的支付数据为主键不唯一,则根据主键替换数据后进行数据存储;将存储的数据根据条件提取数据。2.根据权利要求1所述的基于大数据架构的实时支付标签处理方法,其特征在于,所述获取下单数据,以及获取与下单数据对应的支付数据的步骤包括:获取下单数据,以及获取与下单数据对应的支付数据;将获取的下单数据及对应的支付数据使用Json格式进行数据存储。3.根据权利要求1所述的基于大数据架构的实时支付标签处理方法,其特征在于,所述将获取的下单数据及对应的支付数据采用Kafka消息队列作为传输介质,进行数据传输的步骤包括:将存储的下单数据及对应的支付数据,采用Kafka消息队列作为传输介质,进行数据传输。4.根据权利要求1所述的基于大数据架构的实时支付标签处理方法,其特征在于,所述对采用Kafka消息队列传输的下单数据及对应的支付数据,通过Flink计算工具进行接收并解析下单数据及对应的支付数据的步骤包括:对采用Kafka消息队列传输的下单数据及对应的支付数据,通过Flink实时计算工具不间断从Kafka消息队列接收下单数据及对应的支付数据,对接收的下单数据及对应的支付数据进行数据清洗、封装,以解析下单数据及对应的支付数据。5.根据权利要求4所述的基于大数据架构的实时支付标签处理方法,其特征在于,所述对接收的下单数据及对应的支付数据进行数据清洗、封装,以解析下单数据及对应的支付数据的步骤包括:对接收的下单数据及对应的支付数据进行数据清洗为:通过Flink实时计算工具将支付标签不要...

【专利技术属性】
技术研发人员:余辉王志国马万铮
申请(专利权)人:深圳市酷开网络科技股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1