数据处理的方法和装置、电子设备及存储介质制造方法及图纸

技术编号:43201125 阅读:30 留言:0更新日期:2024-11-01 20:19
本申请实施例提供了一种数据处理的方法和装置、电子设备及存储介质,属于金融科技技术领域。该方法包括:基于流处理窗口接收交易事件,得到目标交易事件流;对目标交易事件流进行事件延迟分布统计,得到延迟数据;对目标交易事件流进行事件乱序统计,得到乱序数据;根据延迟数据和乱序数据,调整流处理窗口的初始水位线得到目标水位线,在流处理窗口延迟关闭的时长未达到目标水位线的情况下,更新目标交易事件流得到当前交易事件流;在流处理窗口延迟关闭的时长达到调整后的水位线,关闭流处理窗口;对当前交易事件流中各交易事件分别进行交易分析处理。本申请实施例能够在兼顾处理效率和准确性的同时适配复杂金融数据场景的交易事件的分析处理。

【技术实现步骤摘要】

本申请涉及金融科技,尤其涉及一种数据处理的方法和装置、电子设备及存储介质


技术介绍

1、随着互联网金融的发展,网络金融的风险在与日俱增的同时交易数据量也与日俱增。因此,常采用流式处理引擎(如f l i nk)对海量的交易数据进行实时的处理实时的分析,从而可以很好的起到规避金融风险的效果。然而,基于流式处理引擎的框架中,通常是基于水位线策略来确定每一次集中处理的交易事件的数量,也即水位线策略的设置的好坏能决定交易时间处理的正确性和效率。但是相关技术中,水位线的设定策略并不能在兼顾处理效率和准确性的同时适配复杂金融数据场景的交易事件的分析处理。


技术实现思路

1、本申请实施例的主要目的在于提出一种数据处理的方法和装置、电子设备及存储介质,旨在兼顾处理效率和准确性的同时适配复杂金融数据场景的交易事件的分析处理。

2、为实现上述目的,本申请实施例的第一方面提出了一种数据处理的方法,所述方法包括:

3、基于预设的流处理窗口接收交易事件,得到目标交易事件流;

4、对所述目标交易事件流本文档来自技高网...

【技术保护点】

1.一种数据处理的方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述延迟数据包括最大延迟时间以及延迟平均时间;所述对所述目标交易事件流进行事件延迟分布统计,得到延迟数据,包括:

3.根据权利要求1所述的方法,其特征在于,所述乱序数据包括乱序分布值;所述对所述目标交易事件流进行事件乱序统计,得到乱序数据,包括:

4.根据权利要求3所述的方法,其特征在于,所述根据所述乱序交易事件的事件时间和各所述参考交易事件的事件时间,计算得到乱序分布值,包括:

5.根据权利要求1所述的方法,其特征在于,所述根据所述延迟数据和所述...

【技术特征摘要】

1.一种数据处理的方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述延迟数据包括最大延迟时间以及延迟平均时间;所述对所述目标交易事件流进行事件延迟分布统计,得到延迟数据,包括:

3.根据权利要求1所述的方法,其特征在于,所述乱序数据包括乱序分布值;所述对所述目标交易事件流进行事件乱序统计,得到乱序数据,包括:

4.根据权利要求3所述的方法,其特征在于,所述根据所述乱序交易事件的事件时间和各所述参考交易事件的事件时间,计算得到乱序分布值,包括:

5.根据权利要求1所述的方法,其特征在于,所述根据所述延迟数据和所述乱序数据,调整所述流处理窗口的初始水位线,得到目标水位线,包括:

6.根据权利要求5所述的方法,其特征在于,所述乱序数...

【专利技术属性】
技术研发人员:徐伟齐志轩陈又新
申请(专利权)人:平安科技深圳有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1