一种时序数据的处理方法及装置制造方法及图纸

技术编号:41437794 阅读:17 留言:0更新日期:2024-05-28 20:31
本发明专利技术提供一种时序数据的处理方法及装置,针对接收到的每一数据提供方实时发送包含报价时间戳的报价数据,添加接收时间戳和数据提供方对应的数据标识,针对每一数据提供方,基于数据提供方对应的报价数据中的接收时间戳和报价时间戳计算数据时延,识别并剔除各个报价数据中的异常报价数据,暂停接收数据时延不符合要求的数据提供方发送的报价数据,暂停接收发送异常报价数据的频率超过频率预设值的数据提供方发送的报价数据。在本方案中,无需采用中间件,计算报价数据的时延并识别出异常报价数据,暂停接收时延不符合要求以及发送异常报价数据频率过高的数据提供方发送的报价数据,以实现保证数据消费方获得低时延且无异常的报价数据。

【技术实现步骤摘要】

本专利技术涉及数据处理,具体涉及一种时序数据的处理方法及装置


技术介绍

1、为了提升交易系统的可靠性和低时延,数据消费方(例如金融交易系统)往往需要同时接入多个时序数据源提供方,例如从多个数据提供商那里,实时获取高频的汇率、债券、银行间拆借利率和银行间票据利率报价等报价数据。针对同一个报价对象的同一个时间点的报价数据,如人民币兑美元汇率在某一具体时间点的报价数据,不同数据源提供方推送的数据具有内容重复、时延不同,可靠性不同等特点。对于数据消费方低时延具有重要意义,如能获取比交易对手更低时延的报价数据,数据消费方将能更快获得稍纵即逝的有利报价和成交机会,因此数据消费方需要的是低时延且无异常的报价数据。

2、现有技术针对多源报价数据处理,主要是进行多数据源的报价数据进行统一格式转换,并通过开源消息处理中间件如(pulsar)实现数据的去重,分主题存储,再完成下发,现有技术需要依赖中间件,且没有考虑异常报价数据的识别,也没有考虑低时延报价数据的筛选,导致无法确保数据消费方获得低时延且无异常的报价数据。


>技术实现思路...

【技术保护点】

1.一种时序数据的处理方法,其特征在于,应用于数据消费方,所述数据消费方与多个数据提供方连接,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述识别出各个所述报价数据中的异常报价数据,包括:

3.根据权利要求1所述的方法,其特征在于,所述暂停接收所述数据时延不符合要求的所述数据提供方发送的报价数据,包括:

4.根据权利要求1至3任一所述的方法,其特征在于,所述方法还包括:

5.根据权利要求1至3任一所述的方法,其特征在于,所述方法还包括:

6.根据权利要求1至3任一所述的方法,其特征在于,在针对接收到的每一所述数据提...

【技术特征摘要】

1.一种时序数据的处理方法,其特征在于,应用于数据消费方,所述数据消费方与多个数据提供方连接,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述识别出各个所述报价数据中的异常报价数据,包括:

3.根据权利要求1所述的方法,其特征在于,所述暂停接收所述数据时延不符合要求的所述数据提供方发送的报价数据,包括:

4.根据权利要求1至3任一所述的方法,其特征在于,所述方法还包括:

5.根据权利要求1至3任一所述的方法,其特征在于,所述方法还包括:

6.根据权利要求1至3任一所述的方法,其特...

【专利技术属性】
技术研发人员:林时栋叶绿力
申请(专利权)人:中国农业银行股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1