数据流处理方法、装置、计算机设备和存储介质制造方法及图纸

技术编号:42297708 阅读:17 留言:0更新日期:2024-08-14 15:47
本申请涉及一种数据流处理方法、装置、计算机设备、存储介质和计算机程序产品。所述方法包括:获取待存储的数据流,将数据流划分成多个数据流分段,基于各数据流分段各自包含的数据信息,确定各数据流分段各自的存储节点,根据数据信息存储于存储节点,针对每一存储节点,确定存储节点对应于多个索引维度各自的索引值,一个存储节点对应多个索引值,便于从多个索引维度对数据信息进行查询。分别将各索引值填充至所属索引维度对应的索引层,构建用于表征数据流的存储节点位置的索引结构,该方法,从多个角度即使数据流分段中数据信息出现部分缺失,在索引结构中仍存在有效索引维度,对数据信息进行查询,提高了索引结构的查询稳定性。

【技术实现步骤摘要】

本申请涉及数据处理,特别是涉及一种数据流处理方法、装置、计算机设备、存储介质和计算机程序产品。


技术介绍

1、数据流是一组有序,有起点和终点的字节的数据序列,包括输入流和输出流,数据流表的主要作用是存储网络中每条数据流的数据信息,数据流表的稳定性对于网络实际性能有着非常重要的影响。

2、现有的方式中,数据流的数据信息和数据流的索引项存储到索引结构中,由于数据流表中数据流在传输过程存在丢包的现象,导致数据流对应的索引项出现缺失情况,进而对索引结构查询稳定性造成影响,索引结构存在查询稳定性不高的问题。


技术实现思路

1、基于此,有必要针对上述技术问题,提供一种能够提高索引结构的查询稳定性的数据流处理方法、装置、计算机设备、计算机可读存储介质和计算机程序产品。

2、第一方面,本申请提供了一种数据流处理方法。所述方法包括:

3、获取待存储的数据流,将所述数据流划分成多个数据流分段;基于各所述数据流分段各自包含的数据信息,确定各所述数据流分段各自的存储节点;针对每一所述存储节点,确定本文档来自技高网...

【技术保护点】

1.一种数据流处理方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述针对每一所述存储节点,确定所述存储节点对应于多个索引维度各自的索引值,包括:

3.根据权利要求1所述的方法,其特征在于,所述方法还包括:

4.根据权利要求1所述的方法,其特征在于,所述分别将各所述索引值填充至所属索引维度对应的索引层,构建用于表征所述数据流的存储节点位置的索引结构,包括:

5.根据权利要求1所述的方法,其特征在于,所述基于各所述数据流分段各自包含的数据信息,确定各所述数据流分段各自的存储节点,包括:

<p>6.根据权利要求...

【技术特征摘要】

1.一种数据流处理方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述针对每一所述存储节点,确定所述存储节点对应于多个索引维度各自的索引值,包括:

3.根据权利要求1所述的方法,其特征在于,所述方法还包括:

4.根据权利要求1所述的方法,其特征在于,所述分别将各所述索引值填充至所属索引维度对应的索引层,构建用于表征所述数据流的存储节点位置的索引结构,包括:

5.根据权利要求1所述的方法,其特征在于,所述基于各所述数据流分段各自包含的数据信息,确定各所述数据流分段各自的存储节点,包括:

6.根...

【专利技术属性】
技术研发人员:刘昕林刘威邓巍张健
申请(专利权)人:深圳供电局有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1