【技术实现步骤摘要】
数据的聚合处理装置、方法和存储介质
本说明书属于数据库处理
,尤其涉及数据的聚合处理装置、方法和存储介质。
技术介绍
随着技术的发展,数据库所包含的数据量越来越庞大。相应的,服务器在响应用户针对数据库的查询请求,对数据库中的数据进行聚合处理(或操作)所需要的耗时也变得越来越长,导致用户往往需要等待较长的时间,才能得到服务器反馈的聚合处理结果。因此,亟需一种能够达到针对数据库中的数据高效地进行聚合处理的方法。
技术实现思路
本说明书提供了一种数据的聚合处理装置、方法和存储介质,以提高聚合处理效率,解决现有方法中存在的聚合处理效率低、处理过程耗时长的技术问题。本说明书提供的一种数据的聚合处理装置、方法和存储介质是这样实现的:一种数据的聚合处理装置,包括序列分组模块、聚合模块组,和合并模块,其中,序列分组模块与聚合模块组相连,合并模块与聚合模块组相连;序列分组模块,用于将所接入的数据库中的目标数据序列,划分为多个子序列组,得到多个子序列;其中,所述目标数据序列包括多个数据元 ...
【技术保护点】
1.一种数据的聚合处理装置,其特征在于,包括序列分组模块、聚合模块组,和合并模块,其中,序列分组模块与聚合模块组相连,合并模块与聚合模块组相连;/n序列分组模块,用于将所接入的数据库中的目标数据序列,划分为多个子序列组,得到多个子序列;其中,所述目标数据序列包括多个数据元素;/n聚合模块组包括多个并联的聚合模块,所述聚合模块组用于获取多个子序列,并通过多个并联的聚合模块对所述多个子序列并行进行聚合处理,得到对应的多个子序列的中间处理结果;/n合并模块,用于合并所述中间处理结果,得到针对目标数据序列的聚合处理结果。/n
【技术特征摘要】
1.一种数据的聚合处理装置,其特征在于,包括序列分组模块、聚合模块组,和合并模块,其中,序列分组模块与聚合模块组相连,合并模块与聚合模块组相连;
序列分组模块,用于将所接入的数据库中的目标数据序列,划分为多个子序列组,得到多个子序列;其中,所述目标数据序列包括多个数据元素;
聚合模块组包括多个并联的聚合模块,所述聚合模块组用于获取多个子序列,并通过多个并联的聚合模块对所述多个子序列并行进行聚合处理,得到对应的多个子序列的中间处理结果;
合并模块,用于合并所述中间处理结果,得到针对目标数据序列的聚合处理结果。
2.根据权利要求1所述的装置,其特征在于,在所述聚合模块组和所述序列分组模块之间还连接有子序列缓存模块,所述子序列缓存模块用于缓存所述多个子序列。
3.根据权利要求2所述的装置,其特征在于,所述子序列缓存模块包括片上存储器,所述子序列缓存模块将所述多个子序列缓存在片上存储器中。
4.根据权利要求3所述的装置,其特征在于,所述子序列缓存模块还包括DDR存储器和/或SSD存储器,所述子序列缓存模块在所述片上存储器的存储空间不满足存储要求的情况下,将所述多个子序列缓存在所述DDR存储器和/或SSD存储器中。
5.根据权利要求1所述的装置,其特征在于,在所述合并模块和所述聚合模块组之间还连接有中间处理结果缓存模块,所述中间处理结果缓存模块用于缓存多个中间处理结果。
6.根据权利要求5所述的装置,其特征在于,所述中间处理结果缓存模块包括片上存储器,所述中间处理结果缓存模块用于将所述多个中间处理结果缓存在片上存储器中。
7.根据权利要求1所述的装置,其特征在于,在所述聚合模块组和所述序列分组模块之间还连接有子序列分组模块组,其中,所述子序列分组模块组包括多个子序列分组模块,所述多个子序列分组模块用于对所述多个子序列中的各个子序列所包含的数据元素进行分组处理,将所述多个子序列中的子序列分别拆分成多个单位子序列。
8.根据权利要求1所述的装置,其特征在于,所述聚合模块包括多个逻辑操作单元,所述多个逻辑操作单元包括以下至少之一:加法单元、除法单元、比较单元。
9.根据权利要求8所述的装置,其特征在于,所述装置还包括配置端口,所述配置端口与所述聚合模块组中聚合模块相连,所述配置端口用于接收用户设置的聚合处理的模式配置参数。
10.根据权利要求9所述的装置,其特征在于,所述模块用于根据所述模式配置参数组合多个逻辑操作单元,以对子序列进行对应的模式类型的聚合处理。
11.根据权利要求10所述的装置,其特征在于,聚合处理的模式类型包括以下至少之一:求和处理、求平均值处理、求最小值处理和求最大值处理。
12.一种数据的聚合处理方法,其特征在于,包括:
获取数据库中的目标数据序列,其中,所述目标数...
【专利技术属性】
技术研发人员:鄢贵海,卢文岩,
申请(专利权)人:中科驭数北京科技有限公司,
类型:发明
国别省市:北京;11
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。