数据集的更新统计方法、装置、电子设备及存储介质制造方法及图纸

本申请提供一种数据集的更新统计方法、装置、电子设备及存储介质，所述方法包括在所述多个子数据集中确定更新的子数据集，将更新的子数据集作为待统计子数据集；针对每个待统计子数据集，对所述待统计子数据集进行遍历，得到所述待统计子数据集中的每条待统计子数据的键值；基于所述键值，利用预设的统计模板对所述待统计子数据进行统计，得到第一统计值；在预设的存储引擎中确定所述数据集的历史统计值，基于所述第一统计值，对所述数据集的历史统计值进行更新，解决了现有技术中对于数据集的更新统计的效率低的技术问题，提高了对数据集进行更新统计的准确性。

【技术实现步骤摘要】

本申请涉及数据处理，尤其涉及一种数据集的更新统计方法、装置、电子设备及存储介质。

技术介绍

1、随着网络的应用越来越广泛，网络中的数据流量也越来越多。为了直观得到应用中的有效信息，需要对应用的数据集进行统计。在对数据集的数据进行实时处理时，通常需要对k/v（key/value，键值/数值）形式的数据集按指定key进行数据统计，统计结果的key也通常需要根据数据处理应用，取不同的key，并按指定的数据存储组件进行存储。

2、目前对k/v形式的数据集的统计通常通过编写特定代码的方式对具体应用的k/v数据集进行统计，需要开发人员利用现有代码库手动编写，手动编写代码需要研发时间，且对于编写的代码需要重新开发和测试，存在软件bug的风险，既不利于快速对数据集进行统计，也不利于对数据集统计的准确性。

技术实现思路

1、有鉴于此，本申请的目的在于提出一种数据集的更新统计方法、装置、电子设备及存储介质，以克服现有技术中全部或部分不足。

2、基于上述目的，本申请提供了一种数据集的更新统计方法，所述数据集本文档来自技高网...

【技术保护点】

1.一种数据集的更新统计方法，其特征在于，所述数据集包括多个子数据集，所述方法包括：

2.根据权利要求1所述的方法，其特征在于，构建预设的统计模板，包括：

3.根据权利要求2所述的方法，其特征在于，在生成统计模板之后，所述方法包括：

4.根据权利要求2所述的方法，其特征在于，所述配置信息包括数据执行动作，以及数据键值集合；

5.根据权利要求1所述的方法，其特征在于，所述第一统计值包括与其关联的存储引擎的标识和所属数据集标识；

6.根据权利要求1所述的方法，其特征在于，在对所述待统计子数据集进行遍历之前，所述方法包括：

...

【技术特征摘要】

1.一种数据集的更新统计方法，其特征在于，所述数据集包括多个子数据集，所述方法包括：

2.根据权利要求1所述的方法，其特征在于，构建预设的统计模板，包括：

3.根据权利要求2所述的方法，其特征在于，在生成统计模板之后，所述方法包括：

4.根据权利要求2所述的方法，其特征在于，所述配置信息包括数据执行动作，以及数据键值集合；

5.根据权利要求1所述的方法，其特征在于，所述第一统计值包括与其关联的存储引擎的标识和所属数据集标识；

6.根据权利要求1所述的方法，其特征在于，在对所述待...

【专利技术属性】
技术研发人员：李少敏，王凯峰，
申请(专利权)人：北京天元特通科技有限公司，
类型：发明
国别省市：

全部详细技术资料下载 我是这个专利的主人