数据处理方法、装置、电子设备和计算机可读介质制造方法及图纸

本公开的实施例公开了数据处理方法、装置、电子设备和计算机可读介质。该方法的一具体实施方式包括：基于数据库配置信息，对至少一个终端在预设时间窗口内所产生的数据添加指标字段；对已添加指标字段的数据进行指标聚合；将指标聚合后的数据存储到实时分布式搜索和分析引擎中。该实施方式通过根据数据库的配置信息对来自不同终端的数据添加指标字段，简化了后续数据处理过程，提高了数据处理效率。

【技术实现步骤摘要】
数据处理方法、装置、电子设备和计算机可读介质
本公开的实施例涉及计算机
，具体涉及数据处理方法、装置、电子设备和计算机可读介质。
技术介绍
随着大数据及云计算技术广泛应用以及智能设备的广泛普及，各种终端用户每天可以产生包含各种事件的、海量的数据。对这些拥有细粒度的海量数据进行处理面临着巨大的挑战。为了提取数据中有用的信息，需要对数据中各种指标进行分析。合理的筛选对业务需求有价值的指标，支持指标灵活扩展的数据处理方式，能更方便的挖掘数据中蕴藏的价值。现有的技术对数据中需要进行分析的各个指标添加独立的指标字段，数据处理效率低且不支持指标的灵活扩展。
技术实现思路
本公开的内容部分用于以简要的形式介绍构思，这些构思将在后面的具体实施方式部分被详细描述。本公开的内容部分并不旨在标识要求保护的技术方案的关键特征或必要特征，也不旨在用于限制所要求的保护的技术方案的范围。本公开的一些实施例提出了数据处理方法、装置、电子设备和计算机可读介质，来解决以上
技术介绍
部分提到的技术问题。第一方面，本公开的一些实施例提供本文档来自技高网...

【技术保护点】
1.一种数据处理方法，包括：/n基于数据库配置信息，对至少一个终端在预设时间窗口内所产生的数据添加指标字段；/n对已添加指标字段的数据进行指标聚合；/n将指标聚合后的数据存储到实时分布式搜索和分析引擎中。/n

【技术特征摘要】
1.一种数据处理方法，包括：
基于数据库配置信息，对至少一个终端在预设时间窗口内所产生的数据添加指标字段；
对已添加指标字段的数据进行指标聚合；
将指标聚合后的数据存储到实时分布式搜索和分析引擎中。


2.根据权利要求1所述的方法，其中，所述基于数据库配置信息，对至少一个终端在预设时间窗口内所产生的数据添加指标字段，包括：
基于所述数据库配置信息，对所述数据进行筛选，得到筛选数据；
对所述筛选数据添加指标字段。


3.根据权利要求2所述的方法，其中，所述对所述筛选数据添加指标字段，包括：
将所述筛选数据包含的多个指标整合到一个指标列表；
为所述指标列表添加一个指标字段。


4.根据权利要求1所述的方法，其中，所述对已添加指标字段的数据进行指标聚合，包括：
按照所述已添加指标字段的数据所包含的特定指标，对所述已添加指标字段的数据进行分组；对各个分组中的数据进行指标聚合。


5.根据权利要求1所述的方法，其中，所述将指标聚合后的数据存储到实时分布式搜索和分析引擎中，包括：
将所述指标聚合后的数据中存有多个指标的指标字段拆分成包含一个指标的多个指标字段；
将拆分指标字段的数据存储到实时分布式搜索和分析引擎中。


6.一种数据处理装置，包括：
添加单元，被配置成基于数据库配置信息，对至少一个终端在预设时间窗口内所产生的数据添加指标字段；
聚合单元，...

【专利技术属性】
技术研发人员：王雨生，郭颖，王博洋，
申请(专利权)人：北京有竹居网络技术有限公司，
类型：发明
国别省市：北京;11