数据处理方法、装置、电子设备、介质和程序产品制造方法及图纸

本申请提供一种数据处理方法、装置、电子设备、介质和程序产品，属于数据处理技术领域，该方法包括：获取所述数据处理装置的当前数据处理量以及各个单元设备的数据产生速率；根据所述当前数据处理量以及所述数据产生速率确定当前时间段，并获取各个所述单元设备在所述当前时间段内产生的目标数据；对所述目标数据中预设类型的字段进行解析得到属性信息，并根据所述属性信息对所述目标数据中属性相同的第一子数据进行聚合，得到聚合数据。本申请中，降低了数据处理装置的工作负荷，避免数据处理装置崩溃，提高了数据处理装置的运行稳定性。提高了数据处理装置的运行稳定性。提高了数据处理装置的运行稳定性。

【技术实现步骤摘要】
数据处理方法、装置、电子设备、介质和程序产品


[0001]本申请涉及数据处理
，尤其涉及一种数据处理方法、装置、电子设备、介质和程序产品。

技术介绍

[0002]随着网络技术的发展，很多大型的网络系统都已经实现了单元化架构。单元化架构包括多个单元，而多个单元可以部署在不同的位置。可以通过多个单元进行组合以完成某个任务中的各个子任务。
[0003]各个单元每时每刻会产生大量的数据，这些数据会进行分析等处理。但数量的数据量庞大，导致数据的处理量极大，使得数据处理设备处于高负荷的状态，严重时会导致数据处理设备崩溃，数据处理设备的运行稳定性较差。

技术实现思路

[0004]本申请提供一种数据处理方法、装置、电子设备、介质和程序产品，用以解决数据处理设备的运行稳定性较差的问题。
[0005]一方面，本申请提供一种数据处理方法，应用于数据处理装置，所述数据处理方法包括：
[0006]获取所述数据处理装置的当前数据处理量以及各个单元设备的数据产生速率；
[0007]根据所述当前数据处理量以及所述数据产生速本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种数据处理方法，其特征在于，应用于数据处理装置，所述数据处理方法包括：获取所述数据处理装置的当前数据处理量以及各个单元设备的数据产生速率；根据所述当前数据处理量以及所述数据产生速率确定当前时间段，并获取各个所述单元设备在所述当前时间段内产生的目标数据，所述目标数据的数据量小于所述当前数据处理量；对所述目标数据中预设类型的字段进行解析得到属性信息，并根据所述属性信息对所述目标数据中属性相同的第一子数据进行聚合，得到聚合数据。2.根据权利要求1所述的数据处理方法，其特征在于，所述获取所述数据处理装置的当前数据处理量的步骤包括：确定所述数据处理装置的预留资源、总资源以及所述数据处理装置的最大数据处理量，所述预留资源用于所述数据处理装置处理其他事项，所述其他事项是除数据聚合之外的事项；确定所述预留资源与所述总资源的比值，并根据所述比值以及所述最大数据处理量确定当前数据处理量。3.根据权利要求1所述的数据处理方法，其特征在于，所述对所述目标数据中预设类型的字段进行解析得到属性信息的步骤包括：将所述目标数据中数据标识相同的第一子数据构建为第一数据集合，并对所述第一数据集合中的各个所述第一子数据进行去重，得到第二数据集合；对第二子数据中预设类型的字段进行解析，得到属性信息，所述第二子数据是所述第二数据集合中的数据。4.根据权利要求1所述的数据处理方法，其特征在于，所述获取各个所述单元设备在所述当前时间段内产生的目标数据的和步骤包括：获取各个所述单元设备在所述当前时间段产生的各个第三子数据；按照各个所述第三子数据的产生时间进行排序，以构成所述目标数据。5.根据权利要求1所述的数据处理方法，其特征在于，还包括：获取各个所述单元设备的访问规则以及对应的规则优先级，所述访问规则用于第一单元设备访问或禁止访问第二单元设备，所述规则优先级用于指示第一单元设备按照所述规则优先级对应的报警形式进行禁止访问的报警；将所述访问规则以及对应的规则优先级，发送至各个所述单元设备。6.根据权利要求5所述的数据处理方法，其特征在于，所述获取各个所述单元设备的访问规则以及对应的规则优先级的步骤包括：在...

【专利技术属性】
技术研发人员：王鹏培，顾欣，杜楠，丁兴中，
申请(专利权)人：中国工商银行股份有限公司，
类型：发明
国别省市：