CDN日志数据处理方法、装置、设备、介质及程序产品制造方法及图纸

技术编号:41338492 阅读:25 留言:0更新日期:2024-05-20 09:56
本申请公开了一种CDN日志数据处理方法、装置、设备、介质及程序产品,本申请涉及大数据技术领域,其中,CDN日志数据处理方法包括:从CDN节点实时获取第一多模态日志数据,将所述第一多模态日志数据转换成对应的特征向量,其中,所述第一多模态日志数据至少包括实时多模态日志数据和历史多模态日志数据;将所述历史多模态日志数据对应的特征向量输入预设的日志预测模型,获得预测日志数据;基于所述预测日志数据与所述实时多模态日志数据的特征向量,确定日志差异度;若所述日志差异度大于预设的异常检测阈值,则标记所述实时多模态日志数据为异常数据。本申请解决了传统CDN日志数据的异常检测方案的准确度和灵敏度较差的技术问题。

【技术实现步骤摘要】

本申请涉及大数据,尤其涉及一种cdn日志数据处理方法、装置、电子设备、计算机可读存储介质及计算机程序产品。


技术介绍

1、随着数字化时代的到来,内容分发网络(cdn,content delivery network)已经成为互联网基础架构的重要组成部分。cdn能将内容快速、可靠地传输给终端用户并确保低延迟和高可用性。因此,cdn必须不断地调整其内容分发策略以适应不断变化的网络状况和用户需求。而cdn日志数据作为描述cdn性能和用户行为的重要信息源,被广泛用于内容分发策略的优化。

2、但传统的cdn日志处理方法依赖于预设规则对日志数据进行异常检测处理,具体依赖于预定义的固定规则和阈值来识别cdn日志数据中的异常情况,这些固定的规则和阈值不能跟随网络环境的变化实时更新,也难以应对大规模和高并发的网络环境中繁杂的异常日志数据,可能导致误报或漏报。另外,这种异常检测方案的规则和预置过于僵化,十分依赖人工对规则的手动更新,不能随着复杂的日志异常模式和快速变化的网络环境反应进行及时的迭代更新,灵敏度较差。


术实现思路<本文档来自技高网...

【技术保护点】

1.一种CDN日志数据处理方法,其特征在于,所述CDN日志数据处理方法包括:

2.如权利要求1所述CDN日志数据处理方法,其特征在于,所述从CDN节点实时获取第一多模态日志数据的步骤,包括:

3.如权利要求2所述CDN日志数据处理方法,其特征在于,在所述获取已存储的历史多模态日志数据的步骤之后,所述方法还包括:

4.如权利要求3所述CDN日志数据处理方法,其特征在于,在所述将所述第六多模态日志数据置为更新后的第一多模态日志数据的步骤之后,所述方法还包括:

5.如权利要求1所述CDN日志数据处理方法,其特征在于,所述将所述第一多模态日志数据转...

【技术特征摘要】

1.一种cdn日志数据处理方法,其特征在于,所述cdn日志数据处理方法包括:

2.如权利要求1所述cdn日志数据处理方法,其特征在于,所述从cdn节点实时获取第一多模态日志数据的步骤,包括:

3.如权利要求2所述cdn日志数据处理方法,其特征在于,在所述获取已存储的历史多模态日志数据的步骤之后,所述方法还包括:

4.如权利要求3所述cdn日志数据处理方法,其特征在于,在所述将所述第六多模态日志数据置为更新后的第一多模态日志数据的步骤之后,所述方法还包括:

5.如权利要求1所述cdn日志数据处理方法,其特征在于,所述将所述第一多模态日志数据转换成对应的特征向量的步骤,包括:

6.如权利要求1所述cdn日志数据处理方法,其特征在于,在所述将所述第一多模态日志数据转换成对应的特征向量的步骤之后,所述方法还包括:

7.如权利要求1所述cdn日志数据处理方法,其特征在于,所述历史多模态日志数据包括当前时间点前预设数量的日志键,所述预测日志数据包括当前日志键和所述当前日志键对应的日志参数;

8.如权利要求1所述cd...

【专利技术属性】
技术研发人员:孟浩艾怀丽蔡曳灵屠智玮施益峰王一淳朱赟
申请(专利权)人:中国移动紫金江苏创新研究院有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1