一种未知日志分类决策系统技术方案

本发明专利技术提出的一种未知日志分类决策系统

【技术实现步骤摘要】
一种未知日志分类决策系统、方法、装置及可读存储介质


[0001]本专利技术涉及日志分类
，更具体的说是涉及一种未知日志分类决策系统
、
方法
、
装置及可读存储介质
。

技术介绍

[0002]在大数据时代，日志文件的处理和分类变得越来越重要
。
传统的日志分类方法通常依赖于手工编写的规则或传统机器学习分类算法，这些方法在处理大量复杂和未知类型的日志时表现不佳
。
[0003]其中，基于规则的日志分类方法是传统的日志分类方法之一，它依赖于事先定义的规则集来识别和分类日志，这种方法受限于已定义的规则，无法适应未知类型的日志或复杂的日志结构，当出现新的日志类型时，传统方法需要重新编写规则或者更新算法，这会导致处理延迟和不准确性
。
基于机器学习分类算法的方案，如决策树
、
支持向量机或神经网络，从训练数据中学习日志分类模型，通过使用已标记的训练数据自动学习日志分类规则，这种方法通常需要大量标记的数据来训练模型，且需要定期更新以适应新的日志类型本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.
一种未知日志分类决策系统，其特征在于，包括：大模型总结模块
、
命名实体识别模块和分类决策模块；大模型总结模块，配置用于通过大语言模型对已有的日志分类规则策略以及不同分类中的命名实体进行总结
、
归纳
、
演绎，生成基于命名实体的分类模型，并针对未知日志结合已有分类进行新增分类推荐，更新分类模型；命名实体识别模块，配置用于从未知类型的日志中提取命名实体信息；分类决策模块，配置用于利用基于命名实体的分类模型将未知类型的日志条目分类到适当的类别中，并生成未分类日志反馈给大模型总结模块
。2.
根据权利要求1所述的未知日志分类决策系统，其特征在于，所述大模型总结模块包括：规则抽取单元，配置用于从已有的日志分类规则以及对应规则的日志中提取关键特征和模式，以捕捉不同类别日志的共性和差异；实体分析单元，配置用于分析不同分类中出现的命名实体，以确定它们在日志分类中的重要性和关联性；分类模型生成单元，配置用于基于提取的关键特征和模式
、
不同分类中出现的命名实体，生成基于命名实体的分类模型；分类模型更新单元，配置用于结合已有的基于命名实体分类规则，针对无法分类日志进行新增分类推荐，更新基于命名实体的分类模型
。3.
根据权利要求2所述的未知日志分类决策系统，其特征在于，所述命名实体识别模块，包括：文本预处理单元，配置用于对未知类型的日志进行文本预处理；实体识别单元，配置用于应用命名实体识别技术，自动识别日志中的命名实体；实体提取单元，配置用于将识别到的命名实体信息提取出来，并进行结构化存储
。4.
根据权利要求3所述的未知日志分类决策系统，其特征在于，所述分类决策模块包括：实体与规则综合分析单元，配置用于利用基于命名实体的分类模型
、
存储的命名实体信息以及未知类型日志的内容，进行实体与规则的分析，确定命名实体频率和命名实体关联关系，生成综合分析结果；分类决策单元，配置用于根据综合分析的结果，确定日志条目分类的类别或子类别，生成分类决策；反馈推荐单元，配置用于根据综合分析的结果，将无法分类的子类别的日志反馈给大模型总结模块；分类结果输出单元，配置将分类决策的结果输出，以供后续的日志管理
、
监控或报警系统使用
。5.
一种未知日志分类...

【专利技术属性】
技术研发人员：罗圣美，路冰，卢延科，
申请(专利权)人：中孚安全技术有限公司，
类型：发明
国别省市：