当前位置: 首页 > 专利查询>清华大学专利>正文

数据中心网络运维评估方法、装置及存储介质制造方法及图纸

技术编号:41452703 阅读:29 留言:0更新日期:2024-05-28 20:41
本发明专利技术涉及网络运维技术领域,特别涉及一种数据中心网络运维评估方法、装置及存储介质,方法包括:对多种网络运维场景的提示语处理得到多样性提示语变体并输入至大语言模型,从而输出多样模型文本,且利用正则表达式和输出概率提取策略进行解析得到关键信息;基于多样性提示语变体、网络拓扑和配置信息模拟实际网络运维情境得到模型输出结果,并进行仿真测试得到仿真测试结果;根据关键信息和网络运维题目标准答案得到第一评分结果,并根据仿真测试结果和目标结果进行比对得到第二评分结果,进而得到网络运维评估结果。由此,改善了传统评测方法在评估大语言模型网络运维能力方面的不足,更能全面、准确地评估大语言模型在网络运维方面的能力。

【技术实现步骤摘要】

本专利技术涉及网络运维,特别涉及一种数据中心网络运维评估方法、装置及存储介质


技术介绍

1、评估大语言模型在网络运维领域的综合能力对于提高网络运维效率、保障网络安全、降低故障和问题的影响具有重要意义,通过评估其能力,可以优化网络运维流程、提高系统性能,并实现自动化和智能化的网络运维。

2、相关技术中,传统的评测方法通常通过zero-shot评估或者few-shot评估的方式对大语言模型在网络运维领域的综合能力进行评估。

3、然而,在当前大语言模型网络运维领域,上述的评测方法在对模型文本输出的准确解析上以及在全面性和准确性之间的平衡方面存在不足,亟待改进。


技术实现思路

1、本专利技术提供一种数据中心网络运维评估方法、装置及存储介质,以解决传统的评测方法在对模型文本输出的准确解析上以及在全面性和准确性之间的平衡方面存在不足的问题。

2、本专利技术第一方面实施例提供一种数据中心网络运维评估方法,包括以下步骤:

3、采集多种网络运维场景的提示语、网络运维题目标准答案本文档来自技高网...

【技术保护点】

1.一种数据中心网络运维评估方法,其特征在于,包括以下步骤:

2.根据权利要求1所述的数据中心网络运维评估方法,其特征在于,在根据所述第一评分结果和所述第二评分结果得到网络运维评估结果之后,还包括:

3.根据权利要求1所述的数据中心网络运维评估方法,其特征在于,所述对所述多种网络运维场景的提示语进行处理得到多样性提示语变体,包括:

4.根据权利要求1所述的数据中心网络运维评估方法,其特征在于,所述根据所述至少一个关键信息和所述网络运维题目标准答案得到第一评分结果,包括:

5.根据权利要求4所述的数据中心网络运维评估方法,其特征在于,在获取所...

【技术特征摘要】

1.一种数据中心网络运维评估方法,其特征在于,包括以下步骤:

2.根据权利要求1所述的数据中心网络运维评估方法,其特征在于,在根据所述第一评分结果和所述第二评分结果得到网络运维评估结果之后,还包括:

3.根据权利要求1所述的数据中心网络运维评估方法,其特征在于,所述对所述多种网络运维场景的提示语进行处理得到多样性提示语变体,包括:

4.根据权利要求1所述的数据中心网络运维评估方法,其特征在于,所述根据所述至少一个关键信息和所述网络运维题目标准答案得到第一评分结果,包括:

5.根据权利要求4所述的数据中心网络运维评估方法,其特征在于,在获取所述每个关键信息对应的权重之前,还包括:

6.一种数据中心...

【专利技术属性】
技术研发人员:李丹罗子秋
申请(专利权)人:清华大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1