【技术实现步骤摘要】
本专利技术涉及网络运维,特别涉及一种数据中心网络运维评估方法、装置及存储介质。
技术介绍
1、评估大语言模型在网络运维领域的综合能力对于提高网络运维效率、保障网络安全、降低故障和问题的影响具有重要意义,通过评估其能力,可以优化网络运维流程、提高系统性能,并实现自动化和智能化的网络运维。
2、相关技术中,传统的评测方法通常通过zero-shot评估或者few-shot评估的方式对大语言模型在网络运维领域的综合能力进行评估。
3、然而,在当前大语言模型网络运维领域,上述的评测方法在对模型文本输出的准确解析上以及在全面性和准确性之间的平衡方面存在不足,亟待改进。
技术实现思路
1、本专利技术提供一种数据中心网络运维评估方法、装置及存储介质,以解决传统的评测方法在对模型文本输出的准确解析上以及在全面性和准确性之间的平衡方面存在不足的问题。
2、本专利技术第一方面实施例提供一种数据中心网络运维评估方法,包括以下步骤:
3、采集多种网络运维场景的提示语、
...【技术保护点】
1.一种数据中心网络运维评估方法,其特征在于,包括以下步骤:
2.根据权利要求1所述的数据中心网络运维评估方法,其特征在于,在根据所述第一评分结果和所述第二评分结果得到网络运维评估结果之后,还包括:
3.根据权利要求1所述的数据中心网络运维评估方法,其特征在于,所述对所述多种网络运维场景的提示语进行处理得到多样性提示语变体,包括:
4.根据权利要求1所述的数据中心网络运维评估方法,其特征在于,所述根据所述至少一个关键信息和所述网络运维题目标准答案得到第一评分结果,包括:
5.根据权利要求4所述的数据中心网络运维评估方法,
...【技术特征摘要】
1.一种数据中心网络运维评估方法,其特征在于,包括以下步骤:
2.根据权利要求1所述的数据中心网络运维评估方法,其特征在于,在根据所述第一评分结果和所述第二评分结果得到网络运维评估结果之后,还包括:
3.根据权利要求1所述的数据中心网络运维评估方法,其特征在于,所述对所述多种网络运维场景的提示语进行处理得到多样性提示语变体,包括:
4.根据权利要求1所述的数据中心网络运维评估方法,其特征在于,所述根据所述至少一个关键信息和所述网络运维题目标准答案得到第一评分结果,包括:
5.根据权利要求4所述的数据中心网络运维评估方法,其特征在于,在获取所述每个关键信息对应的权重之前,还包括:
6.一种数据中心...
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。