【技术实现步骤摘要】
本公开涉及计算机，具体涉及机器学习与自然语言处理等人工智能，尤其涉及一种模型生成结果的处理方法、装置、电子设备及存储介质。
技术介绍
1、随着生成式大模型的广泛应用，生成式大模型的效果评估也成为一项非常重要的技术。
2、生成式大模型的效果评估指的是判定生成式大模型的文本生成结果是否正确。生成式大模型的效果评估与传统模型的任务评估不同的是，生成式大模型的文本生成结果不是唯一固定的，所以在效果评估时不能简单通过字符串是否匹配进行评估。
技术实现思路
1、本公开提供了一种模型生成结果的处理方法、装置、电子设备及存储介质。
2、根据本公开的一方面，提供了一种模型生成结果的处理方法，包括：
3、对生成式大模型的文本生成结果进行拆解，得到多个结果逻辑单元；各所述结果逻辑单元包括所述文本生成结果中的片段；各所述片段能够独立标识所述文本生成结果的逻辑推理关系中的一个前提或者结论；所述文本生成结果是所述生成式大模型基于文本输入信息生成的响应结果；
4、基于所述多个结果逻辑单元，生成能够表征所述多个结果逻辑单元之间的逻辑推理关系的逻辑推理图；
5、基于所述逻辑推理图，评估所述生成式大模型生成所述文本生成结果的逻辑推理是否正确。
6、根据本公开的另一方面，提供了一种模型生成结果的处理装置，包括：
7、拆解模块，用于对生成式大模型的文本生成结果进行拆解，得到多个结果逻辑单元；各所述结果逻辑单元包括所述文本生成结果中的片段；
8、生成模块，用于基于所述多个结果逻辑单元，生成能够表征所述多个结果逻辑单元之间的逻辑推理关系的逻辑推理图；
9、评估模块，用于基于所述逻辑推理图，评估所述生成式大模型生成所述文本生成结果的逻辑推理是否正确。
10、根据本公开的再一方面，提供了一种电子设备，包括：
11、至少一个处理器；以及
12、与所述至少一个处理器通信连接的存储器；其中，
13、所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行如上所述的方面和任一可能的实现方式的方法。
14、根据本公开的又一方面，提供了一种存储有计算机指令的非瞬时计算机可读存储介质，所述计算机指令用于使所述计算机执行如上所述的方面和任一可能的实现方式的方法。
15、根据本公开的再另一方面，提供了一种计算机程序产品，包括计算机程序，所述计算机程序在被处理器执行时实现如上所述的方面和任一可能的实现方式的方法。
16、根据本公开的技术，能够对生成式大模型的逻辑推理是否正确进行高效、准确地确定，进而可以有效地提高生成式大模型的评估效率。
17、应当理解，本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征，也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。
本文档来自技高网...【技术保护点】
1.一种模型生成结果的处理方法，应用于文本处理领域，包括：
2.根据权利要求1所述的方法，其中，对生成式大模型的文本生成结果进行拆解，得到多个结果逻辑单元，包括：
3.根据权利要求1所述的方法，其中，基于所述多个结果逻辑单元，生成能够表征所述多个结果逻辑单元之间的逻辑推理关系的逻辑推理图，包括：
4.根据权利要求1所述的方法，其中，基于所述多个结果逻辑单元，生成能够表征所述多个结果逻辑单元之间的逻辑推理关系的逻辑推理图之前，所述方法还包括：
5.根据权利要求4所述的方法，其中，基于所述多个结果逻辑单元，生成能够表征所述多个结果逻辑单元之间的逻辑推理关系的逻辑推理图，包括：
6.根据权利要求5所述的方法，其中，基于所述多个结果逻辑单元，并参考所述多个输入逻辑单元，生成能够表征所述多个结果逻辑单元之间的逻辑推理关系的所述逻辑推理图，包括：
7.根据权利要求1-6任一所述的方法，其中，基于所述逻辑推理图，评估所述生成式大模型生成所述文本生成结果的逻辑推理是否正确，包括：
8.一种模型生成结果的处理装置，
9.根据权利要求8所述的装置，其中，所述拆解模块，用于：
10.根据权利要求8所述的装置，其中，所述生成模块，用于：
11.根据权利要求8所述的装置，其中，所述拆解模块，还用于：
12.根据权利要求11所述的装置，其中，所述生成模块，用于：
13.根据权利要求12所述的装置，其中，所述生成模块，用于：
14.根据权利要求8-13任一所述的装置，其中，所述评估模块，包括：
15.一种电子设备，包括：
16.一种存储有计算机指令的非瞬时计算机可读存储介质，其中，所述计算机指令用于使所述计算机执行根据权利要求1-7中任一项所述的方法。
17.一种计算机程序产品，包括计算机程序，所述计算机程序在被处理器执行时实现根据权利要求1-7中任一项所述的方法。
...【技术特征摘要】
1.一种模型生成结果的处理方法，应用于文本处理领域，包括：
2.根据权利要求1所述的方法，其中，对生成式大模型的文本生成结果进行拆解，得到多个结果逻辑单元，包括：
3.根据权利要求1所述的方法，其中，基于所述多个结果逻辑单元，生成能够表征所述多个结果逻辑单元之间的逻辑推理关系的逻辑推理图，包括：
4.根据权利要求1所述的方法，其中，基于所述多个结果逻辑单元，生成能够表征所述多个结果逻辑单元之间的逻辑推理关系的逻辑推理图之前，所述方法还包括：
5.根据权利要求4所述的方法，其中，基于所述多个结果逻辑单元，生成能够表征所述多个结果逻辑单元之间的逻辑推理关系的逻辑推理图，包括：
6.根据权利要求5所述的方法，其中，基于所述多个结果逻辑单元，并参考所述多个输入逻辑单元，生成能够表征所述多个结果逻辑单元之间的逻辑推理关系的所述逻辑推理图，包括：
7.根据权利要求1-6任一所述的方法，其中，基于所述逻辑推理图，评估所述...
【专利技术属性】
技术研发人员：田孟，杨霖，冯欣伟，冯知凡，崔骁鹏，佘俏俏，吴华，
申请(专利权)人：北京百度网讯科技有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。