问答对构建和问答方法、装置、电子设备和存储介质制造方法及图纸

技术编号:40466801 阅读:22 留言:0更新日期:2024-02-22 23:21
本发明专利技术提供一种问答对构建和问答方法、装置、电子设备和存储介质,方法包括:基于大型语言模型,生成攻击性提问;获取与所述攻击性提问中的实体相关联的知识信息;基于所述大型语言模型,以与所述攻击性提问中的实体相关联的知识信息作为参考,生成所述攻击性提问对应的解答;基于所述攻击性提问,以及所述攻击性提问对应的解答,构建问答对。本发明专利技术提供的方法、装置,实现了获取高效、高质量的安全对齐的问答对数据,提升了大型语言模型在各领域应用中进行安全对齐的训练效率以及模型的安全对齐能力,进而提升了大型语言模型在各领域的实际落地可能性。

【技术实现步骤摘要】

本专利技术涉及数据生成,尤其涉及一种问答对构建和问答方法、装置、电子设备和存储介质


技术介绍

1、随着大型语言模型带起的全球热潮,训练语言大型语言模型得到了业内外的广泛关注,而大型语言模型的安全问题更是成为大型语言模型能否落地商用的一个决定性因素。构建大量的带攻击性的用户提问,以及与之对应安全机器回复,让大型语言模型学会如何应对攻击性提问,如何规避不安全的回复。当前构建高质量的安全问答对主要是通过人工构建或者基于大型语言模型的指令生成。

2、但是,通过人工专家构建安全问答对所需要的人力成本过高,也难以在短期内构建足量的数据覆盖足够全面的安全领域。另外,基于大型语言模型的指令生成受限于大型语言模型本身的能力效果,导致生成的安全问答对存在知识滞后、价值观偏差、细节不稳定等问题。


技术实现思路

1、本专利技术提供一种问答对构建和问答方法、装置、电子设备和存储介质,用以解决现有技术中生成问答对存在知识滞后、价值观偏差的缺陷。

2、本专利技术提供一种问答对构建方法,包括:</p>

3、基于本文档来自技高网...

【技术保护点】

1.一种问答对构建方法,其特征在于,包括:

2.根据权利要求1所述的问答对构建方法,其特征在于,所述基于大型语言模型,生成攻击性提问,包括:

3.根据权利要求2所述的问答对构建方法,其特征在于,所述基于大型语言模型,生成攻击性提问,还包括:

4.根据权利要求1至3中任一项所述的问答对构建方法,其特征在于,所述基于所述攻击性提问,以及所述攻击性提问对应的解答,构建问答对,包括:

5.根据权利要求4所述的问答对构建方法,其特征在于,所述对所述候选问答对进行安全对齐检测,得到所述候选问答对的安全对齐检测结果,包括:

>6.根据权利要求4...

【技术特征摘要】

1.一种问答对构建方法,其特征在于,包括:

2.根据权利要求1所述的问答对构建方法,其特征在于,所述基于大型语言模型,生成攻击性提问,包括:

3.根据权利要求2所述的问答对构建方法,其特征在于,所述基于大型语言模型,生成攻击性提问,还包括:

4.根据权利要求1至3中任一项所述的问答对构建方法,其特征在于,所述基于所述攻击性提问,以及所述攻击性提问对应的解答,构建问答对,包括:

5.根据权利要求4所述的问答对构建方法,其特征在于,所述对所述候选问答对进行安全对齐检测,得到所述候选问答对的安全对齐检测结果,包括:

6.根据权利要求4所述的问答对构建方法,其特征在于,所述对所述候选问答对进行安全对齐检测,得到所述候选问答对的安全对齐检测结果,包括:

7.根据权利要求4所述的问答对构建方...

【专利技术属性】
技术研发人员:缪磊李亚张为泰刘权魏思王士进胡国平
申请(专利权)人:科大讯飞股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1