基于大语言模型的问答方法、装置及电子设备制造方法及图纸

技术编号:42143119 阅读:24 留言:0更新日期:2024-07-26 23:59
本申请公开了一种基于大语言模型的问答方法、装置及电子设备,涉及人工智能技术领域。所述方法包括:基于用户输入的目标问询信息,确定记忆模块中存储的所述用户的至少一个画像信息中的第一画像信息,所述第一画像信息与所述目标问询信息的相似度大于第一特定阈值;基于所述目标问询信息和所述第一画像信息,利用大语言模型确定所述目标问询信息的答案信息;其中,所述记忆模块中存储的所述至少一个画像信息中的至少部分画像信息是基于所述用户与所述大语言模型交互的符合存储生命周期时长条件的至少一个历史对话信息得到的。

【技术实现步骤摘要】

本申请涉及人工智能,尤其涉及一种基于大语言模型的问答方法、装置及电子设备


技术介绍

1、随着大语言模型(large language model,llm)技术的发展,大语言模型可以帮助用户解决越来越多的问题。

2、然而,对于在端侧的大语言模型来说,虽然大语言模型存储在本地,可以由用户持续使用,但是在用户同大语言模型交互过程中,大语言模型只能记住当前阶段(session)同用户的历史对话信息,对此外的历史对话信息一无所知。因此,大语言模型的记忆能力相当有限,无法随着用户使用的深入而逐渐具有个性化推理能力,对用户所提问题的回答存在千人一面的问题,影响用户的使用体验。

3、为了提升大语言模型的记忆能力,相关技术通过对大语言模型外置一个记忆模块,在需要的时候从记忆模块中提取相关的历史对话信息辅助大语言模型回答用户问题。该技术虽然一定程度上改善了大语言模型记忆短的情况,但是,由于记忆模块中存储有用户同大语言模型历史交互过程中的大量历史对话信息,则会导致记忆模块需要占用较大的内存空间。


技术实现思路

本文档来自技高网...

【技术保护点】

1.一种基于大语言模型的问答方法,包括:

2.根据权利要求1所述的基于大语言模型的问答方法,所述方法还包括:

3.根据权利要求1所述的基于大语言模型的问答方法,所述方法还包括:

4.根据权利要求3所述的基于大语言模型的问答方法,所述至少一个历史对话信息按照各自对应的生命周期时长存储在所述记忆模块中;

5.根据权利要求4所述的基于大语言模型的问答方法,在所述将所述第二历史对话信息在所述记忆模块中存储的所述生命周期时长从原始的第一特定时长延长至第二特定时长之后,所述方法还包括:

6.根据权利要求1所述的基于大语言模型的问答方法,所述...

【技术特征摘要】

1.一种基于大语言模型的问答方法,包括:

2.根据权利要求1所述的基于大语言模型的问答方法,所述方法还包括:

3.根据权利要求1所述的基于大语言模型的问答方法,所述方法还包括:

4.根据权利要求3所述的基于大语言模型的问答方法,所述至少一个历史对话信息按照各自对应的生命周期时长存储在所述记忆模块中;

5.根据权利要求4所述的基于大语言模型的问答方法,在所述将所述第二历史对话信息在所述记忆模块中存储的所述生命周期时长从原始的第一特定时长延长至第...

【专利技术属性】
技术研发人员:马思凡赵泽清
申请(专利权)人:联想北京有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1