一种对话质量自动评估方法及系统技术方案

技术编号:42021166 阅读:29 留言:0更新日期:2024-07-16 23:13
本发明专利技术提供一种对话质量自动评估方法及系统,涉及对话生成质量评估技术领域,所述方法包括:构建对话内容的对话认知图;根据对话认知图进行图推理,得到对话内容的对话认知表示;针对对话内容的上下文信息和对话内容的回复内容进行编码,得到对话内容的对话文本表示;通过信息交互层,将对话认知表示和对话文本表示进行融合,得到融合后的对话认知表示和对话文本表示;对融合后的对话认知表示和对话文本表示进行增强,得到增强对话认知表示和增强对话文本表示;通过多层感知器,根据增强对话认知表示和增强对话文本表示,得到对话内容的得分。通过构建对话内容的对话认知图来综合考量对话的多个方面,提高对话质量评估的精准度。

【技术实现步骤摘要】

本专利技术涉及人工智能,具体而言,涉及一种对话质量自动评估方法及系统


技术介绍

1、目前,通常采用自动对话评估的方法来评价对话内容和结构的连贯性和一致性,当对话在语言上流畅且意义清晰,具有上下文敏感性和逻辑严密时,则判断该对话具有较高的质量。一般通过bleu和rouge计算生成的对话与参考对话之间的词汇重叠来实现自动对话评估。

2、在现有技术中,通过对话与参考对话之间的词汇重叠来评估对话通常忽略了语音信息,使对话质量的评估结果与实际的对话质量存在出入,例如,在评价回复内容时仅考虑人类回复和回复内容的相似性,因此即使相似度较高的回复内容仍然存在语句不通的问题,但仍然能够得到较高的评估结果,导致现有的对话质量评估方法的评估准确性较差。


技术实现思路

1、本专利技术解决的问题是如何提高对话质量评估的精准度。

2、为解决上述问题,本专利技术提供一种对话质量自动评估方法,包括:

3、构建对话内容的对话认知图;

4、根据所述对话认知图进行图推理,得到所述对话内容的对话认知本文档来自技高网...

【技术保护点】

1.一种对话质量自动评估方法,其特征在于,包括:

2.根据权利要求1所述的对话质量自动评估方法,其特征在于,所述构建对话内容的对话认知图,包括:

3.根据权利要求2所述的对话质量自动评估方法,其特征在于,所述根据所述对话内容的多个话语的所述AMR图得到所述对话内容的时序认知和角色认知,包括:

4.根据权利要求2所述的对话质量自动评估方法,其特征在于,所述根据常识知识图谱网络得到所述对话内容的常识认知,包括:

5.根据权利要求4所述的对话质量自动评估方法,其特征在于,所述根据所述对话认知图进行图推理,得到所述对话内容的对话认知表示,包括:...

【技术特征摘要】

1.一种对话质量自动评估方法,其特征在于,包括:

2.根据权利要求1所述的对话质量自动评估方法,其特征在于,所述构建对话内容的对话认知图,包括:

3.根据权利要求2所述的对话质量自动评估方法,其特征在于,所述根据所述对话内容的多个话语的所述amr图得到所述对话内容的时序认知和角色认知,包括:

4.根据权利要求2所述的对话质量自动评估方法,其特征在于,所述根据常识知识图谱网络得到所述对话内容的常识认知,包括:

5.根据权利要求4所述的对话质量自动评估方法,其特征在于,所述根据所述对话认知图进行图推理,得到所述对话内容的对话认知表示,包括:

6.根据权利要求1所述的对话质量自动评估方法,其特征在于,所述针对所述对话内容的上下文信息...

【专利技术属性】
技术研发人员:李雪袁野杨洋王好天关毅
申请(专利权)人:哈尔滨工业大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1