人机对话质量评估方法、装置、计算机设备及存储介质制造方法及图纸

本发明专利技术公开了人机对话质量评估方法、装置、计算机设备及存储介质，其中方法包括：获取待评估的对话；分别获取待评估的对话对应的对话质量类型以及用户满意度类型；根据获取到的对话质量类型以及用户满意度类型确定出待评估的对话的质量评分。应用本发明专利技术所述方案，能够提高评估结果的准确性等。

【技术实现步骤摘要】
人机对话质量评估方法、装置、计算机设备及存储介质
本专利技术涉及计算机应用技术，特别涉及人机对话质量评估方法、装置、计算机设备及存储介质。
技术介绍
目前，人工对话产品的应用越来越广泛，如采用开放式聊天方式的度秘等。作为人机对话产品的开发者，需要准确的得知机器人聊天的质量，以便及时地调整和优化机器人的聊天水平。为此，需要进行人机对话(session)质量评估。现有技术中，通常采用主观评估方式，即主观判断对话质量的好或坏，但主观判断容易受到当时环境的干扰，且无准确的标度，因此评估结果的准确性较低。
技术实现思路
有鉴于此，本专利技术提供了人机对话质量评估方法、装置、计算机设备及存储介质，能够提高评估结果的准确性。具体技术方案如下：一种人机对话质量评估方法，包括：获取待评估的对话；分别获取所述待评估的对话对应的对话质量类型以及用户满意度类型；根据获取到的对话质量类型以及用户满意度类型确定出所述待评估的对话的质量评分。根据本专利技术一优选实施例，所述分别获取所述待评估的对话对应的对话质量类型以及用户满意度类型包括：从所述待评估的对话中截取出前N轮对话内容，N为大于一的正整数，将截取出的对话内容作为处理对象；获取所述处理对象对应的对话质量类型以及用户满意度类型。根据本专利技术一优选实施例，所述从所述待评估的对话中截取出前N轮对话内容包括：按照以下原则从所述待评估的对话中截取出前N轮对话内容：同一轮对话内容中，相邻两条对话信息之间间隔的时长小于或等于预定阈值；以及，相邻两轮对话内容中，前一轮对话内容中的最后一条对话信息与下一轮对话内容中的第一条对话信息之间间隔的时长大于所述预定阈值。根据本专利技术一优选实施例，该方法进一步包括：若所述待评估的对话中少于或等于N轮对话内容，则将所述待评估的对话作为所述处理对象。根据本专利技术一优选实施例，所述获取所述处理对象对应的对话质量类型包括：获取根据所述处理对象中的以下内容确定出的对话质量类型：是否出现影响对话质量的问题、出现问题的比例、是否出现提升对话质量的加分项。根据本专利技术一优选实施例，所述影响对话质量的问题包括：严重问题和普通问题；其中，在统计比例时，仅统计严重问题的出现比例，将一个普通问题视为x个严重问题进行处理，x大于0且小于1；所述提升对话质量的加分项包括：有趣和有内容。根据本专利技术一优选实施例，所述获取所述处理对象对应的用户满意度类型包括：获取根据所述处理对象中的以下内容确定出的用户满意度类型：是否出现来自用户的评价信息、评价信息的类型、不同类型的评价信息的出现时机；其中，评价信息的类型包括：正面的评价信息以及负面的评价信息。根据本专利技术一优选实施例，所述对话质量类型包括：劣、差、中、良、优；所述用户满意度类型包括：用户不满意、无法判断、用户满意。根据本专利技术一优选实施例，所述获取待评估的对话之前，进一步包括：生成打分对照表，所述打分对照表中保存有不同的对话质量类型以及用户满意度类型分别对应的质量评分；所述根据获取到的对话质量类型以及用户满意度类型确定出所述待评估的对话的质量评分包括：通过查询所述打分对照表，确定出获取到的对话质量类型以及用户满意度类型对应的质量评分，将获取到的质量评分作为所述待评估的对话的质量评分。一种人机对话质量评估装置，包括：对话获取单元、类型获取单元以及质量评估单元；所述对话获取单元，用于获取待评估的对话；所述类型获取单元，用于分别获取所述待评估的对话对应的对话质量类型以及用户满意度类型；所述质量评估单元，用于根据获取到的对话质量类型以及用户满意度类型确定出所述待评估的对话的质量评分。根据本专利技术一优选实施例，所述类型获取单元进一步用于，从所述待评估的对话中截取出前N轮对话内容，N为大于一的正整数，将截取出的对话内容作为处理对象；获取所述处理对象对应的对话质量类型以及用户满意度类型。根据本专利技术一优选实施例，所述类型获取单元按照以下原则从所述待评估的对话中截取出前N轮对话内容：同一轮对话内容中，相邻两条对话信息之间间隔的时长小于或等于预定阈值；以及，相邻两轮对话内容中，前一轮对话内容中的最后一条对话信息与下一轮对话内容中的第一条对话信息之间间隔的时长大于所述预定阈值。根据本专利技术一优选实施例，所述类型获取单元进一步用于，若所述待评估的对话中少于或等于N轮对话内容，则将所述待评估的对话作为所述处理对象。根据本专利技术一优选实施例，所述类型获取单元获取根据所述处理对象中的以下内容确定出的对话质量类型：是否出现影响对话质量的问题、出现问题的比例、是否出现提升对话质量的加分项。根据本专利技术一优选实施例，所述影响对话质量的问题包括：严重问题和普通问题；其中，在统计比例时，仅统计严重问题的出现比例，将一个普通问题视为x个严重问题进行处理，x大于0且小于1；所述提升对话质量的加分项包括：有趣和有内容。根据本专利技术一优选实施例，所述类型获取单元获取根据所述处理对象中的以下内容确定出的用户满意度类型：是否出现来自用户的评价信息、评价信息的类型、不同类型的评价信息的出现时机；其中，评价信息的类型包括：正面的评价信息以及负面的评价信息。根据本专利技术一优选实施例，所述对话质量类型包括：劣、差、中、良、优；所述用户满意度类型包括：用户不满意、无法判断、用户满意。根据本专利技术一优选实施例，所述装置中进一步包括：预处理单元；所述预处理单元，用于生成打分对照表，所述打分对照表中保存有不同的对话质量类型以及用户满意度类型分别对应的质量评分；所述质量评估单元通过查询所述打分对照表，确定出获取到的对话质量类型以及用户满意度类型对应的质量评分，将获取到的质量评分作为所述待评估的对话的质量评分。一种计算机设备，包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述处理器执行所述程序时实现如以上所述的方法。一种计算机可读存储介质，其上存储有计算机程序，所述程序被处理器执行时实现如以上所述的方法。基于上述介绍可以看出，采用本专利技术所述方案，在获取到待评估的对话后，可分别获取待评估的对话对应的对话质量类型以及用户满意度类型，进而可根据获取到的对话质量类型以及用户满意度类型确定出待评估的对话的质量评分，从而避免了现有技术中存在的问题，进而提高了评估结果的准确性。【附图说明】图1为本专利技术所述人机对话质量评估方法实施例的流程图。图2为本专利技术所述人机对话质量评估装置实施例的组成结构示意图。图3示出了适于用来实现本专利技术实施方式的示例性计算机系统/服务器12的框图。【具体实施方式】为了使本专利技术的技术方案更加清楚、明白，以下参照附图并举实施例，对本专利技术所述方案进行进一步说明。显然，所描述的实施例是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域技术人员在没有作出创造性劳动前提下所获得的所有其它实施例，都属于本专利技术保护的范围。图1为本专利技术所述人机对话质量评估方法实施例的流程图。如图1所示，包括以下具体实现方式。在101中，获取待评估的对话。在102中，分别获取待评估的对话对应的对话质量类型以及用户满意度类型。在103中，根据获取到的对话质量类型以及用户满意度类型确定出待评估的对话的质量评分。本实施例中，可以不是针对整个待评估的对话进行评估，而是从待评估的对话中截取出前N轮对话内容，N本文档来自技高网...

【技术保护点】
1.一种人机对话质量评估方法，其特征在于，包括：获取待评估的对话；分别获取所述待评估的对话对应的对话质量类型以及用户满意度类型；根据获取到的对话质量类型以及用户满意度类型确定出所述待评估的对话的质量评分。

【技术特征摘要】
1.一种人机对话质量评估方法，其特征在于，包括：获取待评估的对话；分别获取所述待评估的对话对应的对话质量类型以及用户满意度类型；根据获取到的对话质量类型以及用户满意度类型确定出所述待评估的对话的质量评分。2.根据权利要求1所述的方法，其特征在于，所述分别获取所述待评估的对话对应的对话质量类型以及用户满意度类型包括：从所述待评估的对话中截取出前N轮对话内容，N为大于一的正整数，将截取出的对话内容作为处理对象；获取所述处理对象对应的对话质量类型以及用户满意度类型。3.根据权利要求2所述的方法，其特征在于，所述从所述待评估的对话中截取出前N轮对话内容包括：按照以下原则从所述待评估的对话中截取出前N轮对话内容：同一轮对话内容中，相邻两条对话信息之间间隔的时长小于或等于预定阈值；以及，相邻两轮对话内容中，前一轮对话内容中的最后一条对话信息与下一轮对话内容中的第一条对话信息之间间隔的时长大于所述预定阈值。4.根据权利要求2所述的方法，其特征在于，该方法进一步包括：若所述待评估的对话中少于或等于N轮对话内容，则将所述待评估的对话作为所述处理对象。5.根据权利要求2所述的方法，其特征在于，所述获取所述处理对象对应的对话质量类型包括：获取根据所述处理对象中的以下内容确定出的对话质量类型：是否出现影响对话质量的问题、出现问题的比例、是否出现提升对话质量的加分项。6.根据权利要求5所述的方法，其特征在于，所述影响对话质量的问题包括：严重问题和普通问题；其中，在统计比例时，仅统计严重问题的出现比例，将一个普通问题视为x个严重问题进行处理，x大于0且小于1；所述提升对话质量的加分项包括：有趣和有内容。7.根据权利要求2所述的方法，其特征在于，所述获取所述处理对象对应的用户满意度类型包括：获取根据所述处理对象中的以下内容确定出的用户满意度类型：是否出现来自用户的评价信息、评价信息的类型、不同类型的评价信息的出现时机；其中，评价信息的类型包括：正面的评价信息以及负面的评价信息。8.根据权利要求1所述的方法，其特征在于，所述对话质量类型包括：劣、差、中、良、优；所述用户满意度类型包括：用户不满意、无法判断、用户满意。9.根据权利要求1所述的方法，其特征在于，所述获取待评估的对话之前，进一步包括：生成打分对照表，所述打分对照表中保存有不同的对话质量类型以及用户满意度类型分别对应的质量评分；所述根据获取到的对话质量类型以及用户满意度类型确定出所述待评估的对话的质量评分包括：通过查询所述打分对照表，确定出获取到的对话质量类型以及用户满意度类型对应的质量评分，将获取到的质量评分作为所述待评估的对话的质量评分。10.一种人机对话质量评估装置，其特征在于，包括：对话获取单元、类型获取单元以及质量评估单元；所述对话获取单元，用于获取待评估的对话...

【专利技术属性】
技术研发人员：庞翔宇，张雅茜，王天，
申请(专利权)人：百度在线网络技术北京有限公司，
类型：发明
国别省市：北京,11