【技术实现步骤摘要】
对话机器人的测试方法和装置
本专利技术涉及对话机器人
，尤其涉及一种对话机器人的测试方法、测试装置、计算机设备、存储介质和计算机程序产品。
技术介绍
智能对话机器人已经在在各个行业都有很多的应用，极大地便捷了人们的生活，例如应用于催收场景、精准营销场景、客户需求调查场景等等。在这些应用场景中都需要用到自然语言理解(NaturalLanguageUnderstanding，NLU)模型和对话管理(DialogManagement，DM)。针对各应用场景，需要通过不停增加预料分类，扩容NLU算法模型的意图识别准确率，并完善DM的丰富度。另外，对业务使用过程中遇见的问题，需要对NLU算法模型和DM话术配置进行优化迭代。针对每个迭代优化版本的NLU算法模型和DM话术配置，需要经过充分地测试才能投入生产使用。目前，对话机器人的现有测试方案一般为使用脚本，从意图分类集中选取其中的一个或者多个意图词条，验证对话机器人的NLU算法模型的意图识别及DM话术配置，最终计算其准确率。然而，现有的对话机器人测试方法存在如下问题...
【技术保护点】
1.一种对话机器人的测试方法，其特征在于，包括：/n获取对话机器人发送的触发文本；/n从标注文本集中获取用于答复所述触发文本的返回文本及所述返回文本的标注意图数据，并将所述返回文本发送至所述对话机器人，其中，所述标注文本集采用图形数据库进行维护；/n获取所述对话机器人生成的识别意图数据，所述识别意图数据为所述对话机器人的自然语言理解NLU算法服务对所述返回文本进行处理后生成的意图数据；/n将所述识别意图数据与所述标注意图数据进行对比，以得到测试结果。/n
【技术特征摘要】
1.一种对话机器人的测试方法，其特征在于，包括：
获取对话机器人发送的触发文本；
从标注文本集中获取用于答复所述触发文本的返回文本及所述返回文本的标注意图数据，并将所述返回文本发送至所述对话机器人，其中，所述标注文本集采用图形数据库进行维护；
获取所述对话机器人生成的识别意图数据，所述识别意图数据为所述对话机器人的自然语言理解NLU算法服务对所述返回文本进行处理后生成的意图数据；
将所述识别意图数据与所述标注意图数据进行对比，以得到测试结果。
2.根据权利要求1所述的对话机器人的测试方法，其特征在于，所述触发文本由所述对话机器人的对话管理DM话术管理服务模块提供，在所述获取对话机器人发送的触发文本之前，还包括：
根据用户选择的DM话术库版本号和NLU算法版本号，确定待测试的DM话术库版本和NLU算法版本，以生成至少一个测试任务；
其中，所述NLU算法服务为所述NLU算法版本号所对应的NLU算法模型，所述获取对话机器人发送的触发文本，包括：
根据所确定的DM话术库版本向所述对话机器人发送对话请求；
获取所述对话机器人返回的所述DM话术库版本所对应的DM话术库的预设对话文本，并将所述预设对话文本确定为所述触发文本。
3.根据权利要求2所述的对话机器人的测试方法，其特征在于，在所述获取对话机器人发送的触发文本之后，还包括：
判断所述触发文本是否为所述DM话术库的结束语；
如果所述触发文本为所述DM话术库的结束语，则结束当前轮次对话；
如果所述触发文本不为所述DM话术库的结束语，则进一步从标注文本集中获取用于答复所述触发文本的返回文本及所述返回文本的标注意图数据。
4.根据权利要求2所述的对话机器人的测试方法，其特征在于，在将所述返回文本发送至所述对话机器人之后，还包括：
获取所述对话机器人发送的后续触发文本；
判断所述后续触发文本是否为所述DM话术库的结束语；
如果所述后续触发文本不为所述DM话术库的结束语，则将所述后续触发文本作为新的触发文本，进一步根据所述后续触发文本生成后续返回文本，并发送至所述对话机器人，直至所述对话机器人返回的后续触发文本为所述结束语。
5.根据权利要求2所述的对话机器人的测试方法，其特征在于，还包括：
...
【专利技术属性】
技术研发人员：王晓广，王庆彬，张帅，
申请(专利权)人：京东数科海益信息科技有限公司，
类型：发明
国别省市：北京;11
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。