话术测试方法、装置、电子设备及存储介质制造方法及图纸

本申请涉及数据处理技术，尤其涉及一种话术测试方法、装置、电子设备及存储介质，该方法包括：获取针对预设内容的话术集，所述话术集包括多个话术；获取所述预设内容对应的话术列表；根据所述话术集与所述话术列表确定所述话术集对应的目标覆盖率；在所述目标覆盖率大于预设阈值时，确认所述预设内容的话术被全部覆盖；在所述目标覆盖率小于或等于预设阈值时，确认所述预设内容的话术未被全部覆盖。采用本申请实施例能够实现快速确定话术覆盖程度。

【技术实现步骤摘要】
话术测试方法、装置、电子设备及存储介质
本申请涉及数据处理
，具体涉及一种话术测试方法、装置、电子设备及存储介质。
技术介绍
在测试一个人工智能(ArtificialIntelligence，AI)机器人项目时，AI机器人和客户是通过电话交互。接收到客户应答时，会根据客户应答意图，选择对应的话术来应对。选一个意图对应有20条话术，AI机器人随机选择择话术。我们需要测试这20条话术全部都是正确的。按照业务一般的测试办法，采用真实电话沟通，或者结果接口一次次调用的方式。不管是采用电话还是接口一次次调用来实现，都需要非常多的时间。20条话术，按照我们的经验需要大概100次调用才会全部被覆盖。总共大概有60个意图，需要6000次以上的调用。一通对话按照2分钟来计算，需要非常大的时间和人力来完成测试，通过接口一次次调用手动处理应答，也会需要大量时间来出。不管是通过电话还是手动输入应答方式来处理，都需要大量的时间来验证，对应项目快速迭代来说，无法满足项目需要，因此，如何快速确定话术覆盖程度的问题亟待解决。专利
技术实现思路
本本文档来自技高网...

【技术保护点】
1.一种话术测试方法，其特征在于，所述方法包括：/n获取针对预设内容的话术集，所述话术集包括多个话术；/n获取所述预设内容对应的话术列表；/n根据所述话术集与所述话术列表确定所述话术集对应的目标覆盖率；/n在所述目标覆盖率大于预设阈值时，确认所述预设内容的话术被全部覆盖；/n在所述目标覆盖率小于或等于预设阈值时，确认所述预设内容的话术未被全部覆盖。/n

【技术特征摘要】
1.一种话术测试方法，其特征在于，所述方法包括：
获取针对预设内容的话术集，所述话术集包括多个话术；
获取所述预设内容对应的话术列表；
根据所述话术集与所述话术列表确定所述话术集对应的目标覆盖率；
在所述目标覆盖率大于预设阈值时，确认所述预设内容的话术被全部覆盖；
在所述目标覆盖率小于或等于预设阈值时，确认所述预设内容的话术未被全部覆盖。


2.根据权利要求1所述的方法，其特征在于，所述根据所述话术集与话术列表确定所述话术集对应的目标覆盖率，包括：
确定所述话术集中的话术与所述话术列表中的话术之间的匹配值；
依据所述匹配值确定所述话术集对应的目标覆盖率。


3.根据权利要求1所述的方法，其特征在于，所述根据所述话术集与话术列表确定所述话术集对应的目标覆盖率，包括：
获取预设次数；
通过所述预设次数更新所述话术列表的长度，并基于该长度更新所述话术列表，得到更新后的话术列表；
确定所述更新后的话术列表的预测比对耗时；
依据所述预设次数，将所述话术集与话术列表进行比对，得到实际比对耗时；
依据所述预测比对耗时和所述实际比对耗时确定所述目标覆盖率。


4.根据权利要求1所述的方法，其特征在于，所述根据所述话术集与话术列表确定所述话术集对应的目标覆盖率，包括：
将所述话术集中每一话术进行特征提取，得到多个特征集；
获取所述话术列表对应的预设神经网络模型；
将所述多个特征集输入到预设神经网络模型，得到目标覆盖率。


5.根据权利要求1-4任一项所述的方法，其特征在于，所述获取所述预设内容对应的话术列表，包括：
获取所述预设内容对应的目标语言类型；
按照预设的语言类型与话术列表之间的映射关系，确定所述目标语言类型对应的话术列表。


6.根据权利要求1-4任一项所述的方法，其特征在于...

【专利技术属性】
技术研发人员：陆华，郑鹰飞，谷若兰，
申请(专利权)人：平安消费金融有限公司，
类型：发明
国别省市：上海;31