AI客服模型测试方法、装置、电子设备及存储介质制造方法及图纸

本申请涉及人工智能，提供一种AI客服模型测试方法、装置、电子设备及存储介质，能够从语料库中获取预先配置的包括输入标准语料及输出标准语料的标准语料，基于语义相似算法对标准语料进行相似度分析，得到分类语料，使后续的测试更加有针对性，基于预设词库对分类语料进行扩展，生成包括与输入标准语料对应的输入数据及与输出标准语料对应的期望数据测试样本，使测试样本的覆盖面更加全面，并有效解决测试数据不足的问题，将输入数据输入至待测AI客服模型中，得到输出数据，并以配置脚本调用输出数据及期望数据，输出对待测AI客服模型的测试结果，进而实现对AI客服模型快速的自动化测试。本申请还涉及区块链技术，测试结果可存储于区块链。

【技术实现步骤摘要】
AI客服模型测试方法、装置、电子设备及存储介质
本专利技术涉及人工智能
，尤其涉及一种AI客服模型测试方法、装置、电子设备及存储介质。
技术介绍
现有技术方案中，通常采用人工打标的方式对AI(ArtificialIntelligence，人工智能)客服模型输出结果的准确性进行评价，耗时较长，且由于人为操作的不可控性，还可能产生滞后现象。
技术实现思路
鉴于以上内容，有必要提供一种AI客服模型测试方法、装置、电子设备及存储介质，能够基于语义相似算法对AI客服模型进行有针对性地测试，且测试样本的覆盖面更加全面，有效解决了测试数据不足的问题，基于人工智能手段实现对AI客服模型快速地自动化测试。一种AI客服模型测试方法，所述AI客服模型测试方法包括：当接收到对待测AI客服模型的测试指令时，从语料库中获取预先配置的标准语料，所述标准语料包括输入标准语料及输出标准语料；基于语义相似算法对所述标准语料进行相似度分析，得到分类语料；基于预设词库对所述分类语料进行扩展，生成测试样本，所述测试样本中本文档来自技高网...

【技术保护点】
1.一种AI客服模型测试方法，其特征在于，所述AI客服模型测试方法包括：/n当接收到对待测AI客服模型的测试指令时，从语料库中获取预先配置的标准语料，所述标准语料包括输入标准语料及输出标准语料；/n基于语义相似算法对所述标准语料进行相似度分析，得到分类语料；/n基于预设词库对所述分类语料进行扩展，生成测试样本，所述测试样本中包括与所述输入标准语料对应的输入数据及与所述输出标准语料对应的期望数据；/n将所述输入数据输入至所述待测AI客服模型中，得到输出数据；/n以配置脚本调用所述输出数据及所述期望数据，输出对所述待测AI客服模型的测试结果。/n

【技术特征摘要】
1.一种AI客服模型测试方法，其特征在于，所述AI客服模型测试方法包括：
当接收到对待测AI客服模型的测试指令时，从语料库中获取预先配置的标准语料，所述标准语料包括输入标准语料及输出标准语料；
基于语义相似算法对所述标准语料进行相似度分析，得到分类语料；
基于预设词库对所述分类语料进行扩展，生成测试样本，所述测试样本中包括与所述输入标准语料对应的输入数据及与所述输出标准语料对应的期望数据；
将所述输入数据输入至所述待测AI客服模型中，得到输出数据；
以配置脚本调用所述输出数据及所述期望数据，输出对所述待测AI客服模型的测试结果。


2.如权利要求1所述的AI客服模型测试方法，其特征在于，所述基于语义相似算法对所述标准语料进行相似度分析，得到分类语料包括：
基于自然语言处理将所述标准语料转换为语义向量；
采用余弦相似度算法计算所述语义向量中各个词向量间的余弦距离；
根据所述余弦距离对各个词向量进行分类，得到所述分类语料。


3.如权利要求1所述的AI客服模型测试方法，其特征在于，所述基于预设词库对所述分类语料进行扩展，生成测试样本包括：
对于所述分类语料中的每个目标词向量，计算所述目标词向量与所述预设词库中词向量的相似度；
从所述预设词库中获取与所述目标词向量的相似度大于或者等于预设相似度的词向量作为所述目标词向量的扩展词向量；
将每个目标词向量的扩展词向量添加至所述分类语料，得到所述测试样本。


4.如权利要求1所述的AI客服模型测试方法，其特征在于，所述以配置脚本调用所述输出数据及所述期望数据，输出对所述待测AI客服模型的测试结果包括：
采用POI将所述输出数据及所述期望数据写入Excel，生成excel文件；
确定所述excel文件的文件名称及指定接口的接口参数；
以所述文件名称及所述接口参数修改所述配置脚本；
以修改后的配置脚本调用所述excel文件，输出对所述待测AI客服模型的测试结果。


5.如权利要求1所述的AI客服模型测试方法，其特征在于，所述测试结果包括准确率，所述AI客服模型...

【专利技术属性】
技术研发人员：宫雪，
申请(专利权)人：平安普惠企业管理有限公司，
类型：发明
国别省市：广东;44