智能音箱优化方法及测试方法、装置、设备和存储介质制造方法及图纸

本发明专利技术实施例提供一种智能音箱优化方法及测试方法、装置、设备和存储介质，该方法包括：根据未被测试对象正确响应的用户音频，获取测试音频以及测试音频对应的多种标注信息，多种标注信息与多种测试指标对应；将测试音频输入到优化后的测试对象，以获取优化后的测试对象输出的多种测试信息，多种测试信息与多种测试指标对应；根据多种标注信息和多种测试信息，确定优化后的测试对象的性能是否达到要求。在该方法中，可以获取测试对象此前不能正确响应的用户音频，基于这些用户音频来获得测试音频，使用这些测试音频对优化后的测试对象进行测试，可以使得测试结果更加准确、可靠。可靠。可靠。

【技术实现步骤摘要】
智能音箱优化方法及测试方法、装置、设备和存储介质


[0001]本专利技术涉及人工智能
，尤其涉及一种智能音箱优化方法及测试方法、装置、设备和存储介质。

技术介绍

[0002]随着人工智能技术的发展，各种支持一种或多种交互模式的产品层出不穷。
[0003]实际应用中，这些人工智能产品需要经过不断优化，以提高产品性能以及用户体验。
[0004]当某款经过优化的人工智能产品发布给广大用户使用前，需要对这款人工智能产品进行测试，以测试其性能是否符合要求。因此，如何准确、全面地完成这种测试任务是亟待解决的问题。

技术实现思路

[0005]本专利技术实施例提供一种智能音箱优化方法及测试方法、装置、设备和存储介质，可以实现测试对象(如某款人工智能产品)的准确测试。
[0006]第一方面，本专利技术实施例提供一种测试方法，该方法包括：
[0007]根据未被测试对象正确响应的用户音频，获取测试音频以及所述测试音频对应的多种标注信息，所述多种标注信息与多种测试指标对应；
[0008]将所述测试音频输入到优化后的测试对象，以获取所述优化后的测试对象输出的多种测试信息，所述多种测试信息与所述多种测试指标对应；
[0009]根据所述多种标注信息和所述多种测试信息，确定所述优化后的测试对象的性能是否达到要求。
[0010]第二方面，本专利技术实施例提供一种测试装置，该装置包括：
[0011]获取模块，用于根据未被测试对象正确响应的用户音频，获取测试音频以及所述测试音频对应的多种标注信息，所述多种标注信息与多种测试指标对应；
[0012]测试模块，用于将所述测试音频输入到优化后的测试对象，以获取所述优化后的测试对象输出的多种测试信息，所述多种测试信息与所述多种测试指标对应；
[0013]确定模块，用于根据所述多种标注信息和所述多种测试信息，确定所述优化后的测试对象的性能是否达到要求。
[0014]第三方面，本专利技术实施例提供一种电子设备，包括：存储器、处理器；其中，所述存储器上存储有可执行代码，当所述可执行代码被所述处理器执行时，使所述处理器至少可以实现如第一方面所述的测试方法。
[0015]第四方面，本专利技术实施例提供了一种非暂时性机器可读存储介质，所述非暂时性机器可读存储介质上存储有可执行代码，当所述可执行代码被电子设备的处理器执行时，使所述处理器至少可以实现如第一方面所述的测试方法。
[0016]第五方面，本专利技术实施例提供一种测试方法，该方法包括：
[0017]根据响应未达到要求的用户音频，获取测试音频以及所述测试音频对应的多种标注信息，所述多种标注信息与多种测试指标对应；
[0018]将所述测试音频输入到优化后的测试对象，以获取所述优化后的测试对象输出的多种测试信息，所述多种测试信息与所述多种测试指标对应；
[0019]根据所述多种标注信息和所述多种测试信息，确定所述优化后的测试对象的性能是否达到要求。
[0020]第六方面，本专利技术实施例提供一种测试装置，该装置包括：
[0021]获取模块，用于根据响应未达到要求的用户音频，获取测试音频以及所述测试音频对应的多种标注信息，所述多种标注信息与多种测试指标对应；
[0022]测试模块，用于将所述测试音频输入到优化后的测试对象，以获取所述优化后的测试对象输出的多种测试信息，所述多种测试信息与所述多种测试指标对应；
[0023]确定模块，用于根据所述多种标注信息和所述多种测试信息，确定所述优化后的测试对象的性能是否达到要求。
[0024]第七方面，本专利技术实施例提供一种电子设备，包括：存储器、处理器；其中，所述存储器上存储有可执行代码，当所述可执行代码被所述处理器执行时，使所述处理器至少可以实现如第五方面所述的测试方法。
[0025]第八方面，本专利技术实施例提供了一种非暂时性机器可读存储介质，所述非暂时性机器可读存储介质上存储有可执行代码，当所述可执行代码被电子设备的处理器执行时，使所述处理器至少可以实现如第五方面所述的测试方法。
[0026]第九方面，本专利技术实施例提供一种测试方法，该方法包括：
[0027]根据未被应用程序正确响应的用户音频，获取测试音频以及所述测试音频对应的多种标注信息，所述多种标注信息与多种测试指标对应，所述用户音频是用于查找目标组织内的目标用户的音频；
[0028]将所述测试音频输入到优化后的应用程序中，以获取所述优化后的应用程序输出的多种测试信息，所述多种测试信息与所述多种测试指标对应；
[0029]根据所述多种标注信息和所述多种测试信息，确定所述优化后的应用程序的性能是否达到要求。
[0030]第十方面，本专利技术实施例提供一种测试装置，该装置包括：
[0031]获取模块，用于根据未被应用程序正确响应的用户音频，获取测试音频以及所述测试音频对应的多种标注信息，所述多种标注信息与多种测试指标对应，所述用户音频是用于查找目标组织内的目标用户的音频；
[0032]测试模块，用于将所述测试音频输入到优化后的应用程序中，以获取所述优化后的应用程序输出的多种测试信息，所述多种测试信息与所述多种测试指标对应；
[0033]确定模块，用于根据所述多种标注信息和所述多种测试信息，确定所述优化后的应用程序的性能是否达到要求。
[0034]第十一方面，本专利技术实施例提供一种电子设备，包括：存储器、处理器；其中，所述存储器上存储有可执行代码，当所述可执行代码被所述处理器执行时，使所述处理器至少可以实现如第九方面所述的测试方法。
[0035]第十二方面，本专利技术实施例提供了一种非暂时性机器可读存储介质，所述非暂时
性机器可读存储介质上存储有可执行代码，当所述可执行代码被电子设备的处理器执行时，使所述处理器至少可以实现如第九方面所述的测试方法。
[0036]第十三方面，本专利技术实施例提供一种智能音箱优化方法，该方法包括：
[0037]根据未被第一智能音箱正确响应的用户音频，获取测试音频以及所述测试音频对应的多种标注信息，所述多种标注信息与多种测试指标对应；
[0038]将所述测试音频输入到第二智能音箱，以获取所述第二智能音箱输出的多种测试信息，所述多种测试信息与所述多种测试指标对应，其中，所述第二智能音箱是对所述第一智能音箱进行优化后的智能音箱；
[0039]根据所述多种标注信息和所述多种测试信息，确定所述第二智能音箱的性能是否达到要求。
[0040]第十四方面，本专利技术实施例提供一种智能音箱优化装置，该装置包括：
[0041]获取模块，用于根据未被第一智能音箱正确响应的用户音频，获取测试音频以及所述测试音频对应的多种标注信息，所述多种标注信息与多种测试指标对应；
[0042]测试模块，用于将所述测试音频输入到第二智能音箱，以获取所述第二智能音箱输出的多种测试信息，所述多种测试信息与所述多种测试指标对应，其中，所述第二智能音箱是本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种测试方法，其特征在于，包括：根据未被测试对象正确响应的用户音频，获取测试音频以及所述测试音频对应的多种标注信息，所述多种标注信息与多种测试指标对应；将所述测试音频输入到优化后的测试对象，以获取所述优化后的测试对象输出的多种测试信息，所述多种测试信息与所述多种测试指标对应；根据所述多种标注信息和所述多种测试信息，确定所述优化后的测试对象的性能是否达到要求。2.根据权利要求1所述的方法，其特征在于，所述根据未被测试对象正确响应的用户音频，获取测试音频，包括：确定所述用户音频对应的文本内容；获取包含所述文本内容的测试音频，所述测试音频以不同的语音特征表述所述文本内容。3.根据权利要求2所述的方法，其特征在于，所述测试音频是通过如下至少一种方式获得的：录制以不同的语音特征说出所述文本内容的音频作为所述测试音频；根据不同的语音特征对所述本文内容进行语音合成处理，以得到所述测试音频；从音频库中搜索出对应于所述文本内容且满足设定的语音特征筛选条件的音频作为所述测试音频。4.根据权利要求2所述的方法，其特征在于，所述语音特征包括如下至少一种：性别、口音、方位、语速、年龄、语种。5.根据权利要求1所述的方法，其特征在于，所述用户音频是通过如下至少一种方式获得的：获取同一用户连续向所述测试对象输入的同一音频作为所述用户音频；根据用户提供的错误反馈信息，获取与所述错误反馈信息对应的用户音频。6.根据权利要求1所述的方法，其特征在于，所述方法还包括：从所述测试对象中获取所述用户音频对应的应用场景数据；将所述应用场景数据加载到所述优化后的测试对象中，以使所述优化后的测试对象在所述应用场景数据中搜索用于响应所述测试音频的目标数据。7.根据权利要求1所述的方法，其特征在于，所述多种测试指标包括服务响应准确率；所述测试音频在所述服务响应准确率下对应的标注信息和测试信息分别为：希望输出的服务响应信息和实际输出的服务响应信息。8.根据权利要求1所述的方法，其特征在于，所述测试对象对所述测试音频进行响应的过程中使用到至少一种算法，所述多种测试指标中包括所述至少一种算法的计算准确率，所述至少一种算法包括用于处理所述测试音频的语音处理算法。9.根据权利要求8所述的方法，其特征在于，所述至少一种算法还包括用于识别所述测试音频对应的用户人脸图像的图像处理算法。10.根据权利要求8所述的方法，其特征在于，所述语音处理算法包括如下至少一种：声源方向定位算法、语音活动检测算法、语音识别算法、自然语言理解算法。11.根据权利要求10所述的方法，其特征在于，所述测试音频在所述语音识别算法的计
算准确率下对应的标注信息和测试信息分别为：希望所述语音识别算法识别出的文本内容和所述语音识别算法实际识别出的文本内容；所述测试音频在所述自然语言理解算法的计算准确率下对应的标注信息和测试信息分别为：希望所述自然语言理解算法识别出的意图信息和所述自然语言理解算法实际识别出的意图信息。12.一种测试装置，其特征在于，包括：获取模块，用于根据未被测试对象正确响应的用户音频，获取测试音频以及所述测试音频对应的多种标注信息，所述多种标注信息与多种测试指标对应；测试模块，用于将所述测试音频输入到优化后的测试对象，以获取所述优化后的测试对象输出的多种测试信息，所述多种测试信息与所述多种测试指标对应；确定模块，用于根据所述多种标注信息和所述多种测试信息，确定所述优化后的测试对象的性能是否达到要求。13.一种电子设备，其特征在...

【专利技术属性】
技术研发人员：黄裔源，
申请(专利权)人：钉钉控股开曼有限公司，
类型：发明
国别省市：