【技术实现步骤摘要】
本申请涉及测试,尤其是指一种测试方法、装置、测试设备、网络设备、介质及程序产品。
技术介绍
1、随着ai能力的快速发展,目前软硬件、ai、数字人、机器人及智能体等领域,在功能、性能、稳定性等多个维度测试需求不断增加。一般的测试工具主要使用机械臂、自动化测试软件或测试脚本,开展针对具体流程及指标的功能性能测试,但是随着大模型带来的ai能力涌现,各种自动化测试框架及工具由于其功能的单一性,已难以支撑日渐复杂的产品交互流程及多模态应用场景测试,测试的智能化无法与产品的智能化相匹配,无法实现在终端应用、机器人和智能体等各种类型的多模态测试场景下,测试交互过程的自动化。
技术实现思路
1、本申请技术方案的目的是提供一种测试方法、装置、测试设备、网络设备、介质及程序产品,用于解决现有技术测试方式无法实现在终端应用、机器人和智能体等各种类型的多模态测试场景下,测试交互过程的自动化的问题。
2、本申请其中一实施例提供一种测试方法,其中,包括:
3、获取待测试方案的测试要求信息,以及
...【技术保护点】
1.一种测试方法,其特征在于,包括:
2.根据权利要求1所述的测试方法,其特征在于,所述测试要求信息包括以自然语言和/或图片形式描述的测试规则和/或测试指标,所述方法还包括:
3.根据权利要求2所述的测试方法,其特征在于,所述测试指导信息包括测试指标参考值、测试组网方式、测试步骤和脚本相关信息中的一项或多项。
4.根据权利要求1所述的测试方法,其特征在于,所述方法还包括:
5.根据权利要求1所述的测试方法,其特征在于,所述测试过程信息包括测试执行工具当前状态、被测产品当前状态和测试中间结果信息中的一项或多项。
【技术特征摘要】
1.一种测试方法,其特征在于,包括:
2.根据权利要求1所述的测试方法,其特征在于,所述测试要求信息包括以自然语言和/或图片形式描述的测试规则和/或测试指标,所述方法还包括:
3.根据权利要求2所述的测试方法,其特征在于,所述测试指导信息包括测试指标参考值、测试组网方式、测试步骤和脚本相关信息中的一项或多项。
4.根据权利要求1所述的测试方法,其特征在于,所述方法还包括:
5.根据权利要求1所述的测试方法,其特征在于,所述测试过程信息包括测试执行工具当前状态、被测产品当前状态和测试中间结果信息中的一项或多项。
6.根据权利要求1所述的测试方法,其特征在于,所述测试要求信息包括以下的一项或多项:
7.根据权利要求1所述的测试方法,其特征在于,所述方法还包括:
8.根据权利要求7所述的测试方法,其特征在于,所述模型调整策略包括指令微调、损失函数调整、迁移学习策略和多模态融合策略中的一项或多项。
9.根据权利要求7所述的测试方法,其特征在于,获取多个测试应用场景下的测试数据集,包括:
10.一种测试方法,其特征在于,包括:
11.根据权利要求10所述的测试...
【专利技术属性】
技术研发人员:崔正浩,金凌,刘伟东,王蕊,梁孔明,马占宇,张如许,
申请(专利权)人:中国移动通信有限公司研究院,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。