System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind()
【技术实现步骤摘要】
本专利技术涉及自动化测试,特别是涉及一种任务测试方法、装置、系统、设备和介质。
技术介绍
1、自动化测试是把以人为驱动的测试行为转化为机器执行的一种过程。目前测试技术中,比较常用的是实用testng(testing next generation,下一代测试技术)做集成测试框架,简单的集成到任务集成系统(jenkins)中,通过jenkins触发任务,进行测试并记录自动化测试结果。
2、该方案简单可靠,而且成本低,可以快速落地实现。但是也存在一些问题,测试报告需要最后统一输出,无法实时展示。如果集成测试用例很多,只能等到最后一个测试用例执行完成才能分析测试结果,而不能进行实时分析,导致问题定位效率偏低。整个测试过程中,如果因为中间某个测试用例阻塞会导致一直无法结束,或者其他原因导致后续测试用例全部跳过,那么最后得出的测试报告是不完整的,下次执行任务需要重头跑所有测试用例,而无法从阻塞的地方继续执行,没有断点续跑能力,导致自动化测试的鲁棒性较差。
3、可见,如何提升自动化测试的效率和鲁棒性,是本领域技术人员需要解决的问题。
技术实现思路
1、本专利技术实施例的目的是提供一种任务测试方法、装置、系统、设备和计算机可读存储介质,可以解决自动化测试效率和鲁棒性差的问题。
2、为解决上述技术问题,本专利技术实施例提供一种任务测试方法,包括:
3、在获取到平台设备下发的测试命令的情况下,根据所述测试命令携带的参数信息以及当前测试任务所对应的各测试
4、执行各所述目标测试用例,并存储各所述目标测试用例的执行记录;
5、在获取到所述平台设备下发的报告自动生成命令的情况下,根据所述当前测试任务的任务状态以及所述执行记录,生成测试报告,以便于所述平台设备展示所述测试报告。
6、一方面,所述根据所述测试命令携带的参数信息以及当前测试任务所对应的各测试用例的执行状态,确定出所需执行的目标测试用例包括:
7、判断所述测试命令是否携带了断点续跑参数;
8、在所述测试命令携带了断点续跑参数的情况下,从设定的存储空间中读取上一次任务的执行记录;其中,所述上一次任务是与所述当前测试任务具有相同任务标识并且时间最接近的任务;
9、依据所述执行记录判断所述测试命令所指向的测试用例在上一次任务中是否被执行;
10、在所述测试命令所指向的测试用例在上一次任务中未被执行或者所述测试命令未携带断点续跑参数的情况下,将所述测试命令所指向的测试用例作为所需执行的目标测试用例。
11、一方面,所述将所述测试命令所指向的测试用例作为所需执行的目标测试用例包括:
12、根据设定的任务标识和测试标识的对应关系以及所述测试命令携带的目标任务标识,确定所述测试命令匹配的目标测试标识;
13、从预先设定的所有测试用例中选取与所述目标测试标识匹配的目标测试用例。
14、一方面,所述将所述测试命令所指向的测试用例作为所需执行的目标测试用例包括:
15、根据设定的任务标识和测试标识的对应关系以及所述测试命令携带的目标任务标识,确定所述测试命令匹配的目标测试标识;
16、从用例库中下载所述目标测试标识匹配的目标测试用例。
17、一方面,所述根据所述当前测试任务的任务状态以及所述执行记录,生成测试报告包括:
18、判断所述当前测试任务的任务状态是否为运行状态;
19、在所述当前测试任务的任务状态为运行状态的情况下,按照周期时间从设定的存储空间中读取所述当前测试任务对应的所有执行记录;
20、从所述当前测试任务对应的所有执行记录中统计报告所需的各类信息,以生成测试报告;
21、在所述当前测试任务的任务状态不为运行状态的情况下,结束测试报告的生成。
22、一方面,所述从所述当前测试任务对应的所有执行记录中统计报告所需的各类信息,以生成测试报告包括:
23、基于所述当前测试任务对应的所有执行记录,统计出测试用例总数、测试用例的执行状态分布以及每个测试用例的执行信息;其中,所述执行状态分布包括执行成功的测试用例个数、执行失败的测试用例个数以及未执行的测试用例个数。
24、一方面,所述存储各所述目标测试用例的执行记录包括:
25、记录各所述目标测试用例各自对应的执行记录;其中,所述执行记录包括各所述目标测试用例对应的目标任务标识、目标用例标识、执行状态和执行结果;其中,所述执行状态包括未执行、执行失败和执行成功;所述执行状态为执行失败的情况下,执行结果包括执行失败的原因;
26、根据任务标识、测试用例所在的文件名以及用例标识设置的三级存储结构,将各所述执行记录存储至设定的存储空间;
27、相应的,所述从设定的存储空间中读取所述当前测试任务对应的所有执行记录包括:
28、判断所述设定的存储空间是否存在与所述当前测试任务携带的目标任务标识匹配的任务标识;
29、在所述设定的存储空间不存在与所述当前测试任务携带的目标任务标识匹配的任务标识的情况下,向所述平台设备反馈测试任务记录异常的提示信息;
30、在所述设定的存储空间存在与所述当前测试任务携带的目标任务标识匹配的任务标识的情况下,从所述设定的存储空间中读取具有所述任务标识的所有执行记录。
31、本专利技术实施例还提供了一种任务测试装置,包括确定单元、执行单元、存储单元和生成单元;
32、所述确定单元,用于在获取到平台设备下发的测试命令的情况下,根据所述测试命令携带的参数信息以及当前测试任务所对应的各测试用例的执行状态,确定出所需执行的目标测试用例;其中,所述参数信息用于表征是否具有断点续跑需求;
33、所述执行单元,用于执行各所述目标测试用例;
34、所述存储单元,用于存储各所述目标测试用例的执行记录;
35、所述生成单元,用于在获取到所述平台设备下发的报告自动生成命令的情况下,根据所述当前测试任务的任务状态以及所述执行记录,生成测试报告,以便于所述平台设备展示所述测试报告。
36、一方面,所述确定单元包括续跑判断子单元、读取子单元、执行判断子单元和作为子单元;
37、所述续跑判断子单元,用于判断所述测试命令是否携带了断点续跑参数;
38、所述读取子单元,用于在所述测试命令携带了断点续跑参数的情况下,从设定的存储空间中读取上一次任务的执行记录;其中,所述上一次任务是与所述当前测试任务具有相同任务标识并且时间最接近的任务;
39、所述执行判断子单元,用于依据所述执行记录判断所述测试命令所指向的测试用例在上一次任务中是否被执行;
40、所述作为子单元,用于在所述测试命令所指向的测试用例在上本文档来自技高网...
【技术保护点】
1.一种任务测试方法,其特征在于,包括:
2.根据权利要求1所述的任务测试方法,其特征在于,所述根据所述测试命令携带的参数信息以及当前测试任务所对应的各测试用例的执行状态,确定出所需执行的目标测试用例包括:
3.根据权利要求2所述的任务测试方法,其特征在于,所述将所述测试命令所指向的测试用例作为所需执行的目标测试用例包括:
4.根据权利要求2所述的任务测试方法,其特征在于,所述将所述测试命令所指向的测试用例作为所需执行的目标测试用例包括:
5.根据权利要求1至4任意一项所述的任务测试方法,其特征在于,所述根据所述当前测试任务的任务状态以及所述执行记录,生成测试报告包括:
6.根据权利要求5所述的任务测试方法,其特征在于,所述从所述当前测试任务对应的所有执行记录中统计报告所需的各类信息,以生成测试报告包括:
7.根据权利要求5所述的任务测试方法,其特征在于,所述存储各所述目标测试用例的执行记录包括:
8.一种任务测试装置,其特征在于,包括确定单元、执行单元、存储单元和生成单元;
9.一种
10.一种电子设备,其特征在于,包括:
11.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如权利要求1至7任意一项所述任务测试方法的步骤。
...【技术特征摘要】
1.一种任务测试方法,其特征在于,包括:
2.根据权利要求1所述的任务测试方法,其特征在于,所述根据所述测试命令携带的参数信息以及当前测试任务所对应的各测试用例的执行状态,确定出所需执行的目标测试用例包括:
3.根据权利要求2所述的任务测试方法,其特征在于,所述将所述测试命令所指向的测试用例作为所需执行的目标测试用例包括:
4.根据权利要求2所述的任务测试方法,其特征在于,所述将所述测试命令所指向的测试用例作为所需执行的目标测试用例包括:
5.根据权利要求1至4任意一项所述的任务测试方法,其特征在于,所述根据所述当前测试任务的任务状态以及所述执行记录,生成测试报告包括:
6.根据权利要...
【专利技术属性】
技术研发人员:闫冬冬,郑维栋,
申请(专利权)人:济南浪潮数据技术有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。