评估模型选择方法、装置、计算机设备及存储介质制造方法及图纸

本发明专利技术公开了一种评估模型选择方法、装置、计算机设备及存储介质，其方法包括：将训练样本分批次输入评估模型进行训练；根据预设规则从分批次训练后的评估模型中选择需要进行第一测试的评估模型，并标记为待评估模型；将第一预设数量的第一测试样本分别输入各个所述待评估模型中，进行所述第一测试，并获得第一测试结果，计算各个待评估模型的第一准确率；在所述评估模型完成训练后，选取指定个数的优选评估模型，进行第二测试，计算各个优选评估模型的第二准确率；根据第二准确率选取最优评估模型。本发明专利技术可以较快地从多个训练评估模型中选取最优评估模型。

Evaluation Model Selection Method, Device, Computer Equipment and Storage Media

【技术实现步骤摘要】
评估模型选择方法、装置、计算机设备及存储介质
本专利技术涉及机器学习领域，尤其涉及一种评估模型选择方法、装置、计算机设备及存储介质。
技术介绍
机器学习模型在越来越多的场景中得到应用，如人脸识别、数据分类、自动评分等。以数据分类为例，不同的分类模型对相同的数据进行处理，其分类结果的准确率存在差异。因而选择适当的机器学习模型，可以有效地提高数据分类的准确率。然而，对于一些海量数据，在评估模型的过程中会产生大量的模型，在确定最优评估模型时，需要对这些评估模型进行测试。然而，按照现有的测试方式，如果使用大批量的测试样本进行测试，其评估效果虽然很好，但需要耗费大量时间，效率不高；而采用小批量测试样本进行测试，其处理效率较高，但其评估效果较差，无法客观反映出评估模型真实预测质量。
技术实现思路
基于此，有必要针对上述技术问题，提供一种评估模型选择方法、装置、计算机设备及存储介质，以快速地从多个评估模型中选取最优的评估模型。一种评估模型选择方法，包括：将训练样本分批次输入评估模型进行训练；根据预设规则从分批次训练后的评估模型中选择需要进行第一测试的评估模型，并标记为待评估模型；将第一预设数量的第一测本文档来自技高网...

【技术保护点】
1.一种评估模型选择方法，其特征在于，包括：将训练样本分批次输入评估模型进行训练；根据预设规则从分批次训练后的评估模型中选择需要进行第一测试的评估模型，并标记为待评估模型；将第一预设数量的第一测试样本分别输入各个所述待评估模型中，进行第一测试，并获得各个所述待评估模型输出的第一测试结果，根据各个所述待评估模型的第一测试结果分别计算其第一准确率；在所述评估模型完成训练后，根据所述第一准确率从所有所述待评估模型中选取指定个数的优选评估模型，所述优选评估模型的第一准确率不低于未被选取的待评估模型；将第二预设数量的第二测试样本分别输入各个所述优选评估模型进行第二测试，获得各个所述优选评估模型的第二测试...

【技术特征摘要】
1.一种评估模型选择方法，其特征在于，包括：将训练样本分批次输入评估模型进行训练；根据预设规则从分批次训练后的评估模型中选择需要进行第一测试的评估模型，并标记为待评估模型；将第一预设数量的第一测试样本分别输入各个所述待评估模型中，进行第一测试，并获得各个所述待评估模型输出的第一测试结果，根据各个所述待评估模型的第一测试结果分别计算其第一准确率；在所述评估模型完成训练后，根据所述第一准确率从所有所述待评估模型中选取指定个数的优选评估模型，所述优选评估模型的第一准确率不低于未被选取的待评估模型；将第二预设数量的第二测试样本分别输入各个所述优选评估模型进行第二测试，获得各个所述优选评估模型的第二测试结果，并根据各个所述优选评估模型的第二测试结果分别计算其第二准确率，所述第二预设数量至少比所述第一预设数量大一个数量级；根据所述第二准确率从所述指定个数的所述优选评估模型中选取最优评估模型。2.如权利要求1所述的评估模型选择方法，其特征在于，所述根据所述第二准确率从所述指定个数的优选评估模型中选取最优评估模型之后，还包括：获取待评估样本；将所述待评估样本输入所述最优评估模型中，获取所述最优评估模型输出的评估结果。3.如权利要求1所述的评估模型选择方法，其特征在于，所述将训练样本分批次输入评估模型进行训练之前包括：获取训练样本的总数量、迭代次数以及每批次的设置数量；根据所述训练样本的总数量、迭代次数以及每批次的设置数量计算训练的总批次，所述总批次根据所述训练样本的总数量与迭代次数的乘积除以每批次的设置数量计算出。4.如权利要求1所述的评估模型选择方法，其特征在于，所述将第一预设数量的第一测试样本分别输入各个所述待评估模型中，进行所述第一测试，并获得各个所述待评估模型输出的第一测试结果，根据各个所述待评估模型的第一测试结果分别计算其第一准确率，包括：将所述第一预设数量的第一测试样本分别输入各个所述待评估模型进行第一测试，获得各个所述待评估模型输出的第一测试结果，所述第一测试样本与至少一个的类别标签对应，所述第一测试结果包括所述第一测试样本的评估模型输出类别标签；获取预设匹配规则，并根据所述预设匹配规则判断所述第一测试样本的评估模型输出类别标签是否与该第一测试样本的类别标签匹配；统计各个所述待评估模型输出的所述第一测试样本的评估模型输出类别标签与该第一测试样本的类别标签匹配的第一匹配个数；根据各个所述待评估模型的第一匹配个数和所述第一预设数量计算各个所述待评估模型对应的第一准确率。5.如权利要求3所述的评估模型选择方法，其特征在于，所述根据预设规则从分批次训练后的评估模型中选择需要进行第一测试的评估模型，并标记为待评估模型，包括：获取第一测试数量；根据所述总批次和所述第一测试数量确定第一测试批次以及第一测试批次后的间隔测试批次数；根据...

【专利技术属性】
技术研发人员：韩磊，
申请(专利权)人：中国平安人寿保险股份有限公司，
类型：发明
国别省市：广东,44