【技术实现步骤摘要】
融合后验概率校准的模型训练方法、装置、设备及介质
[0001]本专利技术涉及神经网络模型领域,尤其涉及一种融合后验概率校准的模型训练方法、装置、设备及介质。
技术介绍
[0002]随着网络模型的深度和宽度的增加,网络模型在训练过程中的预测准确率逐步提升,而网络模型输出的后验概率,即置信度也逐步随之增长,如网络模型预测样本的类别时,输出的后验概率大多在90%以上。
[0003]然而,网络模型在实际的应用中或在验证集进行验证时,大多检测目标的置信度都很高,普遍超过90%,只有较少检测目标的置信度落入10%~90%之间,但整体检测目标对应的预测准确率却很低,即网络模型存在“盲目自信”的情况。
技术实现思路
[0004]有鉴于此,本专利技术提供一种融合后验概率校准的模型训练方法、装置、设备及介质,用于改善模型的预测准确率与置信度不匹配,从而出现“盲目自信”的现状。
[0005]第一方面,本专利技术实施例提供一种融合后验概率校准的模型训练方法包括:将训练集中第一预设数量的样本输入至预设的分类模型,得到每 ...
【技术保护点】
【技术特征摘要】
1.一种融合后验概率校准的模型训练方法,其特征在于,包括:将训练集中第一预设数量的样本输入至预设的分类模型,得到每个样本的预测类别和预测后验概率,其中,所述训练集包括每个样本的真实类别,所述预测后验概率表示所述分类模型预测样本为预测类别的概率;根据每个所述样本的预测后验概率,将所述第一预设数量的样本划分至第二预设数量的概率区间中;统计每个概率区间内每种预测类别的样本的数量,及每个概率区间内每种预测类别的所有样本中预测正确的样本的数量,得到每个概率区间内每种预测类别的样本对应的经验后验概率,其中,所述经验后验概率表示每个概率区间内每种预测类别的所有样本中预测正确的样本的占比;根据每个所述样本对应的预测后验概率和经验后验概率,利用第一预设算式计算所述第一预设数量的样本对应的概率损失值,并根据所述概率损失值训练所述分类模型。2.根据权利要求1所述的方法,其特征在于,所述第一预设算式包括:式中,L
cal
表示概率损失值,n表示第一预设数量,k表示真实类别的数量,表示预测后验概率,表示经验后验概率。3.根据权利要求1所述的方法,其特征在于,还包括:根据每个样本的真实类别、预测类别及预测后验概率,利用第二预设算式计算所述第一预设数量的样本对应的分类损失值;所述根据所述概率损失值训练所述分类模型,包括:根据所述分类损失值和所述概率损失值训练所述分类模型。4.根据权利要求3所述的方法,其特征在于,所述第二预设算式包括:式中,L
xent
表示分类损失值,n表示第一预设数量,k表示真实类别的数量,表示预测后验概率;当第i个样本的预测类别与第i个样本的真实类别一致时,取1,否则取0。5.根据权利要求3所述的方法,其特征在于,所述方法还包括:从所述第一预设数量的样本中选取正样本及与所述正样本对应的负样本;根据所述正样本和所述负样本,利用第三预设算式计算所述第一预设数量的样本对应的负...
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。