一种基于先验知识的人脸表情识别方法技术

本发明专利技术公开了一种基于先验知识的人脸表情识别方法。该方法具体步骤为：(1)对图像数据集进行预处理；(2)将预处理后的图像的先验分布转化为类别的平均分布，再将对应的独热标签作为索引从中提取先验知识，然后将先验知识转化为特定于每个数据集的后验概率，并将标签分布和后验概率加权求和得到混合分布；(3)将经预处理后的人脸表情图像输入至预训练好的学生模型网络中，进行特征提取；(4)将提取到的与表情高相关的特征通过全连接层输出预测分布，再经平滑处理后通过分类器最终得到分类结果。本发明专利技术利用了预先得到的先验知识，能在一定程度上解决人脸表情识别中常见的表情模糊性问题，得到更趋于现实的预测。得到更趋于现实的预测。得到更趋于现实的预测。

【技术实现步骤摘要】
facialexpression recognition[J].IEEE Access,2020,8:131988
‑
132001.)将数据集标定过程中的投票结 果作为先验知识，将其与标签平滑损失函数结合，从而得到更符合人类直觉的预测分布。在这 个问题上，Shen J(She J,Hu Y,Shi H,et al.Dive into Ambiguity:Latent Distribution Mining andPairwise Uncertainty Estimation for Facial Expression Recognition[C]//Proceedings of theIEEE/CVF Conference on Computer Vision and Pattern Recognition.2021:6248
‑
6257.)目前取得 了最好的表现，提出的方法在辅助多分支的框架帮助下，在标签维度中充分利用了潜在分布来 提升性能，而在样本维度中，通过学习语义特征之间的关系来估计样本的模糊性程度。同时表 情中的先验知识如动作单元也能作为先本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于先验知识的人脸表情识别方法，其特征在于，该方法的步骤包括：步骤1，对图像数据集进行预处理，所述图像数据集中包括对应的真实标签数据；步骤2，将预处理后的图像的先验分布转化为类别的平均分布，再将对应的独热标签作为索引从中提取先验知识，然后将先验知识转化为特定于每个数据集的后验概率，并将标签分布和后验概率加权求和得到混合分布，以用于后续步骤指导学生模型更好地预测与人类直觉更一致的结果；步骤3，将经预处理后的人脸表情图像输入至预训练好的学生模型网络中，进行特征提取；步骤4，将提取到的与表情高相关的特征通过全连接层输出预测分布，再经平滑处理后通过分类器最终得到表情分类结果。2.根据权利要求1所述的一种基于先验知识的人脸表情识别方法，其特征在于，所述步骤1中，预处理具体为：通过旋转和缩放的方法扩充图像数据集，并对数值归一化。3.根据权利要求1所述的一种基于先验知识的人脸表情识别方法，其特征在于，所述步骤2中，提取先验知识的方法为：步骤21，预处理后的图像数据集中每张图像x的先验分布为其中代表v
x
为C
×
1阶矩阵，C为图像数据集的类别数，且∑v
x
＝1；代表图像集，代表图像集对应的独热标签；步骤22，对于每个独热标签y的平均分布为：其中，是指图像集中独热标签y的样本子集，为子集的样本数；步骤23，将独热标签y作为索引，将每个独热标签y的平均分布转化为先验知识p
o
(k|x)＝d
yk
，其中x为图像，为当独热标签为y时，被分类为类别k的概率。4.根据权利要求1所述的一种基于先验知识的人脸表情识别方法，其特征在于，所述步骤2中，采用朴素贝叶斯公式将先验知识转化为特定于每个数据集的后验概率：其中A事件代表图像的独热标签为y，B事件代表图像被预测为类别k，P(A)为数据集的分布，P(B
k
|A)...

【专利技术属性】
技术研发人员：林泽昊，沈秋，曹汛，
申请(专利权)人：南京大学，
类型：发明
国别省市：