【技术实现步骤摘要】
一种具有准确注意力的自然遮挡表情识别方法及系统
[0001]本专利技术属于表情识别
，具体涉及一种具有准确注意力的自然遮挡表情识别方法及系统。
技术介绍
[0002]本部分的陈述仅仅是提供了与本专利技术相关的
技术介绍
信息，不必然构成在先技术。
[0003]近年来，由于人脸表情识别在情感计算、行为预测、人机交互、心理健康服务等众多应用中发挥着重要作用，其研究受到广泛关注，取得了很大的成功。在现实世界中识别表情时，人脸被遮挡的情况是很常见的，如太阳镜遮挡、围巾遮挡之类的面部配件遮挡或其他随机物体遮挡，如手遮挡、头发遮挡和杯子遮挡。现有的表情识别方法对于理想的无遮挡面部表情的识别效果良好，但推广到自然遮挡条件下时，表情识别准确率大大降低。因此，有针对性地研究真实遮挡条件下的人脸表情识别问题是很有必要的。
[0004]遮挡人脸表情的识别是一个具有挑战性的问题，因为面部遮挡物会使原有表情图像丢失一部分表情信息，甚至会对表情识别产生误导。最近，已经提出了一些方法来应对这个挑战，这些方法主要可以分为四类：遮挡图像补足...
【技术保护点】
【技术特征摘要】
1.一种具有准确注意力的自然遮挡表情识别方法，其特征是，包括以下步骤：获取待识别图像，对图像进行预处理；利用预训练的自然遮挡表情识别网络对预处理后的待识别图像进行处理，得到表情识别结果；所述自然遮挡表情识别网络的构建及训练过程包括对于已知表情的预处理后的遮挡表情图像，进行人脸关键点检测，在关键点中筛选多个兴趣点，基于各兴趣点生成高斯图，得到对应图像的遮挡指示图；依据遮挡表情图像的深度特征的神经元激活值计算注意力描述子，通过构建注意力损失来迫使深度特征的注意力描述子接近遮挡指示图，通过构建表情分类损失来迫使深度特征的注意力适应于不同的表情。2.如权利要求1所述的一种具有准确注意力的自然遮挡表情识别方法，其特征是，所述预处理过程包括利用人脸检测模型检测原始图像的面部标志点，相似性变换后，获得对齐的人脸图像，并调整为指定像素大小。3.如权利要求1所述的一种具有准确注意力的自然遮挡表情识别方法，其特征是，进行人脸关键点检测的具体过程包括进行面部各个初步关键点检测，获取其坐标及其置信度分数，在初步关键点中选择覆盖眼睛、眉毛、鼻子和嘴巴周围的区域的点，以及覆盖面部脸颊和眼睛与眉毛之间的区域的点，作为最终关键点。4.如权利要求1所述的一种具有准确注意力的自然遮挡表情识别方法，其特征是，在关键点中筛选多个兴趣点，得到对应图像的遮挡指示图的具体过程包括，设置置信度分数阈值，去除置信度分数小于阈值的关键点，得到兴趣点，生成以各兴趣点坐标为中心的高斯分布图，对于那些被遮挡的点，高斯分布图的值处处为零。5.如权利要求1所述的一种具有准确注意力的自然遮挡表情识别方法，其特征是，遮挡指示图的生成过程包括：计算各张高斯分布图在同一空间位置上的统计值，得到对于一张输入表情图像的一张遮挡指示图：其中是指对于输入图像i的第m个兴趣点生成的高斯分布图，M表示兴趣点的数目，|
·
|指像素级绝对值。6.如权利要求1所述的一种具有准确注意力的自然遮挡表情识别方法，其特征是，计算注意力描述子的具体过程为：注意力描述子其中指对于输入图像x
i
的第k层激活的第p个映射，C
k
表示深度网络第k层中的特征...
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。