一种基于SViT网络的微表情识别方法技术

技术编号:40988352 阅读:22 留言:0更新日期:2024-04-18 21:31
本发明专利技术公开了一种基于SViT网络的微表情识别方法,属于图像处理技术领域,要解决的技术问题为对于微表情识别、如何确保局部特征提取以及长距离依赖。包括:将水平分量、垂直分量和光学应变形成的三维张量作为微表情视频的特征图像,通过stem模块将特征图像变换为token序列,基于token序列以及数据集中微表情视频对应的真实表情类别构建样本集;基于SViT网络构建微表情识别模型,微表情识别模型用于以token序列为输入,对token序列进行局部特提取、并依据本地和长程依赖关系进行全局特征提取,并输出预测的表情类别;以待识别微表情视频对应的token序列为输入、通过最终微表情识别模型输出预测的表情类别。

【技术实现步骤摘要】

本专利技术涉及图像处理,具体地说是一种基于svit网络的微表情识别方法。


技术介绍

1、微观表情是无意识的、快速的、局部的表情,持续时间很短。微表情无法被控制,能够揭示试图隐藏的真实情感。这使得微表情研究在多个领域得到广泛关注,包括心理学、人类行为研究以及安全领域。由于微表情的特性,肉眼难以识别,只有经过广泛训练的专家才能区分。然而,即使经过训练,人类平均只能识别约47%的微表情。所以开发基于计算机视觉和模式分析技术的微表情分析自动化系统是十分必要的。随着计算技术的发展,计算机视觉也在微表情领域快速应用。随着transform的发展,它也运用于微表情识别上,然而,在捕获浅层的局部特征时,可能遭受高冗余的问题。

2、对于微表情识别、如何确保局部特征提取以及长距离依赖,是需要解决的技术问题。


技术实现思路

1、本专利技术的技术任务是针对以上不足,提供一种基于svit网络的微表情识别方法,来解决对于微表情识别、如何确保局部特征提取以及长距离依赖的技术问题。

2、本专利技术一种基于svit网络本文档来自技高网...

【技术保护点】

1.一种基于SViT网络的微表情识别方法,其特征在于,包括如下步骤:

2.根据权利要求1所述的基于SViT网络的微表情识别方法,其特征在于,基于光流法计算起始帧和顶点帧之间的水平分量、垂直分量和光学应变。

3.根据权利要求1所述的基于SViT网络的微表情识别方法,其特征在于,所述stem模块由四个3×3超复卷积组成。

4.根据权利要求1-3任一项所述的基于SViT网络的微表情识别方法,其特征在于,所述微表情识别模型包括STT模块、卷积层、平均池化层以及分类器,所述微表情识别模型用于执行如下:

5.根据权利要求4所述的基于SViT网络的微表情...

【技术特征摘要】

1.一种基于svit网络的微表情识别方法,其特征在于,包括如下步骤:

2.根据权利要求1所述的基于svit网络的微表情识别方法,其特征在于,基于光流法计算起始帧和顶点帧之间的水平分量、垂直分量和光学应变。

3.根据权利要求1所述的基于svit网络的微表情识别方法,其特征在于,所述stem模块由四个3×3超复卷积组成。

4.根据权利要求1-3任一项所述的基于svit网络的微表情识别方法,其特征在于,所述微表情识别模型包括stt模块、卷积层、平均池化层以及分类器,所述微表情识别模型用于执行如下:

5.根据权利要...

【专利技术属性】
技术研发人员:禹继国曹志龙董安明王桂娟田祥张丽高传根
申请(专利权)人:齐鲁工业大学山东省科学院
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1