面部情绪识别方法、装置及存储介质制造方法及图纸

本发明专利技术公开了一种面部情绪识别方法，该方法包括：获取摄像装置拍摄的实时图像，利用人脸识别算法从该实时图像中提取一张实时脸部图像；将该实时脸部图像输入预先训练好的第一情绪分类模型及第二情绪分类模型进行情绪识别，得到每种情绪的第一概率及第二概率；根据第一情绪分类模型、第二情绪分类模型识别出的情绪及概率，判断该实时脸部图像中的情绪。本发明专利技术通过结合两个模型的输出结果，对实时图像中人脸的情绪进行识别，提高了面部情绪识别的准确性。本发明专利技术还公开了一种电子装置及一种计算机可读存储介质。

Facial emotion recognition method, device and storage medium

The invention discloses a facial emotion recognition method, the method includes: obtaining the real-time image camera shooting, face recognition algorithm using the real-time image extraction from a real-time facial image; the first emotion classification model and two emotion classification model the real-time facial image input pre trained for emotion recognition, get the first the probability and probability of each of the two emotions; according to the first second emotion classification model, emotion and sentiment classification probability model is identified, the judgment of the real-time facial image in the mood. By combining the output results of both models, the emotion of the face in the real time image is identified, and the accuracy of facial emotion recognition is improved. The invention also discloses an electronic device and a computer readable storage medium.

【技术实现步骤摘要】
面部情绪识别方法、装置及存储介质
本专利技术涉及计算机视觉处理
，尤其涉及一种面部情绪识别方法、装置及计算机可读存储介质。
技术介绍
在人们的日常交流中，通过语言来传递的信息占7％，通过声音来传递的信息占38％，而通过面部表情来传递的信息则达到55％。由此可见人脸表情是人类交流的重要载体和非语言交流的一种重要方式，它不仅能够表达人类的情感状态、认知活动和人格特征，而且它所富含的人体行为信息与人的情感状态、精神状态、健康状态等其他因素有着极为密切的关联。人脸情绪识别是人机交互与情感计算研究的重要组成部分，涉及心理学、社会学、人类学、生命科学、认知科学、计算机科学等研究领域，对人机交互智能化和谐化极具意义。随着人工智能技术的不断发展以及人们对于交互体验要求的不断提高，智能交互方式已逐渐开始替代一些传统的人机交互方式，且对人脸情绪识别的要求也不断提高。现阶段的人脸情绪识别一般是通过收集大量情绪样本，对样本进行整理，分成几类，训练出情绪识别模型，用来进行情绪识别，但该方法以单一的方式进行识别，然而，单一的情绪识别方法无法达到准确识别面部情绪效果，且单一方法在情绪识别所获取的数据有限，判本文档来自技高网...

【技术保护点】
一种电子装置，其特征在于，所述装置包括存储器、处理器及摄像装置，所述存储器中包括面部情绪识别程序，所述面部情绪识别程序被所述处理器执行时实现如下步骤：实时脸部图像获取步骤：获取摄像装置拍摄的实时图像，利用人脸识别算法从该实时图像中提取一张实时脸部图像；情绪识别步骤：将该实时脸部图像输入预先训练好的第一情绪分类模型及第二情绪分类模型进行情绪识别，得到每种情绪的第一概率及第二概率；及情绪判断步骤：根据第一情绪分类模型、第二情绪分类模型识别出的情绪及概率，判断该实时脸部图像中的情绪。

【技术特征摘要】
1.一种电子装置，其特征在于，所述装置包括存储器、处理器及摄像装置，所述存储器中包括面部情绪识别程序，所述面部情绪识别程序被所述处理器执行时实现如下步骤：实时脸部图像获取步骤：获取摄像装置拍摄的实时图像，利用人脸识别算法从该实时图像中提取一张实时脸部图像；情绪识别步骤：将该实时脸部图像输入预先训练好的第一情绪分类模型及第二情绪分类模型进行情绪识别，得到每种情绪的第一概率及第二概率；及情绪判断步骤：根据第一情绪分类模型、第二情绪分类模型识别出的情绪及概率，判断该实时脸部图像中的情绪。2.根据权利要求1所述的电子装置，其特征在于，所述第一情绪分类模型及第二情绪分类模型的训练步骤包括：特征点提取步骤：建立一个人脸样本库，在每张人脸样本图像中标记t个面部特征点；特征向量计算步骤：将各个面部特征点的坐标与该人脸样本图像中规范化后的人脸区域的宽度及高度进行除运算，得到人脸样本图像的特征向量；第一模型训练步骤：利用所述人脸样本图像及其特征向量对支持向量机分类器进行学习训练，得到第一情绪分类模型；情绪标签分配步骤：给每张人脸样本图像分配一个情绪标签，并根据情绪标签对人脸样本库中的人脸样本图像进行分类；及第二模型训练步骤：利用分类后的人脸样本图像对卷积神经网络进行学习训练，得到第二情绪分类模型。3.根据权利要求1所述的电子装置，其特征在于，所述情绪判断步骤包括：判断所述第一情绪分类模型、第二情绪分类模型识别出的一种或多种情绪是否相同。4.根据权利要求1或3所述的电子装置，其特征在于，所述情绪判断步骤还包括：当第一情绪分类模型、第二情绪分类模型识别出的是相同的一种或多种情绪，计算各情绪的第一概率、第二概率的均值，以第一概率、第二概率的均值中较大值对应的情绪作为从该实时图像中识别到的情绪；或当第一情绪分类模型、第二情绪分类模型识别出的是不同的一种或多种情绪，以第一概率、第二概率中较大值对应的情绪作为从该实时图像中识别到的情绪。5.一种面部情绪识别方法，其特征在于，所述方法包括：实时脸部图像获取步骤：获取摄像装置拍摄的实时图像，利用人脸识别算法从该实时图像中提...

【专利技术属性】
技术研发人员：陈林，张国辉，
申请(专利权)人：平安科技深圳有限公司，
类型：发明
国别省市：广东,44