一种基于卷积神经网络表情识别的校园心理健康评估-反馈方法技术

本发明专利技术涉及一种基于卷积神经网络表情识别的校园心理健康评估

【技术实现步骤摘要】
一种基于卷积神经网络表情识别的校园心理健康评估
‑
反馈方法


[0001]本专利技术涉及在校大学生心理健康状况监测评估
，具体设计一种基于卷积神经网络表情识别的校园心理健康评估
‑
反馈方法。

技术介绍

[0002]由于心理健康造成的人际关系破裂，抑郁等问题日益成为社会关注的焦点。人类表达生理和心理活动的首要工具是表情和情绪，而面部表情是最敏感的情绪发生器与显示器，情绪的调适明显影响心理健康，针对面部表情的识别，是监测学生心理状态的一种方式。
[0003]目前对于大学生的心理健康状态的评估主要通过问卷调查，调查有效时限较短，并且存在不诚实作答的情况。这种方法主要缺陷是不能长时间的获取评估大学生全体对象心理状态的即时数据。并且现在多数的心理健康干预工作主要集中在对个体的干预。有部分专利通过深度学习设计了对学生个体的心理健康状态的追踪、干预系统，但是如何快速、全面地评估大学生的心理健康亟待解决，针对全校大学生的心理健康的反馈也具有重要的作用。而卷积神经网络作为目前最火的研究热点之一。目前已经被广泛应用于计算机视觉、自然语言处理、语音识别、等多个领域，在计算机视觉领域和机器学习领域的应用也取得了巨大的成果。但是在心理健康方面的应用相关研究还较少，本专利技术旨在探索卷积神经网络在大学生的心理健康方面应用的创新。

技术实现思路

[0004]本专利技术的目的是利用卷积神经网络表情识别来评估在校生的情绪变化，以及积极情绪与消极情绪的比例，根据系统的反馈，从而制定更科学，更及时的干预全体在校生心理健康状态政策，从大环境中，来干预在校生的情绪状态。
[0005]本专利技术的目的可以通过以下技术方案来实现：
[0006]一种基于卷积神经网络表情识别的校园心理健康评估，所述方法包括以下步骤：
[0007]步骤（1）：预先录入在校生的源数据（人数，专业，年级，班级），并将数据与前端程序进行连接。
[0008]步骤（2）：在学校的关键路口、门口架设高清网络摄像头，摄像头的分辨率不低于3840*2160即4k高清摄像头，高度适中，即学生面向摄像头走来，网络摄像头的位置能够拍摄到每位学生的脸部。此外，摄像头的安装也要符合公共安全视频图像信息系统的国家和行业标准。
[0009]步骤（2）：将高清网络摄像头所采集到的视频实时传输回电脑主机，传输方法采用摄像头自带的无线网络协议传输。电脑主机端采用rtsp协议，实时的获取高清网络摄像头的视频流，将流媒体数据安帧数保存为jpg图像。
[0010]对图像中的人脸采用ImageLabel开源软件进行标注，标注的内容为人的脸部位置
框。图片文件保存为jpg格式，标注信息保存为xml格式，并且制作成voc
‑
2007标准格式。
[0011]步骤（2）：将制作好的VOC
‑
2007格式的数据集放入目标检测卷积神经网络模型中进行训练。训练的方法为迁移学习，即使用其他人已经训练好的模型参数进再训练，这里使用的原始模型为YOLOv3（you only look once）。
[0012]训练过程中仅修改模型的输入层和输出层，使模型适合学习人脸的捕捉。初始训练参数为：训练周期200次，学习率为0.001，学习率衰减度为0.0003，优化器采用经典的梯度下降（SGD）优化器，训练集和测试集的比例为7:3,并且根据训练的结果实时调整训练的参数，到模型对人脸的捕捉召回率达到95%以上。保存模型及其参数为h5py文件，以备下一步使用。
[0013]采用我们训练好的模型，在上述步骤中取得的路口或者教室门口的视频数据，根据rtsp协议采集下来。按帧数提取图片，图片直接输入到我们训练好的目标检测模型中。模型会自动的提取图片也就是视频中每个人的脸部图片，并且进行保存。完成实时捕捉人脸的信息，图片信息按jpg格式储存起来。
[0014]同时本模型由于采用的YOLOv3作为迁移学习的原模型，故我们可以采用公开的表情数据集对模型进行再训练，使模型同时具有对表情进行分类的功能。公开数据集处理后，包含的表情识别共7种，包括，生气，厌恶，害怕，开心，悲伤，惊讶，无表情。训练过程和参数和目标检测的模型训练相同，并且也实时调整模型的训练参数。使我们的模型最终对表情的分类准确率达到95%以上，结束训练保存模型。
[0015]步骤（3）：将以上步骤人脸的信息，同时输入我们训练好的具有脸部捕捉表情识别的模型进行表情分类。表情分类结果为其中表情所占的比重，所有比重加起来为100%。我们将表情的分类设置一个具体阈值，当分类结果的比重超过这个阈值，我们就认为该测试者具有此表情，这里注意本模型允许测试者具有多个表情。
[0016]表情分类识别共7种，包括，生气，厌恶，害怕，开心，悲伤，惊讶，无表情。图片和表情分类一一对应的储存到数据库MySQL中以备分析，同时统计我们采集表情的人数，记录采集的地点、班级等信息。
[0017]步骤（4）：将卷积神经网络模型的分类结果进行分析评估，比较在校生的情绪变化，得出在校生的情绪变化比例。
[0018]步骤（5）：将在校生的情绪数据储存到系统中，对所得的数据进行统计分析，得出校园中在校学生的情绪变化，当消极情绪比例增高时可通过网络传输反馈心理健康中心以及相关学生工作部门负责人员。
附图说明
[0019][0020]图1是基于卷积神经网络表情识别的校园心理健康评估示意图
[0021]图2是基于卷积神经网络表情识别的校园心理健康反馈示意图
[0022]图3是基于卷积神经网络表情识别的校园心理健康评估
‑
反馈示意图
[0023]实施例1 对大学一年级新生心理健康的评估
[0024]以下描述中，结合现实状况对本专利技术做进一步详细说明。
[0025]预先录入该班级的数据，包括人数，专业，年级等。并将数据与前端程序进行连接。
本事实例中，预先录入数据是为了将通过系统分析形成的表情分类数据，可以实现实时监测要关注的班级学生人群。大学新生通常会有角色转换与适应的过程，心理学上将这一时期称之为“大学新生心理失衡期”。大学新生由于生活环境、学习方式和社会角色等方面的转变，必然要经历一个从不适应到适应的过程。能否顺利渡过适应期，对大学新生的成长和成才至关重要。若有些问题处理不当或认知错误，就会出现心理问题,甚至导致心理障碍或心理疾病而及时觉察和预防出问题是最佳的手段。
[0026]在学校中该班级经常上课的教室门口，前后位置均安装好高清网络摄像头，摄像头的分辨率不低于3840*2160即4k高清摄像头，高度适中，即学生面向摄像头走来，网络摄像头的位置能够拍摄到每位学生的脸部。此外，摄像头的安装也要符合公共安全视频图像信息系统的国家和行业标准。
[0027]将高清网络摄像头所采集到的视频实时传输回电脑主机，传输方法采用摄像头自带的无线网络协议传输。电脑主机端采用rtsp协议，实时的获取高清网络摄像本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于卷积神经网络表情识别的校园心理健康评估
‑
反馈方法，其特征在于：所述方法包括以下步骤：步骤（1）：预先录入在校生的源数据（人数，专业，年级，班级），并将数据库与前端程序进行连接步骤（2）：收集获取在校生的待检测数据，主要为学校各个路口，教室，宿舍门口的高清摄像头的实时的脸部数据。步骤（3）：将脸部数据作为表情识别的分析数据，将数据输入表情识别卷积神经网络模型进行分类分析。步骤（4）：将卷积神经网络模型的分类结果进行分析评估，比较在校生的情绪变化，对在校生的情绪进行分析，得出情绪分析结果步骤（5）：将在校生的情绪数据储存到系统中，对所得的数据进行统计分析，得出校园中在校学生的情绪变化，当消极情绪比例增高时，可通过网络传输反馈给学校心理健康中心以及相关学生工作部门负责人员。2.根据权利要求1所述的一种基于卷积神经网络表情识别的校园心理健康评估
‑
反馈方法，其特征在于：在步骤（1）中，预先录入在校生的源数据，包括人数，学生的基本信息，专业，年级，班级，班级心理委员，辅导员，学生工作负责人员。3.根据权利要求1所属的一种基于卷积神经网络表情识别的校园心理健康评估
‑
反馈方法，其特征在于：在步骤（2）中，主要为获取在校生的待检测数据，收集数据的地点...

【专利技术属性】
技术研发人员：刘海虹，张小雷，董现玲，
申请(专利权)人：张小雷，
类型：发明
国别省市：