精神状态评估方法、设备及系统技术方案

本发明专利技术提供一种精神状态评估方法、设备及系统，涉及精神状态评估技术领域。该精神状态评估方法包括：在预设时间内采集待评估人员的音频数据和视频数据；提取音频数据和视频数据中待评估人员的多模态生理特征，多模态生理特征包括：面部瞳孔数据特征、语音数据特征以及心率和心率变异性数据特征；根据多模态生理特征和预设的关联模型，输出待评估人员的精神状态评估结果，所述关联模型为基于神经网络或SVM支持向量机对不同精神状态下的个体数据进行分类的训练模型。该精神状态评估方法能够灵活适用于多种设备，对不同场合人员中的精神状态进行评估。

Mental State Assessment Method, Equipment and System

The invention provides a mental state assessment method, equipment and system, which relates to the technical field of mental state assessment. The mental state assessment method includes: collecting the audio and video data of the person to be evaluated in the preset time; extracting the multi-modal physiological characteristics of the person to be evaluated in the audio and video data. The multi-modal physiological characteristics include: facial pupil data characteristics, voice data characteristics, heart rate and heart rate variability data. Features: According to the multi-modal physiological characteristics and the presupposed Association model, the results of mental state assessment are output. The correlation model is a training model based on neural network or SVM support vector machine to classify individual data in different mental states. The mental state assessment method can be flexibly applied to a variety of equipment to assess the mental state of people in different situations.

【技术实现步骤摘要】
精神状态评估方法、设备及系统
本专利技术涉及精神状态评估
，特别涉及一种精神状态评估方法、设备及系统。
技术介绍
现代社会中不管是企业单位或者是其他群体机构，都少不了开展内部会议、演讲、选职以及其他机构宣讲。目前开展这些不同场合活动的视频采集设备主要是基于多媒体技术的显示装置，属于多媒体设备
而不管是会议、演讲、选职或者其他活动宣讲，在这些不同场合若能够监察场景人员的精神状态，较为真切反映他们的工作态度并及时对有紧急状况的人员采取预防措施成为一种必要。但是现有技术中，用于上述这些不同场合的多媒体的终端显示设备主要是仅仅基于多媒体技术的显示装置，功能仅限于现场转播或远程交流等方式，可见功能十分有限，无法满足对不同场景中的人员进行实时在线评估其精神状态。
技术实现思路
本专利技术的目的在于，针对上述现有技术中的不足，提供一种精神状态评估方法、设备及系统，旨在对不同场合中人员的精神状态进行评估。为实现上述目的，本专利技术实施例所采用的技术方案如下：第一方面，本专利技术实施例提供一种精神状态评估方法，所述方法包括：在预设时间内采集待评估人员的音频数据和视频数据；提取所述音频数据和视本文档来自技高网...

【技术保护点】
1.一种精神状态评估方法，其特征在于，所述方法包括：在预设时间内采集待评估人员的音频数据和视频数据；提取所述音频数据和视频数据中待评估人员的多模态生理特征，所述多模态生理特征包括：面部瞳孔数据特征、语音数据特征以及心率和心率变异性数据特征；根据所述多模态生理特征和预设的关联模型，输出待评估人员的精神状态评估结果，所述关联模型为基于神经网络或SVM支持向量机对不同精神状态下的个体数据进行分类的训练模型。

【技术特征摘要】
1.一种精神状态评估方法，其特征在于，所述方法包括：在预设时间内采集待评估人员的音频数据和视频数据；提取所述音频数据和视频数据中待评估人员的多模态生理特征，所述多模态生理特征包括：面部瞳孔数据特征、语音数据特征以及心率和心率变异性数据特征；根据所述多模态生理特征和预设的关联模型，输出待评估人员的精神状态评估结果，所述关联模型为基于神经网络或SVM支持向量机对不同精神状态下的个体数据进行分类的训练模型。2.根据权利要求1所述的精神状态评估方法，其特征在于，所述方法还包括：在提取所述音频数据和视频数据中待评估人员的多模态生理特征之前，先对所述音频数据和视频数据进行滤波降噪预处理。3.根据权利要求1所述的精神状态评估方法，其特征在于，所述面部瞳孔数据特征包括：眼睑闭合时间、瞳孔直径比、眼睑盖住瞳孔的面积和眨眼频率中的至少一种。4.根据权利要求1所述的精神状态评估方法，其特征在于，所述语音数据特征包括：振动能量特征、基音频率特征、共振峰和信号持续时间中的至少一种。5.根据权利要求1所述的精神状态评估方法，其特征在于，所述心率和心率变异性数据特征通过基于远程成像光电容积脉搏波技术检测容积脉搏波而计算得出。6.根据权利要求1所述的精神状态评估方法，其特征在于，所述神经网络为BP神经网络或卷积神经网络。7.一种精神状态评估设备，其特征在...

【专利技术属性】
技术研发人员：张通，陈变娜，徐向民，胡斌，
申请(专利权)人：华南理工大学，
类型：发明
国别省市：广东,44