非接触式与接触式协同的心理状态智能监测系统技术方案

本发明专利技术提供一种非接触式与接触式协同的心理状态智能监测系统，该系统基于非接触式数据采集模块获取监测目标个体的可见光视频、红外热图视频、及音频数据，以及接触式数据采集模块获取目标个体的生理信息；利用数据传输模块将获取的上述数据传输至心理状态分析模块和信息显示模块；搭建心理状态分析模块对多通道数据进行分析处理得到监测目标个体的心理状态特征值，并将该特征值发送给长时心理数据库块进行存储，以及发送给信息显示模块进行实时显示。上述系统能够完整、高效的获取用于分析目标个体心理状态的特征数据，从而能够实时、长期监控个体的心理状态，精准、高效的提升心理状态监测效果。

An intelligent monitoring system of psychological state based on non-contact and contact cooperation

【技术实现步骤摘要】
非接触式与接触式协同的心理状态智能监测系统
本专利技术涉及心理和数据处理领域，具体涉及一种非接触式与接触式协同的心理状态智能监测系统。
技术介绍
心理状态是心理活动的基本形式之一，指心理活动在一定时间内的完整特征，如注意、疲劳、紧张、轻松、忧伤、喜悦等。它兼有心理过程和个性心理特征的特点，既有暂时性，又具有稳定性。是心理过程和个性心理特征联结的中介环节，构成一切心理活动展开的背景。心理状态在不同的心理活动阶段和活动领域都有不同的表现形式，体现出复杂性和综合性的特点，应该根据不同领域、因素,用不同标准对心理状态进行多方位的考察和研究。如以心理状态对活动效果的影响为标准,可将心理状态划分为最佳心理状态、一般心理状态、不良心理状态；根据持续时间的长短,可把心理状态划分为相对稳定的、持续较长时间的状态，例如态度、兴趣、心境,另一种是持续时间较短的心理状态，例如激情、应激状态；根据心理状态是否具有显著的周期性,可将其划分为周期性心理状态和非周期性心理状态。显然,这种多标准的划分方法可以对心理状态进行多角度的研究,还可以满足各个行业如教育、医学等部门的需要本文档来自技高网...

【技术保护点】
1.一种非接触式与接触式协同的心理状态智能监测系统，其特征在于，包括：/n非接触式信号采集模块，用于获取目标个体的可见光图像、目标个体的红外热图、目标个体的音频信息；/n接触式信号采集模块，用于获取目标个体的生理信息；/n数据传输模块，用于将所述目标个体的可见光图像、目标个体的红外热图、目标个体的音频信息、目标个体的生理信息传输至心理状态分析模块和信息显示模块；/n心理状态分析模块，用于提取所述可见光图像中的第一图像特征，并基于提取得到图像特征生成可见光图像特征向量；对所述红外热图进行降维处理，提取降维处理得到信息的第二图像特征，并基于提取得到的第二图像特征，确定红外热图特征向量；提取所述音频...

【技术特征摘要】
1.一种非接触式与接触式协同的心理状态智能监测系统，其特征在于，包括：
非接触式信号采集模块，用于获取目标个体的可见光图像、目标个体的红外热图、目标个体的音频信息；
接触式信号采集模块，用于获取目标个体的生理信息；
数据传输模块，用于将所述目标个体的可见光图像、目标个体的红外热图、目标个体的音频信息、目标个体的生理信息传输至心理状态分析模块和信息显示模块；
心理状态分析模块，用于提取所述可见光图像中的第一图像特征，并基于提取得到图像特征生成可见光图像特征向量；对所述红外热图进行降维处理，提取降维处理得到信息的第二图像特征，并基于提取得到的第二图像特征，确定红外热图特征向量；提取所述音频信息中的音频特征，确定与音频特征匹配的情绪波动特征，并基于情绪波动特征，生成情绪波动特征向量；提取所述生理信息中的时频特征，并基于提取得到的时频特征生成生理时序特征向量；基于可见光图像特征向量、红外热图特征向量、情绪波动特征向量和生理时序特征向量、可见光图像特征向量的权重、红外热图特征向量的权重、情绪波动特征向量的权重和生理时序特征向量的权重，确定目标个体的心理状态特征值，并将所述目标个体的心理状态特征值发送给长时心理数据库块和信息显示模块；
长时心理数据库，用于存储目标个体的心理状态特征值；
信息显示模块，用于显示可见光图像、红外热图、音频信息的信号波形图、生理信息的信号波形图和目标个体的心理状态特征值。


2.根据权利要求1所述的系统，其特征在于，还包括存储模块；
所述数据传输模块还用于将所述目标个体的可见光图像、目标个体的红外热图、目标个体的音频信息、目标个体的生理信息传输至存储模块；
所述心理状态分析模块还用于将所述目标个体的心理状态特征值传输至存储模块；
所述存储模块用于存储目标个体的可见光图像、目标个体的红外热图、目标个体的音频信息、目标个体的生理信息和目标个体的心理状态特征值。


3.根据权利要求1所述的系统，其特征在于，还包括：
远程服务模块，用于控制非接触式信号采集模块获取目标个体的可见光图像、目标个体的红外热图、目标个体的音频信息；控制接触式信号采集模块获取目标个体的生理信息；控制数据传输模块将所述目标个体的可见光图像、目标个体的红外热图、目标个体的音频信息、目标个体的生理信息传输至远程服务模块；还用于提取所述可见光图像中的第一图像特征，并基于提取得到图像特征生成可见光图像特征向量；对所述红外热图进行降维处理，提取降维处理得到信息的第二图像特征，并基于提取得到的第二图像特征，确定红外热图特征向量；提取所述音频信息中的音频特征，确定与音频特征匹配的情绪波动特征，并基于情绪波动特征，生成情绪波动特征向量；提取所述生理信息中的时频特征，并基于提取得到的时频特征生成生理时序特征向量；基于可见光图像特征向量、红外热图特征向量、情绪波动特征...

【专利技术属性】
技术研发人员：李莹辉，丁帅，李志利，杨善林，王林杰，孙晓，尤田，严钰，
申请(专利权)人：中国航天员科研训练中心，合肥工业大学，
类型：发明
国别省市：北京;11