基于界面式情感交互的多模态心理健康评估系统及方法技术方案

本发明专利技术公开了一种基于界面式情感交互的多模态心理健康评估系统及方法。该系统包括健康评估单元、情绪情感识别单元、界面式情感交互单元和结果输出单元。评估方法包括利用界面式情感交互单元引导患者完成心理健康评估，并获取患者的心理健康评估数据；在患者的心理健康评估过程中，通过情绪情感识别单元获取患者的情绪情感数据，并传输给界面式情感交互单元；基于患者的情绪情感数据，利用界面式情感交互单元对患者的心理健康评估过程进行动态情绪调节；基于患者的心理健康评估数据，输出对应于患者的心理健康评估报告。本发明专利技术利用虚拟人参与心理健康评估的全流程，将虚拟人技术与情感感知技术相融合，诊断过程更加智能、更有温度。有温度。有温度。

【技术实现步骤摘要】
基于界面式情感交互的多模态心理健康评估系统及方法


[0001]本专利技术涉及一种基于界面式情感交互的多模态心理健康评估系统，同时也涉及相应的多模态心理健康评估方法，属于医疗保健信息学


技术介绍

[0002]从生理心理学的观点来看，情绪是有机体的一种复合状态，既涉及体验又涉及生理反应，还包含人的行为，其至少包括情绪体验、情绪表现和情绪生理三种因素。利用计算设备对从传感器采集的信号进行分析和处理，从而得出采集对象当前的情感状态，这种技术称为情感识别。在现有技术中，对于情感识别主要有两种方式：第一种是检测生理信号如呼吸、心律和体温等，第二种是检测情感行为如面部特征表情识别、语音情感识别和姿态识别。
[0003]另一方面，利用计算机技术生成的虚拟人具有不同的性格特征、态度观点、生物学特征、创造力、知识和技能，兼具情感交互能力、专业能力和内容生产能力，已被大众熟知，并应用在多个行业场景中。随着虚拟人多样性趋势的来临，每个人的日常工作和生活，将由更加丰富多彩的虚拟人所陪伴和环绕。
[0004]然而，现有的健康评估过于依赖人的指导，电子化的评估方式缺少智能引导以及患者在评估过程中的监测，无法针对评估过程中患者的心理反应给予及时的情感交互和反馈。

技术实现思路

[0005]本专利技术所要解决的首要技术问题在于提供一种基于界面式情感交互的多模态心理健康评估系统。
[0006]本专利技术所要解决的另一技术问题在于提供一种基于界面式情感交互的多模态心理健康评估方法。
[0007]为实现上述技术目的，本专利技术采用以下的技术方案：
[0008]根据本专利技术实施例的第一方面，提供一种基于界面式情感交互的多模态心理健康评估系统，包括：
[0009]健康评估单元，内置有多种评估量表，用于获取患者多方面的心理健康评估数据；
[0010]情绪情感识别单元，用于获取所述患者的情绪情感数据；
[0011]界面式情感交互单元，与所述健康评估单元连接，用于引导患者完成心理健康评估；所述界面式情感交互单元还与所述情绪情感识别单元连接，用于根据所述情绪情感数据对所述患者的心理健康评估过程进行动态情绪调节；
[0012]结果输出单元，与所述健康评估单元连接，用于接收所述心理健康评估数据并生成心理健康评估报告。
[0013]其中较优地，所述健康评估单元包括：
[0014]信息录入模块，用于获取患者输入的个人信息以及当前情绪分数；
[0015]情绪改善模块，与所述信息录入模块连接，用于在所述当前情绪分数低于预设分数状态下，基于预设文本对患者进行情绪改善；
[0016]心理健康评估模块，内置有多种评估量表，用于获取所述患者多方面的心理健康评估数据。
[0017]其中较优地，所述情绪情感识别单元包括：
[0018]图像采集模块，用于获取患者的视频情感数据；
[0019]语音识别模块，用于获取患者的音频情感数据；
[0020]心率变异性监测模块，佩戴于所述患者身上，用于获取所述患者的生理数据；
[0021]其中，所述视频情感数据、音频情感数据以及生理数据共同构成所述患者的情绪情感数据。
[0022]其中较优地，所述界面式情感交互单元包括：
[0023]融合分析模块，与所述情绪情感识别单元连接，用于对患者的视频情感数据、音频情感数据以及生理数据进行融合分析，并提取患者的当前焦虑值Ia、抑郁值Id和压力值Is；
[0024]融合计算模块，与所述融合分析模块连接，用于对所述患者的当前焦虑值Ia、抑郁值Id和压力值Is进行融合计算，并输出所述患者的焦虑概率p
a
（h）、抑郁概率p
d
（h）和压力概率p
s
（h）；
[0025]判断输出模块，与所述融合计算模块连接，用于分别判断所述焦虑概率p
a
（h）、抑郁概率p
d
（h）和压力概率p
s
（h）是否小于预设概率值；若小于，则输出结果为0；若不小于，则输出结果为1；
[0026]结果获取模块，与所述判断输出模块连接，用于获取患者的实时心理健康值M，其中，所述实时心理健康值M为所述患者的焦虑概率p
a
（h）、抑郁概率p
d
（h）和压力概率p
s
（h）输出结果之和；
[0027]情感交互模块，与所述结果获取模块连接，以基于所述实时心理健康值M对患者进行情绪调节；其中，若M≥1，则启动情感交互；反之，则不启动情感交互。
[0028]其中较优地，所述结果输出单元包括：
[0029]个人信息输出模块，与所述信息录入模块连接，用于输出所述患者输入的个人信息；
[0030]情绪日志输出模块，与所述信息录入模块连接，用于输出所述患者选择的表情等级图片及对应的情绪分数；
[0031]心理健康评估输出模块，与所述心理健康评估模块连接，用于输出所述患者的心理健康评估数据；
[0032]心理健康指标输出模块，与所述界面式情感交互单元连接，以根据所述患者的情绪情感数据输出心理健康指标变化图；
[0033]综合建议模块，用于输出对所述患者的综合建议。
[0034]根据本专利技术实施例的第二方面，提供一种基于界面式情感交互的多模态心理健康评估方法，包括以下步骤：
[0035]S1：利用界面式情感交互单元引导患者完成心理健康评估，并获取所述患者的心理健康评估数据；
[0036]S2：在所述患者的心理健康评估过程中，通过情绪情感识别单元获取所述患者的
情绪情感数据，并传输给界面式情感交互单元；
[0037]S3：基于所述患者的情绪情感数据，利用所述界面式情感交互单元对所述患者的心理健康评估过程进行动态情绪调节；
[0038]S4：基于所述患者的心理健康评估数据，输出对应于所述患者的心理健康评估报告。
[0039]其中较优地，所述步骤S1具体包括：
[0040]通过信息录入模块获取患者输入的个人信息和当前情绪分数；
[0041]判断所述当前情绪分数是否低于预设分数；
[0042]若不低于预设分数则直接通过心理健康评估模块对所述患者进行心理健康评估，以获取所述患者的心理健康评估数据；若低于预设分数则通过情绪改善模块对患者进行情绪改善后，再通过心理健康评估模块对所述患者进行心理健康评估。
[0043]其中较优地，所述步骤S2具体包括：
[0044]在所述患者的心理健康评估过程中，通过图像采集模块对所述患者进行视频采集，以获取患者的视频情感数据；
[0045]在所述患者的心理健康评估过程中，通过语音识别模块对所述患者进行语音识别，以获取患者的音频情感数据；
[0046]通过佩戴于患者身上的心率变异性监测模块获取所述患者的生理数据；
[0047]其中，所述视频情感数据、音频情感数据以及生理数据共本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于界面式情感交互的多模态心理健康评估系统，其特征在于包括：健康评估单元，内置有多种评估量表，用于获取患者多方面的心理健康评估数据；情绪情感识别单元，用于获取所述患者的情绪情感数据；界面式情感交互单元，与所述健康评估单元连接，用于引导患者完成心理健康评估；所述界面式情感交互单元还与所述情绪情感识别单元连接，用于根据所述情绪情感数据对所述患者的心理健康评估过程进行动态情绪调节；结果输出单元，与所述健康评估单元连接，用于接收所述心理健康评估数据并生成心理健康评估报告。2.如权利要求1所述的多模态心理健康评估系统，其特征在于所述健康评估单元包括：信息录入模块，用于获取患者输入的个人信息以及当前情绪分数；情绪改善模块，与所述信息录入模块连接，用于在所述当前情绪分数低于预设分数状态下，基于预设文本对患者进行情绪改善；心理健康评估模块，内置有多种评估量表，用于获取所述患者多方面的心理健康评估数据。3.如权利要求2所述的多模态心理健康评估系统，其特征在于所述情绪情感识别单元包括：图像采集模块，用于获取患者的视频情感数据；语音识别模块，用于获取患者的音频情感数据；心率变异性监测模块，佩戴于所述患者身上，用于获取所述患者的生理数据；其中，所述视频情感数据、音频情感数据以及生理数据共同构成所述患者的情绪情感数据。4.如权利要求3所述的多模态心理健康评估系统，其特征在于所述界面式情感交互单元包括：界面交互模块，所述界面交互模块的显示界面至少为虚拟人、动植物或图形中的一种，用于与用户进行人机交互；融合分析模块，与所述情绪情感识别单元连接，用于对患者的视频情感数据、音频情感数据以及生理数据进行融合分析，并提取患者的当前焦虑值、抑郁值和压力值；融合计算模块，与所述融合分析模块连接，用于对所述患者的当前焦虑值、抑郁值和压力值进行融合计算，并输出所述患者的焦虑概率、抑郁概率和压力概率；判断输出模块，与所述融合计算模块连接，用于分别判断所述焦虑概率、抑郁概率和压力概率是否小于预设概率值；若小于，则输出结果为0；若不小于，则输出结果为1；结果获取模块，与所述判断输出模块连接，用于获取患者的实时心理健康值，其中，所述实时心理健康值为所述患者的焦虑概率、抑郁概率和压力概率的输出结果之和；情感交互模块，与所述结果获取模块连接，以基于所述实时心理健康值对患者进行情绪调节；其中，若所述实时心理健康值≥1，则启动情感交互；反之，则不启动情感交互。5.如权利要求2所述的多模态心理健康评估系统，其特征在于所述结果输出单元包括：个人信息输出模块，与所述信息录入模块连接，用于输出所述患者输入的个人信息；情绪日志输出模块，与所述信息录入模块连接，用于输出所述患者选择的表情等级图片及对应的情绪分数；
心理健康评估输出模块，与所述心理健康评估模块连接，用于输出所述患者的心理健康评估数据；心理健康指标输出模块，与所述界面式情感交互单元连接，以根据所述患者的情绪情感数据输出心理健康指标变化图；综合建议模块，用...

【专利技术属性】
技术研发人员：马珠江，沈一，王晓怡，张子恒，张青格，王云霞，张枫，
申请(专利权)人：北京智精灵科技有限公司，
类型：发明
国别省市：