情绪状态确定方法及装置制造方法及图纸

本发明专利技术提供了一种情绪状态确定方法及装置，涉及数据处理技术领域，所述方法包括：获取视频采集模块发送的视频流，在视频流中提取图像特征和语音特征，根据图像特征确定场景特征信息和用户特征信息，且根据语音特征确定用户的文字特征信息和声纹特征信息，将场景特征信息、用户特征信息、文字特征信息和声纹特征信息导入到预设情绪分析模型中，得到用户的多个情绪状态特征信息；将多个情绪状态特征信息进行融合加权处理，得到用户的情绪状态。本发明专利技术的一种情绪状态确定方法及装置，通过解析视频可快速识别用户的情绪状态，节省时间，提高识别效率。

Method and device for determining emotional state

The invention provides an emotional state determination method and device, which relates to the technical field of data processing. The method includes acquiring video stream transmitted by video acquisition module, extracting image features and voice features in video stream, determining scene feature information and user feature information according to image features, and according to voice features. The text feature information and voiceprint feature information of users are determined. Scene feature information, user feature information, text feature information and voiceprint feature information are imported into the presupposed emotional analysis model to obtain the user's multiple emotional state feature information. The multi-emotional state feature information is fused and weighted to obtain the user's multiple emotional state feature information. The emotional state of the household. An emotional state determination method and device of the present invention can quickly identify the user's emotional state by analyzing video, save time and improve recognition efficiency.

【技术实现步骤摘要】
情绪状态确定方法及装置
本专利技术涉及数据处理
，尤其是涉及一种情绪状态确定方法及装置。
技术介绍
情绪作为人反映客观世界的一种形式，对人的现实生活和精神生活都有重要作用。情绪可以影响和调节人们的知觉、记忆、思维、兴趣、动机和意志，并对人的行为及其活动效率产生重要影响。近年来，随着生活节奏的加快，越来越多的人们承受着工作、学习和生活等方面的巨大压力，情绪变化容易反复无常，常常难以自控。现有技术中，确定人们的情绪状态一般采用问卷测试等方式，过程比较缓慢，耗时耗力，效率较低。
技术实现思路
有鉴于此，本专利技术的目的在于提供一种情绪状态确定方法及装置，以缓解了现有技术中确定人们的情绪状态一般采用问卷测试等方式，过程比较缓慢，耗时耗力，效率较低等技术问题。第一方面，本专利技术实施例提供了一种情绪状态确定方法，包括：获取视频采集模块发送的视频流；在所述视频流中提取图像特征和语音特征；根据所述图像特征确定用户所处环境的场景特征信息和用户特征信息，以及根据所述语音特征确定用户的文字特征信息和声纹特征信息；将所述场景特征信息、所述用户特征信息、所述文字特征信息和所述声纹特征信息导入到预设情绪分析本文档来自技高网...

【技术保护点】
1.一种情绪状态确定方法，其特征在于，包括：获取视频采集模块发送的视频流；在所述视频流中提取图像特征和语音特征；根据所述图像特征确定用户所处环境的场景特征信息和用户特征信息，以及根据所述语音特征确定用户的文字特征信息和声纹特征信息；将所述场景特征信息、所述用户特征信息、所述文字特征信息和所述声纹特征信息导入到预设情绪分析模型中，得到用户的多个情绪状态特征信息；将所述多个情绪状态特征信息进行融合加权处理，得到用户的情绪状态。

【技术特征摘要】
1.一种情绪状态确定方法，其特征在于，包括：获取视频采集模块发送的视频流；在所述视频流中提取图像特征和语音特征；根据所述图像特征确定用户所处环境的场景特征信息和用户特征信息，以及根据所述语音特征确定用户的文字特征信息和声纹特征信息；将所述场景特征信息、所述用户特征信息、所述文字特征信息和所述声纹特征信息导入到预设情绪分析模型中，得到用户的多个情绪状态特征信息；将所述多个情绪状态特征信息进行融合加权处理，得到用户的情绪状态。2.根据权利要求1所述的情绪状态确定方法，其特征在于，所述用户特征信息包括：人体体征、表情特征、行为特征和轨迹特征，根据所述图像特征确定用户所处环境的场景特征信息和用户特征信息，包括：根据所述视频流的图像帧的时空参数确定所述场景特征信息，所述场景特征信息包括：时间和地点；当所述视频流的图像帧中包含的人脸数量为一张或者多张时，在所述图像帧中提取与预设用户脸部特征信息相匹配的人脸图像；在所述视频流的图像帧中确定包含用户人体的区域，得到人体图像；在所述人体图像的人脸区域提取所述表情特征；在所述人体图像的身体区域提取所述人体体征、行为特征和轨迹特征。3.根据权利要求2所述的情绪状态确定方法，其特征在于，根据所述语音特征确定用户的文字特征信息和声纹特征信息，包括：提取所述视频流中用户的语音数据；对所述语音数据进行转化处理，得到所述文字特征信息，所述文字特征信息包括：语义和语法；对所述语音数据进行声纹处理，得到所述声纹特征信息，所述声纹特征信息包括：语速、基音、音调和停顿。4.根据权利要求3所述的情绪状态确定方法，其特征在于，所述场景特征信息还包括：个人属性，所述方法还包括：接收用户输入的个人属性，所述个人属性包括：性别、年龄、地域和职业。5.根据权利要求4所述的情绪状态确定方法，其特征在于，将所述场景特征信息、所述用户特征信息、所述文字特征信息和所述声纹特征信息导入到预设情绪分析模型中，得到用户的多个情绪状态特征信息，包括：针对所述场景特征信息中的每个场景特征，根据场景特征与情绪状态特征信息的对应...

【专利技术属性】
技术研发人员：姜涵予，
申请(专利权)人：姜涵予，
类型：发明
国别省市：辽宁,21