基于用户情绪状态的人机交互语音控制方法、装置及车辆制造方法及图纸

本发明专利技术公开一种基于用户情绪状态的人机交互语音控制方法、装置及车辆，其中，方法包括：监控设定用户的表情、语音或动作；根据所述设定用户的表情、语音或动作确定所述设定用户当前的情绪状态；根据所述设定用户当前的情绪状态确定车辆的语音控制方式；根据所述确定的语音控制方式进行车辆人机交互。本发明专利技术公开的方法、装置及车辆可以根据用户的驾驶行为，说话的语速语调，面部的表情等来计算用户目前的情感，智能系统可以根据用户当前的情绪状态播放合适的音乐或者调整导航的语音的变化等与用户进行人机交互，调整用户的情绪，让用户的驾驶更安全。

Method and device for man-machine interactive voice control based on user's emotional state and vehicle

The invention discloses an interactive voice user emotional state control method, device and vehicle, which comprises: a monitoring method based on user set expression, voice or action; according to the user set expression, voice or action determines the set user's current emotional state; according to the user set current emotional state to determine the vehicle's voice control mode; the vehicle interactive speech according to the determined control mode. The invention discloses a method, device and vehicle according to the user's driving behavior, speaking tone, facial expressions to calculate the user's emotions, the intelligent system can according to the user's emotional state the right music or change navigation voice of human-computer interaction with the user, the user's emotional adjustment. Let the user driving safer.

【技术实现步骤摘要】

本专利技术涉及人工智能领域，具体可以涉及车辆智能控制领域或人机交互领域，尤其涉及一种基于用户情绪状态的人机交互语音控制方法、装置及车辆。
技术介绍
随着社会的快速发展，汽车在生活中越来越普及；尽管车辆自动驾驶的概念提出很久，但是还尚未普及；目前而言，车辆行驶过程中驾驶员的控制依然处于决定地位。但是，作为驾驶员的人在开车过程中可能会受到各种情绪的影响，而有些情绪则可能严重影响驾驶安全。因此，有必要提供一种能够分析驾驶员情绪的方法或者车辆。
技术实现思路
本专利技术要解决的一个技术问题是如何针对车辆环境提供一种能够基于用户的情绪进行人机交互的方法、智能操控系统及车辆，可以调节用户的情绪，进而基于用户的情绪状态进行车辆人机交互控制从而保证用户驾驶车辆的安全。本专利技术提供一种基于用户情绪状态的人机交互语音控制方法，包括：监控设定用户的表情、语音或动作；根据所述设定用户的表情、语音或动作确定所述设定用户当前的情绪状态；根据所述设定用户当前的情绪状态确定车辆的语音控制方式；根据所述确定的语音控制方式进行车辆人机交互。进一步地，所述根据所述设定用户的表情、语音或动作确定所述设定用户当前的情绪状态之前包括：统计多个用户的情绪状态数据形成一般用户情绪状态数据库，所述情绪状态数据库包括用户的表情、语音或动作与情绪状态的关系；根据一般用户情绪状态数据库，以大数据方式分析多个用户的情绪状态，根据用户的动作标定用户的情绪状态的确定因子，所述用户情绪状态包括欢快的状态、愤怒的状态、悲伤的状态、痛苦的状态、激动的状态。进一步地，所述根据所述设定用户的表情、语音或动作确定所述设定用户当前的情绪状态包括：根据所述一般用户情绪状态数据库及监控到的设定用户的表情、语音或动作评估并确定设定用户当前的情绪状态。进一步地，还包括根据所述设定用户当前的情绪状态确定车辆的控制模式。进一步地，根据所述设定用户的表情、语音或动作确定所述设定用户当前的情绪状态还包括：获取所述设定用户的语音的语速、语调、声音大小的变化；根据设定用户语音的语速、语调、声音大小的均值确定设定用户当前的情绪状态。进一步地，分析设定用户设定时间段中的声音中所包含的语言信息，判断设定用户的语言表达中是否有特定字词句；根据设定用户当前表达中出现的特定字词句确定设定用户的情绪状态。进一步地，分析设定时间段内设定用户的动作；根据设定用户的日常动作、当前时间的动作判断设定用户当前的情绪状态。进一步地，分析设定时间段内设定用户的驾驶行为；根据设定用户的日常驾驶行为、当前时间的驾驶行为判断设定用户当前的情绪状态。进一步地，分析设定时间段的设定用户的语音的语速、语调、声音大小是否超过设定阈值；如果设定用户的语速变快到超过设定语速阈值、和\\或语调变高到超过设定语调阈值、和\\或声音变大到超过设定声音阈值，则说明设定用户处于相对情绪激动的状态。进一步地，所述根据所述设定用户当前的情绪状态确定车辆的语音控制方式，包括：如果设定用户当前处于愤怒的状态，则选择温柔的、安慰的声音数据库进行语音控制，安抚设定用户的情绪。进一步地，根据设定用户的情绪状态选择设定的人机交互声音效果与设定用户进行交互。进一步地，在确定设定用户的情绪状态后，根据设定用户的情绪状态选择设定的音乐播放以安抚设定用户的情绪以保证驾驶安全。进一步地，如果当前处在驾驶导航状态，可以根据设定用户的情绪状态选择设定的导航语言播放以安抚设定用户的情绪以保证驾驶安全。本专利技术还提供一种基于用户情绪状态的人机交互语音控制装置，包括：监控模块，用于监控设定用户的表情、语音或动作；情绪状态分析模块，与所述监控模块相连接，用于根据所述设定用户的表情、语音或动作确定所述设定用户当前的情绪状态；处理模块，与所述情绪状态分析模块相连接，用于根据所述设定用户当前的情绪状态确定车辆的语音控制方式；执行模块，与所述处理模块相连接，用于根据所述确定的语音控制方式进行车辆人机交互。进一步地，还包括情绪状态数据库模块，用于统计多个用户的情绪状态数据形成一般用户情绪状态数据库，所述情绪状态数据库包括用户的表情、语音或动作与情绪状态的关系；根据一般用户情绪状态数据库，以大数据方式分析多个用户的情绪状态，根据用户的动作标定用户的情绪状态的确定因子，所述用户情绪状态包括欢快的状态、愤怒的状态、悲伤的状态、痛苦的状态、激动的状态。进一步地，所述情绪状态分析模块还用于根据所述一般用户情绪状态数据库及监控到的设定用户的表情、语音或动作评估并确定设定用户的情绪状态。进一步地，处理模块还用于根据所述设定用户当前的情绪状态确定车辆的控制模式。进一步地，所述情绪状态分析模块还用于：获取所述设定用户的语音的语速、语调、声音大小的变化；根据设定用户语音的语速、语调、声音大小的均值确定设定用户当前的情绪状态。进一步地，分析设定用户设定时间段中的语音所包含的语言信息，判断设定用户的语言表达中是否有特定字词句；根据设定用户当前表达中出现的特定字词句确定设定用户的情绪状态。进一步地，分析设定时间段内设定用户的动作；根据设定用户的日常动作、当前时间的动作判断设定用户当前的情绪状态。进一步地，分析设定时间段内设定用户的驾驶行为；根据设定用户的日常驾驶行为、当前时间的驾驶行为判断设定用户当前的情绪状态。进一步地，分析设定时间段的设定用户的语音的语速、语调、声音大小是否超过设定阈值；如果设定用户的语速变快到超过设定语速阈值、和\\或语调变高到超过设定语调阈值、和\\或声音变大到超过设定声音阈值，则说明设定用户处于相对情绪激动的状态。进一步地，处理模块还用于如果设定用户当前处于愤怒的状态，则选择温柔的、安慰的声音数据库进行语音控制，安抚设定用户的情绪。进一步地，执行模块还用于根据设定用户的情绪状态选择设定的人机交互声音效果与设定用户进行交互。进一步地，执行模块还用于在确定设定用户的情绪状态后，根据设定用户的情绪状态选择设定的音乐播放以安抚设定用户的情绪以保证驾驶安全。进一步地，执行模块还用于如果当前处在驾驶导航状态，可以根据设定用户的情绪状态选择设定的导航语言播放以安抚设定用户的情绪以保证驾驶安全。本专利技术提供一种车辆，包括如上任一所述的基于用户情绪状态的人机交互语音控制装置。本专利技术提供的方法、装置及车辆，可以根据用户的驾驶行为、说话的语速语调，面部的表情等来计算用户目前的情感，比如比较着急，比较激动，比较愤怒，比较悲伤等，智能系统可以根据用户当前的情绪状态播放合适的音乐或者调整导航的语音的变化等与用户进行人机交互，调整用户的情绪，让用户的驾驶更安全。附图说明图1示出本专利技术一个实施例的基于用户情绪状态的人机交互语音控制方法的流程图。图2示出本专利技术一个实施例的一种基于用户情绪状态的人机交互语音控制装置的结构框图。图3示出本专利技术一个实施例的车辆的结构框图。具体实施方式下面参照附图对本专利技术进行更全面的描述，其中说明本专利技术的示例性实施例。图1示出本专利技术一个实施例的基于用户情绪状态的人机交互语音控制方法的流程图，参照图1所示，所述方法包括：步骤101，监控设定用户的表情、语音或动作。在一个实施例中，可以通过多种传感器的组合来监控或检测设定用户的表情、语音或者动作。举例而言，在车辆的内可以通过车辆内置的疲劳驾驶摄像头监控用户的表情本文档来自技高网...

【技术保护点】
一种基于用户情绪状态的人机交互语音控制方法，其特征在于，包括：监控设定用户的表情、语音或动作；根据所述设定用户的表情、语音或动作确定所述设定用户当前的情绪状态；根据所述设定用户当前的情绪状态确定车辆的语音控制方式；根据所述确定的语音控制方式进行车辆人机交互。

【技术特征摘要】
1.一种基于用户情绪状态的人机交互语音控制方法，其特征在于，包括：监控设定用户的表情、语音或动作；根据所述设定用户的表情、语音或动作确定所述设定用户当前的情绪状态；根据所述设定用户当前的情绪状态确定车辆的语音控制方式；根据所述确定的语音控制方式进行车辆人机交互。2.根据权利要求1所述的方法，其特征在于：所述根据所述设定用户的表情、语音或动作确定所述设定用户当前的情绪状态之前包括：统计多个用户的情绪状态数据形成一般用户情绪状态数据库，所述情绪状态数据库包括用户的表情、语音或动作与情绪状态的关系；根据一般用户情绪状态数据库，以大数据方式分析多个用户的情绪状态，根据用户的动作标定用户的情绪状态的确定因子，所述用户情绪状态包括欢快的状态、愤怒的状态、悲伤的状态、痛苦的状态、激动的状态；和\\或所述根据所述设定用户的表情、语音或动作确定所述设定用户当前的情绪状态包括：根据所述一般用户情绪状态数据库及监控到的设定用户的表情、语音或动作评估并确定设定用户当前的情绪状态；和\\或根据所述设定用户当前的情绪状态确定车辆的控制模式。3.根据权利要求1或2所述的方法，其特征在于，根据所述设定用户的表情、语音或动作确定所述设定用户当前的情绪状态还包括：获取所述设定用户的语音的语速、语调、声音大小的变化；根据设定用户语音的语速、语调、声音大小的均值确定设定用户当前的情绪状态；和\\或分析设定用户设定时间段中的声音中所包含的语言信息，判断设定用户的语言表达中是否有特定字词句；根据设定用户当前表达中出现的特定字词句确定设定用户的情绪状态；和\\或分析设定时间段内设定用户的动作；根据设定用户的日常动作、当前时间的动作判断设定用户当前的情绪状态；和\\或分析设定时间段内设定用户的驾驶行为；根据设定用户的日常驾驶行为、当前时间的驾驶行为判断设定用户当前的情绪状态。4.根据权利要求3所述的方法，其特征在于，还包括：分析设定时间段的设定用户的语音的语速、语调、声音大小是否超过设定阈值；如果设定用户的语速变快到超过设定语速阈值、和\\或语调变高到超过设定语调阈值、和\\或声音变大到超过设定声音阈值，则说明设定用户处于相对情绪激动的状态。5.根据权利要求1所述的方法，其特征在于，所述根据所述设定用户当前的情绪状态确定车辆的语音控制方式，包括：如果设定用户当前处于愤怒的状态；选择温柔的、安慰的声音数据库进行语音控制，安抚设定用户的情绪；和\\或根据设定用户的情绪状态选择设定的人机交互声音效果与设定用户进行交互；和\\或在确定设定用户的情绪状态后；根据设定用户的情绪状态选择设定的音乐播放以安抚设定用户的情绪以保证驾驶安全；和\\或如果当前处在驾驶导航状态；根据设定用户的情绪状态选择设定的导航语言播放以安抚设定用户的情绪以保证驾驶安全。6.一种基于用户情绪状态的人机交互语音控制装置，其特征...

【专利技术属性】
技术研发人员：沈海寅，
申请(专利权)人：智车优行科技北京有限公司，
类型：发明
国别省市：北京;11