System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 一种用于驾驶员情绪调节的音乐干预方法及系统技术方案_技高网

一种用于驾驶员情绪调节的音乐干预方法及系统技术方案

技术编号:40274509 阅读:13 留言:0更新日期:2024-02-02 23:01
本发明专利技术提供一种用于驾驶员情绪调节的音乐干预方法及系统,包括:采集驾驶员的生理指标数据和音视频指标数据;对所述生理指标数据和所述音视频指标数据进行特征提取和特征融合得到多维特征数据,将所述多维特征数据输入情绪识别模型获得情绪类型和情绪识别值;将所述情绪类型和所述情绪识别值输入同步性情绪音乐模型进行音频合成,输出音乐干预片段。本发明专利技术通过分析驾驶员驾驶过程中的各项生理指标和音视频指标,识别驾驶员的情绪状况,采用人工智能算法生成与驾驶员情绪同步音乐,引导和调节驾驶员的负面情绪状态,从而达到舒缓压力、提升正面情绪的效果。

【技术实现步骤摘要】

本专利技术涉及汽车智能,尤其涉及一种用于驾驶员情绪调节的音乐干预方法及系统


技术介绍

1、在驾驶过程中,驾驶员容易受到各种外部和内部因素的影响,从而产生各种压力和不同情绪,特别是在长时间驾驶中,常常不自觉地陷入紧张的应激状态,影响了他们的生理和心理健康,长时间处于这种状态会导致生理失衡,产生各种疾病,同时还可能引发负面情绪,甚至导致交通事故的发生。

2、针对上述对驾驶员不良情绪影响因素,需要采用各种干预手段进行干预,达到舒缓情绪的目的,其中采用音乐手段是比较常见的手段,音乐作为一种强化因素,可以刺激、引发、促进和改善适应性行为,减少或消除不适应行为,从而影响人的生理状态、行为和情绪。在现有方案中,有方案通过驾驶员手上的生理信息采集传感器识别和判断驾驶员当前的情绪状态,当处于不良情绪状态时,车载音乐播放单元会按照个性化音乐库中预设好的音乐曲目进行播放,从而促使驾驶员转变为良性情绪状态;还有方案通过驾驶员人脸图像识别出驾驶员情绪类别,云端服务器根据驾驶员情绪状体向车载终端推送与驾驶员的情绪类别对应的音乐,进而有利于驾驶员调节情绪;还有方案通过当前驾驶员的面部表情信息判别驾驶员的当前情绪类型,根据关怀模型推送符合所述当前情绪类型以及所述当前驾驶员偏好的至少一种目标关怀动作:如语音交互聊天。

3、通过分析可以得知,现有采用音乐的干预调节手段,主要以单一情绪的缓解为主,这种缓解情绪的方法可能在一定程度上对驾驶员的情绪产生积极的影响,但它们缺乏对驾驶员情绪状态的精细把握和个性化应对。音乐与情绪的匹配度低:由于没有考虑音乐与情绪的同步性,播放的音乐可能与驾驶员的情绪状态不匹配,导致驾驶员无法获得最佳的音乐体验。情绪缓解效果不佳:主要集中在单一情绪的缓解上,没有通过同步原则将音乐与情绪进行同步,这可能使得情绪缓解的效果不佳,甚至可能因为音乐的播放与情绪状态的不匹配而产生负面影响。目前大多方案关注的是播放已经录制好的音乐,这意味着在音乐的选择和播放上缺乏灵活性和实时性。缺乏实时性:由于播放的是已经录制好的音乐,无法根据驾驶员的情绪状态进行实时调整。当驾驶员的情绪发生变化时,不能自动选择和播放适合的音乐来响应这种变化。音乐库更新慢:目前,录制好的音乐可能无法实时更新和替换,这意味着如果驾驶员对现有的音乐库产生了疲劳或厌倦,将无法获取新的音乐资源来满足其需求。缺乏个性化:播放已经录制好的音乐往往无法满足每个驾驶员的个性化需求。每个驾驶员的情绪状态和喜好可能都有所不同,而预先录制好的音乐可能无法满足这种个性化的需求。缺乏互动性:目前的专利无法让驾驶员参与到音乐的选择和生成过程中。这降低了驾驶员与系统之间的互动性,也使得驾驶员可能无法获得更好的音乐体验。技术门槛高:播放已经录制好的音乐需要大量的音乐资源存储空间,同时也需要一套复杂的音乐播放系统。这会增加整个系统的硬件成本和后期维护的复杂性。


技术实现思路

1、本专利技术提供一种用于驾驶员情绪调节的音乐干预方法及系统,用以解决现有技术中采用音乐手段在驾驶员情绪调节辅助中形式过于单一、无法灵活进行调整,无法较好地适应复杂多变的驾驶员情绪变化场景的缺陷。

2、第一方面,本专利技术提供一种用于驾驶员情绪调节的音乐干预方法,包括:

3、采集驾驶员的生理指标数据和音视频指标数据;

4、对所述生理指标数据和所述音视频指标数据进行特征提取和特征融合得到多维特征数据,将所述多维特征数据输入情绪识别模型获得情绪类型和情绪识别值;

5、将所述情绪类型和所述情绪识别值输入同步性情绪音乐模型进行音频合成,输出音乐干预片段。

6、根据本专利技术提供的一种用于驾驶员情绪调节的音乐干预方法,采集驾驶员的生理指标数据和音视频指标数据,包括:

7、通过穿戴式传感器采集驾驶员的心率变异性数据、皮温数据和皮阻数据;

8、通过行车记录仪获取驾驶员的面部表情图像和语音数据。

9、根据本专利技术提供的一种用于驾驶员情绪调节的音乐干预方法,对所述生理指标数据和所述音视频指标数据进行特征提取和特征融合得到多维特征数据,包括:

10、采用深度学习技术提取面部表情图像的关键特征点;

11、采用语音识别技术提取语音数据的音调数据、语速数据和音量数据;

12、对心率变异性数据进行频域分析和时域分析,得到心率变异性数据的心率频率特征和心率波动幅度;

13、分别对皮温数据、皮阻数据、所述面部表情图像的关键特征点、所述语音数据的音调数据、语速数据和音量数据以及所述心率变异性数据的心率频率特征和心率波动幅度进行权重分配,并进行归一化处理,加权融合后输出所述多维特征数据。

14、根据本专利技术提供的一种用于驾驶员情绪调节的音乐干预方法,将所述多维特征数据输入情绪识别模型获得情绪类型和情绪识别值,包括:

15、由卷积神经网络、循环神经网络和注意力机制构成情绪识别模型初始结构,采用带有标注的情绪数据样本对所述情绪识别模型初始结构进行训练,得到所述情绪识别模型;

16、将所述多维特征数据输入所述情绪识别模型,输出所述情绪类型和所述情绪识别值,其中所述情绪类型包括正面情绪类型和负面情绪类型,所述情绪识别值包括正面情绪识别值和负面情绪识别值。

17、根据本专利技术提供的一种用于驾驶员情绪调节的音乐干预方法,将所述情绪类型和所述情绪识别值输入同步性情绪音乐模型进行音频合成,输出音乐干预片段之前,还包括:

18、确定不同类型的音乐情绪类型、音乐节奏、音乐旋律和音乐和声;

19、由所述不同类型的音乐情绪类型、音乐节奏、音乐旋律和音乐和声构建音乐素材库。

20、根据本专利技术提供的一种用于驾驶员情绪调节的音乐干预方法,将所述情绪类型和所述情绪识别值输入同步性情绪音乐模型进行音频合成,输出音乐干预片段,包括:

21、若确定所述情绪类型为负面情绪类型,且所述情绪识别值大于负面情绪阈值,继续对驾驶员进行情绪识别感知;

22、若确定所述情绪类型为负面情绪类型,且所述情绪识别值小于等于负面情绪阈值,对驾驶员进行情绪干预调节,生成并播放所述音乐干预片段;

23、待所述情绪类型为正面情绪类型,且所述情绪识别值大于正面情绪阈值,停止播放所述音乐干预片段。

24、根据本专利技术提供的一种用于驾驶员情绪调节的音乐干预方法,对驾驶员进行情绪干预调节,生成并播放所述音乐干预片段,包括:

25、获取驾驶员的当前情绪识别值,基于所述当前情绪识别值生成干预音乐情绪值,使所述干预音乐情绪值与所述当前情绪识别值的绝对值差小于预设约束值;

26、对驾驶员的所述情绪类型和所述干预音乐情绪值进行数据编码,分别将所述情绪类型转换为标签向量,以及所述干预音乐情绪值转换为连续数值,得到情绪编码;

27、根据所述情绪类型和所述干预音乐情绪值从音乐素材库中检索音乐片段;

28、将所述情绪编码和所述音乐片段输入本文档来自技高网...

【技术保护点】

1.一种用于驾驶员情绪调节的音乐干预方法,其特征在于,包括:

2.根据权利要求1所述的用于驾驶员情绪调节的音乐干预方法,其特征在于,采集驾驶员的生理指标数据和音视频指标数据,包括:

3.根据权利要求1所述的用于驾驶员情绪调节的音乐干预方法,其特征在于,对所述生理指标数据和所述音视频指标数据进行特征提取和特征融合得到多维特征数据,包括:

4.根据权利要求3所述的用于驾驶员情绪调节的音乐干预方法,其特征在于,将所述多维特征数据输入情绪识别模型获得情绪类型和情绪识别值,包括:

5.根据权利要求1所述的用于驾驶员情绪调节的音乐干预方法,其特征在于,将所述情绪类型和所述情绪识别值输入同步性情绪音乐模型进行音频合成,输出音乐干预片段之前,还包括:

6.根据权利要求1所述的用于驾驶员情绪调节的音乐干预方法,其特征在于,将所述情绪类型和所述情绪识别值输入同步性情绪音乐模型进行音频合成,输出音乐干预片段,包括:

7.根据权利要求6所述的用于驾驶员情绪调节的音乐干预方法,其特征在于,对驾驶员进行情绪干预调节,生成并播放所述音乐干预片段,包括:

8.根据权利要求7所述的用于驾驶员情绪调节的音乐干预方法,其特征在于,所述音频波形包含多个音轨,所述多个音轨对应不同乐器或不同声音元素。

9.一种用于驾驶员情绪调节的音乐干预系统,其特征在于,包括:

10.一种电子设备,包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时实现如权利要求1至8任一项所述用于驾驶员情绪调节的音乐干预方法。

...

【技术特征摘要】

1.一种用于驾驶员情绪调节的音乐干预方法,其特征在于,包括:

2.根据权利要求1所述的用于驾驶员情绪调节的音乐干预方法,其特征在于,采集驾驶员的生理指标数据和音视频指标数据,包括:

3.根据权利要求1所述的用于驾驶员情绪调节的音乐干预方法,其特征在于,对所述生理指标数据和所述音视频指标数据进行特征提取和特征融合得到多维特征数据,包括:

4.根据权利要求3所述的用于驾驶员情绪调节的音乐干预方法,其特征在于,将所述多维特征数据输入情绪识别模型获得情绪类型和情绪识别值,包括:

5.根据权利要求1所述的用于驾驶员情绪调节的音乐干预方法,其特征在于,将所述情绪类型和所述情绪识别值输入同步性情绪音乐模型进行音频合成,输出音乐干预片段之前,还包括:

6.根据权利要求...

【专利技术属性】
技术研发人员:陆义平秦雁晖
申请(专利权)人:武汉长江通信智联技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1