System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind()
【技术实现步骤摘要】
本专利技术涉及汽车智能,尤其涉及一种用于驾驶员情绪调节的音乐干预方法及系统。
技术介绍
1、在驾驶过程中,驾驶员容易受到各种外部和内部因素的影响,从而产生各种压力和不同情绪,特别是在长时间驾驶中,常常不自觉地陷入紧张的应激状态,影响了他们的生理和心理健康,长时间处于这种状态会导致生理失衡,产生各种疾病,同时还可能引发负面情绪,甚至导致交通事故的发生。
2、针对上述对驾驶员不良情绪影响因素,需要采用各种干预手段进行干预,达到舒缓情绪的目的,其中采用音乐手段是比较常见的手段,音乐作为一种强化因素,可以刺激、引发、促进和改善适应性行为,减少或消除不适应行为,从而影响人的生理状态、行为和情绪。在现有方案中,有方案通过驾驶员手上的生理信息采集传感器识别和判断驾驶员当前的情绪状态,当处于不良情绪状态时,车载音乐播放单元会按照个性化音乐库中预设好的音乐曲目进行播放,从而促使驾驶员转变为良性情绪状态;还有方案通过驾驶员人脸图像识别出驾驶员情绪类别,云端服务器根据驾驶员情绪状体向车载终端推送与驾驶员的情绪类别对应的音乐,进而有利于驾驶员调节情绪;还有方案通过当前驾驶员的面部表情信息判别驾驶员的当前情绪类型,根据关怀模型推送符合所述当前情绪类型以及所述当前驾驶员偏好的至少一种目标关怀动作:如语音交互聊天。
3、通过分析可以得知,现有采用音乐的干预调节手段,主要以单一情绪的缓解为主,这种缓解情绪的方法可能在一定程度上对驾驶员的情绪产生积极的影响,但它们缺乏对驾驶员情绪状态的精细把握和个性化应对。音乐与情绪的匹配度低:由于没有考
技术实现思路
1、本专利技术提供一种用于驾驶员情绪调节的音乐干预方法及系统,用以解决现有技术中采用音乐手段在驾驶员情绪调节辅助中形式过于单一、无法灵活进行调整,无法较好地适应复杂多变的驾驶员情绪变化场景的缺陷。
2、第一方面,本专利技术提供一种用于驾驶员情绪调节的音乐干预方法,包括:
3、采集驾驶员的生理指标数据和音视频指标数据;
4、对所述生理指标数据和所述音视频指标数据进行特征提取和特征融合得到多维特征数据,将所述多维特征数据输入情绪识别模型获得情绪类型和情绪识别值;
5、将所述情绪类型和所述情绪识别值输入同步性情绪音乐模型进行音频合成,输出音乐干预片段。
6、根据本专利技术提供的一种用于驾驶员情绪调节的音乐干预方法,采集驾驶员的生理指标数据和音视频指标数据,包括:
7、通过穿戴式传感器采集驾驶员的心率变异性数据、皮温数据和皮阻数据;
8、通过行车记录仪获取驾驶员的面部表情图像和语音数据。
9、根据本专利技术提供的一种用于驾驶员情绪调节的音乐干预方法,对所述生理指标数据和所述音视频指标数据进行特征提取和特征融合得到多维特征数据,包括:
10、采用深度学习技术提取面部表情图像的关键特征点;
11、采用语音识别技术提取语音数据的音调数据、语速数据和音量数据;
12、对心率变异性数据进行频域分析和时域分析,得到心率变异性数据的心率频率特征和心率波动幅度;
13、分别对皮温数据、皮阻数据、所述面部表情图像的关键特征点、所述语音数据的音调数据、语速数据和音量数据以及所述心率变异性数据的心率频率特征和心率波动幅度进行权重分配,并进行归一化处理,加权融合后输出所述多维特征数据。
14、根据本专利技术提供的一种用于驾驶员情绪调节的音乐干预方法,将所述多维特征数据输入情绪识别模型获得情绪类型和情绪识别值,包括:
15、由卷积神经网络、循环神经网络和注意力机制构成情绪识别模型初始结构,采用带有标注的情绪数据样本对所述情绪识别模型初始结构进行训练,得到所述情绪识别模型;
16、将所述多维特征数据输入所述情绪识别模型,输出所述情绪类型和所述情绪识别值,其中所述情绪类型包括正面情绪类型和负面情绪类型,所述情绪识别值包括正面情绪识别值和负面情绪识别值。
17、根据本专利技术提供的一种用于驾驶员情绪调节的音乐干预方法,将所述情绪类型和所述情绪识别值输入同步性情绪音乐模型进行音频合成,输出音乐干预片段之前,还包括:
18、确定不同类型的音乐情绪类型、音乐节奏、音乐旋律和音乐和声;
19、由所述不同类型的音乐情绪类型、音乐节奏、音乐旋律和音乐和声构建音乐素材库。
20、根据本专利技术提供的一种用于驾驶员情绪调节的音乐干预方法,将所述情绪类型和所述情绪识别值输入同步性情绪音乐模型进行音频合成,输出音乐干预片段,包括:
21、若确定所述情绪类型为负面情绪类型,且所述情绪识别值大于负面情绪阈值,继续对驾驶员进行情绪识别感知;
22、若确定所述情绪类型为负面情绪类型,且所述情绪识别值小于等于负面情绪阈值,对驾驶员进行情绪干预调节,生成并播放所述音乐干预片段;
23、待所述情绪类型为正面情绪类型,且所述情绪识别值大于正面情绪阈值,停止播放所述音乐干预片段。
24、根据本专利技术提供的一种用于驾驶员情绪调节的音乐干预方法,对驾驶员进行情绪干预调节,生成并播放所述音乐干预片段,包括:
25、获取驾驶员的当前情绪识别值,基于所述当前情绪识别值生成干预音乐情绪值,使所述干预音乐情绪值与所述当前情绪识别值的绝对值差小于预设约束值;
26、对驾驶员的所述情绪类型和所述干预音乐情绪值进行数据编码,分别将所述情绪类型转换为标签向量,以及所述干预音乐情绪值转换为连续数值,得到情绪编码;
27、根据所述情绪类型和所述干预音乐情绪值从音乐素材库中检索音乐片段;
28、将所述情绪编码和所述音乐片段输入本文档来自技高网...
【技术保护点】
1.一种用于驾驶员情绪调节的音乐干预方法,其特征在于,包括:
2.根据权利要求1所述的用于驾驶员情绪调节的音乐干预方法,其特征在于,采集驾驶员的生理指标数据和音视频指标数据,包括:
3.根据权利要求1所述的用于驾驶员情绪调节的音乐干预方法,其特征在于,对所述生理指标数据和所述音视频指标数据进行特征提取和特征融合得到多维特征数据,包括:
4.根据权利要求3所述的用于驾驶员情绪调节的音乐干预方法,其特征在于,将所述多维特征数据输入情绪识别模型获得情绪类型和情绪识别值,包括:
5.根据权利要求1所述的用于驾驶员情绪调节的音乐干预方法,其特征在于,将所述情绪类型和所述情绪识别值输入同步性情绪音乐模型进行音频合成,输出音乐干预片段之前,还包括:
6.根据权利要求1所述的用于驾驶员情绪调节的音乐干预方法,其特征在于,将所述情绪类型和所述情绪识别值输入同步性情绪音乐模型进行音频合成,输出音乐干预片段,包括:
7.根据权利要求6所述的用于驾驶员情绪调节的音乐干预方法,其特征在于,对驾驶员进行情绪干预调节,生成并播放所述音乐干
8.根据权利要求7所述的用于驾驶员情绪调节的音乐干预方法,其特征在于,所述音频波形包含多个音轨,所述多个音轨对应不同乐器或不同声音元素。
9.一种用于驾驶员情绪调节的音乐干预系统,其特征在于,包括:
10.一种电子设备,包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时实现如权利要求1至8任一项所述用于驾驶员情绪调节的音乐干预方法。
...【技术特征摘要】
1.一种用于驾驶员情绪调节的音乐干预方法,其特征在于,包括:
2.根据权利要求1所述的用于驾驶员情绪调节的音乐干预方法,其特征在于,采集驾驶员的生理指标数据和音视频指标数据,包括:
3.根据权利要求1所述的用于驾驶员情绪调节的音乐干预方法,其特征在于,对所述生理指标数据和所述音视频指标数据进行特征提取和特征融合得到多维特征数据,包括:
4.根据权利要求3所述的用于驾驶员情绪调节的音乐干预方法,其特征在于,将所述多维特征数据输入情绪识别模型获得情绪类型和情绪识别值,包括:
5.根据权利要求1所述的用于驾驶员情绪调节的音乐干预方法,其特征在于,将所述情绪类型和所述情绪识别值输入同步性情绪音乐模型进行音频合成,输出音乐干预片段之前,还包括:
6.根据权利要求...
【专利技术属性】
技术研发人员:陆义平,秦雁晖,
申请(专利权)人:武汉长江通信智联技术有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。