一种基于场景感知信息的车载多模反馈智能交互系统技术方案

技术编号:42666389 阅读:28 留言:0更新日期:2024-09-10 12:22
本发明专利技术公开了一种基于场景感知信息的车载多模反馈智能交互系统,感知系统用于感知车辆多维度场景信息,包括车内人员信息、车辆状态及服务状态信息、路面信息及车内外环境状态信息;决策系统将感知系统获取的车辆多维度场景信息进行AI融合,通过大模型预测在当前场景下用户所需服务内容,并进行个性化响应;场景引擎系统接收决策系统发送的控制指令,整合车身域、动力域、底盘域、自驾域、座舱域以及车载AI助理进行反馈执行。本发明专利技术可以根据感知到的座舱场景信息,融合车内外全场景的信息,做出符合当前场景的反馈,然后结合场景信息推测用户真实需求,给用户提供主动服务和建议。

【技术实现步骤摘要】

本专利技术属于车载智能交互系统,具体涉及一种基于场景感知信息的车载多模反馈智能交互系统


技术介绍

1、当前的车载ai助理,在进行交互的时候,只具备浅语义的字面理解能力。然而,随着车型传感器的升级、感知算法的迭代、融合理解的应用,车载智能交互系统在理解语音语义的同时,应当同步理解用户情绪、车内外环境变化、车辆状态等综合信息,做到深语义理解能力,能更好的理解用户意图,实现深层次的个性化和类人交互。

2、举一个例子:老王晚上下班开车回家的路上,车内空气质量不是很好,车外下着雨,老王情绪烦躁的对助手说播放音乐。这个场景如果只根据用户语音语义进行反馈,只能判断用户想要听音乐,会为用户调用第三方音乐app,随机播放一首推荐音乐。但是如果结合感知到的场景信息,做深层次的理解,可以识别到用户烦躁的情绪,在结合车内外的环境变化发现用户在当前路段已经堵车了20分钟了,这样语音助理在声音表现上可以切换安抚治愈的音色风格和用户进行交互,在形象上可以配合下雨的天气撑起雨伞,表情做出受了委屈的样子,给用户播放一首能够舒缓情绪平静的歌曲,同时,为了缓和用户的情绪,可以将车本文档来自技高网...

【技术保护点】

1.一种基于场景感知信息的车载多模反馈智能交互系统,其特征在于,包括感知系统、决策系统以及场景引擎系统;

2.如权利要求1所述的一种基于场景感知信息的车载多模反馈智能交互系统,其特征在于,所述感知系统感知的车辆多维度场景信息包括:

3.如权利要求1所述的一种基于场景感知信息的车载多模反馈智能交互系统,其特征在于,所述决策系统中,将预测出的用户所需服务内容拆解成多个控制域对应的控制指令,所述对个控制域具体包括车身域、动力域、底盘域、自驾域、座舱域以及车载AI助理域。

4.如权利要求1所述的一种基于场景感知信息的车载多模反馈智能交互系统,其特征在于,所述决...

【技术特征摘要】

1.一种基于场景感知信息的车载多模反馈智能交互系统,其特征在于,包括感知系统、决策系统以及场景引擎系统;

2.如权利要求1所述的一种基于场景感知信息的车载多模反馈智能交互系统,其特征在于,所述感知系统感知的车辆多维度场景信息包括:

3.如权利要求1所述的一种基于场景感知信息的车载多模反馈智能交互系统,其特征在于,所述决策系统中,将预测出的用户所需服务内容拆解成多个控制域对应的控制指令,所述对个控制域具体包括车身域、动力域、底盘域、自驾域、座舱域以及车载ai助理域。

4.如权利要求1所述的一种基于场景感知信息的车载多模反馈智能交互系统,其特征在于,所述决策系统包括训练数据准备模块、模型训练模块、实时决策模块和优化反馈模块;

5.如权利要求4所述的一种基于场景感知信息的车载多模反馈智能交互系统,其特征在于,所述训练数据准备模块涵盖的数据包括:

6.如权利要求5所述的一种基于场景感知信息的车载多模反馈智能交互系统,其特征在于,所述冷启动使用数据包括:

7.如权利要求4所述的一种基于场景...

【专利技术属性】
技术研发人员:刘蓉李振龙
申请(专利权)人:一汽奔腾汽车股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1