System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 一种车载人机交互系统及方法技术方案_技高网

一种车载人机交互系统及方法技术方案

技术编号:40921505 阅读:2 留言:0更新日期:2024-04-18 14:46
本发明专利技术涉及车载系统技术领域,特别是涉及一种车载人机交互系统,其包括车外双目摄像头、底盘活动摄像头、车内双目摄像头、车身周侧激光雷达、车内语音接收器、数据存储器、数据处理器、控制主机和执行器:数据存储器对采集到的信息进行存储;数据处理器用于对数据存储器内数据进行转码分析;控制主机用于接收数据处理器处理后的行为信息,根据行为信息自动下达动作命令,并启动应对行为序列;执行器用于执行控制主机下达的动作命令;可视化显示终端用于显示车身周围信息,并显示识别获取的语音指令信息以及手势指令信息。通过本发明专利技术,可以及时有效的作出安全提示,并且自动纠正车辆轨迹,避免发生事故,同时还可以实现安全无人驾驶。

【技术实现步骤摘要】

本专利技术涉及车载系统,特别是涉及一种车载人机交互系统及方法


技术介绍

1、随着科技进步以及创新,现有乘用车的功能越来越多,这些功能通过车机控制,现有车机大多都是通过手动触屏控制或者按键控制,在实际驾驶的时候,驾驶员若需要进行功能操作,或多或少需要分心。

2、授权公告号为cn103455144b的中国专利公开了一种车载人机交互系统,包括:前视双目摄像头与激光雷达,对车外信息进行采集;下视双目摄像头,对车主的手势进行采集;存储器,存储车主的指定手势或手势运动轨迹及对应的操作;处理器,对所述前视双目摄像头与激光雷达所采集的车外信息进行处理,计算出车外的环境信息,并给予安全提醒,还根据所述存储器对下视双目摄像头所采集的手势进行识别,并当识别到指定手势或手势运动轨迹后通知执行模块执行所对应的操作;执行模块,以声光电之一者或结合给出提醒信息、以及执行手势对应操作。还提供了一种车载系统的人机交互方法。通过本系统及方法,对车外状况进行安全提示,还可以接受车内驾驶人的手势控制,提供更加人性化服务。

3、但是该系统仍然存在着不足之处:该系统无法获取驾驶员语音命令,驾驶员在驾驶过程中打手势会影响驾驶安全,并且缺乏对车身周围环境自动检测的功能。


技术实现思路

1、本专利技术目的是针对
技术介绍
中存在的问题,提出一种车载人机交互系统及方法。

2、本专利技术的技术方案:一方面,本专利技术提出一种车载人机交互系统,包括车外双目摄像头、底盘活动摄像头、车内双目摄像头、车身周侧激光雷达、车内语音接收器、数据存储器、数据处理器、控制主机和执行器:

3、车外双目摄像头包括多组,各车外双目摄像头分别设置在车身周侧,各双目摄像头互相配合,对车身周侧进行无死角覆盖,用于对车外路况信息进行数据采集;

4、底盘活动摄像头用于对车辆底部信息进行数据采集,车辆点火后自启动,底盘活动摄像头下伸并快速旋转360度,检测车底部是否有危险障碍物;

5、车内双目摄像头用于对驾驶员驾驶操作状态进行数据采集,以及对驾驶员手势进行数据采集;

6、车身周侧激光雷达用于配合车外双目摄像头对车外信息进行数据采集;

7、车内语音接收器用于对驾驶员的语音指令进行数据采集;

8、数据存储器用于对双目摄像头、底盘活动摄像头、车内双目摄像头以及车内语音接收器采集到的信息进行存储;

9、数据处理器用于对数据存储器内数据进行转码分析,剔除无效数据,保留有效数据,同时对有效数据与数据库数据进行相似度匹配,获取对应行为信息;

10、控制主机用于接收数据处理器处理后的行为信息,根据行为信息自动下达动作命令,并启动应对行为序列;

11、执行器用于执行控制主机下达的动作命令;

12、可视化显示终端用于显示车身周围信息,并显示识别获取的语音指令信息以及手势指令信息。

13、优选的,执行器还包括车内驾驶安全提示器以及远程救援信号发射器,驾驶安全提示器用于提醒驾驶员规范驾驶行为,远程救援信号发射器则在车内驾驶员无法自救时自动发送救援信号,救援信号还包括位置信息。

14、优选的,还包括云数据库,数据处理器与云数据库连接。

15、优选的,车外双目摄像头以及车身周侧激光雷达对车外行人以及活体动物进行行为监测,数据处理器根据监测信息判断行人以及活体动物移动方向和速度。

16、优选的,车外双目摄像头监测路口信号灯信息,数据处理器对信号灯信息进行分析,控制主机下达行驶或停车指令。

17、另一方面,本专利技术还提出一种车载人机交互方法,包括以下步骤:

18、s1、车辆点火启动,底盘活动摄像头自动启动并伸出,底盘活动摄像头自动旋转360度,对车身底部进行扫描,防止车辆启动过程中碾压车底活物,车辆启动后,车外双目摄像头启动并实时检测车外信息,并将数据转换为全息影像显示在驾驶室内可视化终端上;

19、s2、驾驶员下达语音命令或手势指令,车内语音接收器接收语音命令信号,车内双目摄像头自动获取手势命令,语音命令或手势命令上传至数据存储器;

20、s3、数据处理器对数据存储器内手势命令或语音命令进行解码分析,筛选有效命令信号,并将有效命令信号与数据库内命令信号进行匹配,获得该指令所对应信息;控制主机对指令信息进行可行性判断,若可行,则将该命令下发;

21、s4、数据处理器将比对后信号反馈到控制主机,控制主机将比对信号显示在驾驶室内显示终端上,与此同时控制主机自发控制对应执行器动作,执行器执行控制主机下达命令,车辆自动完成命令动作。

22、与现有技术相比,本专利技术具有如下有益的技术效果:

23、通过设置车内双目摄像头,车内双目摄像头能够自动采集用户在进行操作时所产生的目标手势数据,并确定对应的目标控制指令,通过采集用户的手势数据执行相应的操作,使用户使用车载终端的相应功能,简化了操作过程,提高了效率,不易分散驾驶员的注意力,提高了车辆行驶的安全性,并且通过设置语音接收器,利用语音接收器接收驾驶员语音命令,通过识别语音命令,执行相应动作,进一步简化操作过程,提高功能实现的效率,同时还使驾驶员双手不离方向盘,确保驾驶安全性。

本文档来自技高网...

【技术保护点】

1.一种车载人机交互系统,其特征在于,包括车外双目摄像头、底盘活动摄像头、车内双目摄像头、车身周侧激光雷达、车内语音接收器、数据存储器、数据处理器、控制主机和执行器:

2.根据权利要求1所述的一种车载人机交互系统,其特征在于,执行器还包括车内驾驶安全提示器以及远程救援信号发射器,驾驶安全提示器用于提醒驾驶员规范驾驶行为,远程救援信号发射器则在车内驾驶员无法自救时自动发送救援信号,救援信号还包括位置信息。

3.根据权利要求1所述的一种车载人机交互系统,其特征在于,还包括云数据库,数据处理器与云数据库连接。

4.根据权利要求1所述的一种车载人机交互系统,其特征在于,车外双目摄像头以及车身周侧激光雷达对车外行人以及活体动物进行行为监测,数据处理器根据监测信息判断行人以及活体动物移动方向和速度。

5.根据权利要求1所述的一种车载人机交互系统,其特征在于,车外双目摄像头监测路口信号灯信息,数据处理器对信号灯信息进行分析,控制主机下达行驶或停车指令。

6.一种根据权利要求1-5任一项所述车载人机交互系统的人机交互方法,其特征在于,包括以下步骤:

...

【技术特征摘要】

1.一种车载人机交互系统,其特征在于,包括车外双目摄像头、底盘活动摄像头、车内双目摄像头、车身周侧激光雷达、车内语音接收器、数据存储器、数据处理器、控制主机和执行器:

2.根据权利要求1所述的一种车载人机交互系统,其特征在于,执行器还包括车内驾驶安全提示器以及远程救援信号发射器,驾驶安全提示器用于提醒驾驶员规范驾驶行为,远程救援信号发射器则在车内驾驶员无法自救时自动发送救援信号,救援信号还包括位置信息。

3.根据权利要求1所述的一种车载人机交互系统,其特征在于,还包括云数据库...

【专利技术属性】
技术研发人员:姜维王宝利邹双骏杨建军
申请(专利权)人:上海蓁康电子有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1