【技术实现步骤摘要】
一种人车交互装置和人车交互方法
本申请涉及车辆驾驶技术
,尤其涉及一种人车交互装置和人车交互方法。
技术介绍
现阶段,汽车仍然是当今社会人们日常生活中重要的交通工具,随着车辆电子技术和信息化技术的快速发展,在车辆驾驶操作性、安全性等各方面提高的前提下,用户对驾驶车辆时的驾驶舒适性、便捷性和操作智能化的期望越来越高。驾驶车辆过程中,人与车之间的交互尤为重要,现有技术中,由于语音技术、触摸屏技术等逐渐在汽车上的应用,用户可以通过语音输入、肢体操作等方式控制车辆驾驶,使得人与车辆的互动交流更为简单自然。但是,专利技术人经过研究发现,现有技术中的语音输入、肢体操作等人车交互方式,大多数是单向的操控方式,不够自然,且语音输入、肢体操作等在工作模式上均是通道单独通道操控,准确性、可靠性较低,导致人与车辆之间的互动性较差。
技术实现思路
本申请所要解决的技术问题是,提供一种人车交互装置和人车交互方法,将视线通道作为主通道与其他通道以主辅结合的协作方式发出人车交互指令,对车载设备进行操控实现人车交互 ...
【技术保护点】
1.一种人车交互装置,其特征在于,包括:多功能安装调节模块、视觉语音采集模块和信息处理模块;所述多功能安装调节模块与所述视觉语音采集模块连接,所述视觉语音采集模块与所述信息处理模块连接;/n所述多功能安装调节模块,用于根据用户的驾驶姿态安装并调节所述人车交互装置和所述视觉语音采集模块;/n所述视觉语音采集模块,用于采集用户的头部三维信息、眼部二维图像信息和语音信息发送给所述信息处理模块;/n所述信息处理模块,用于根据所述头部三维信息和所述眼部二维图像信息融合确定用户的视线方向和对应的注视对象,识别所述语音信息确定辅助信息,并根据所述视线方向、所述注视对象和所述辅助信息生成人车交互指令。/n
【技术特征摘要】
1.一种人车交互装置,其特征在于,包括:多功能安装调节模块、视觉语音采集模块和信息处理模块;所述多功能安装调节模块与所述视觉语音采集模块连接,所述视觉语音采集模块与所述信息处理模块连接;
所述多功能安装调节模块,用于根据用户的驾驶姿态安装并调节所述人车交互装置和所述视觉语音采集模块;
所述视觉语音采集模块,用于采集用户的头部三维信息、眼部二维图像信息和语音信息发送给所述信息处理模块;
所述信息处理模块,用于根据所述头部三维信息和所述眼部二维图像信息融合确定用户的视线方向和对应的注视对象,识别所述语音信息确定辅助信息,并根据所述视线方向、所述注视对象和所述辅助信息生成人车交互指令。
2.根据权利要求1所述的装置,其特征在于,所述视觉语音采集模块包括视觉采集子模块和语音采集子模块;所述视觉采集子模块包括第一红外相机、第二红外相机、彩色相机和带纹理激光光源,所述第一红外相机、所述第二红外相机、所述彩色相机和所述带纹理激光光源安装在同一竖直高度,所述第一红外相机和所述第二红外相机相隔预设距离保持光轴平行;所述语音采集子模块包括麦克风和扬声器。
3.根据权利要求1所述的装置,其特征在于,所述信息处理模块,具体用于根据所述头部三维信息获得头部三维姿态信息,根据所述眼部二维图像信息获得眼部特征信息,融合所述头部三维姿态信息和所述眼部特征信息确定所述视线方向和所述注视对象,识别所述语音信息确定辅助信息,并根据所述视线方向、所述注视对象和所述辅助信息生成人车交互指令。
4.根据权利要求3所述的装置,其特征在于,所述头部三维姿态信息包括x位移量、y位移量、z位移量、α旋转角、β旋转角和γ旋转角;所述眼部特征信息包括瞳孔特征信息、虹膜特征信息、眼睑特征信息和/或眼角特征信息。
5.根据权利要求1所述的装置,其特征在于,所述信息处理模块包括通信接口,所述信息处理模块还用于利用所述通信接口将所述人车交互指令发送给车辆电子控制单元。
6.根据权利要求1所述的装置,其特征在于,所述多功能安装调节模块包括装置安装调节子模块和视觉语音安装调节子模块,所述视觉语音安装调节子模块与所述视觉语音采集模块和所述装置安装调节子模块连接;
所述装置安装调节子模块,用于根据所述驾驶姿态安装并调节所述人车交互装置的方位姿态;
所述视觉语音安装调节子模块,用于根据所述驾驶姿态安装并调节所述视觉语音采集模块。
7.根据权利要求6所述的装置,其特征在于,所述视觉语音安装调节子模块包括第一旋钮和视觉语音安装调节支架,所述第一旋钮安装在所述视觉语音安装调节支架上;
所述第一旋钮,用于响应于用户的旋转操作带动所述视觉语音安装调节支架;
所述视觉语音安装调节支架,用于根据所述第一旋钮的旋转调节所述视觉...
【专利技术属性】
技术研发人员:牛凤海,张冀青,胡俊伟,屠大维,赵威驰,赵其杰,李豪杰,
申请(专利权)人:上海汽车集团股份有限公司,上海大学,
类型:发明
国别省市:上海;31
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。