一种手势按键融合的智能汽车无线驾驶控制系统技术方案

一种手势按键融合的智能汽车无线驾驶控制系统，可解决智能驾驶技术操作准确度和体验较差的技术问题。包括基于汽车车身控制器，还包括车端控制器、掌端控制器和摄像头；所述掌端控制器用于生成对车辆转向、制动、油门、挡位、驻车的控制参量和接收语音指令，并通过短距无线模块传输给车端控制器处理；车端控制器用于接收掌端控制器发来的各项控制参量，利用摄像头视频数据对设定信息进行深度处理，同时完成相应控制报文的组包，并通过CAN总线发送到车辆的相应执行部件，完成车辆控制。本发明专利技术可实现单手操作车辆，将安全员的另一只手解放出来，可以扶住扶手，提高安全员驾驶的稳定性和安全性。

A wireless driving control system of intelligent vehicle based on the integration of gesture and key

【技术实现步骤摘要】
一种手势按键融合的智能汽车无线驾驶控制系统
本专利技术涉及无线驾驶
，具体涉及一种手势按键融合的智能汽车无线驾驶控制系统。
技术介绍
在智能驾驶
，车辆自动化化程度越来越高，某些特定场景人为控制车辆的要求降低，甚至有些新型车辆取消了方向盘、刹车踏板等传统操作机构，然而车辆在某些场景仍然需要人工接管和控制，如低速牵引、人工绕障碍、精细驾驶行为等。比如现在新兴的无人驾驶小巴如东风Sharing-VAN、宇通无人驾驶巴士“小宇”等都逐渐取消了传统方向盘、刹车踏板等操作机构，这类新型车辆遇到需要人工牵车的场景时，工作人员会从车内接上一个类似于游戏手柄一样的操作器，通过双手组合按键来操作车辆，这样的操作虽然从效果上可以达到控制车辆的目的，但是形式陈旧，操作准确度和体验较差。
技术实现思路
本专利技术提出的一种手势按键融合的智能汽车无线驾驶控制系统，可解决智能驾驶技术操作准确度和体验较差的技术问题。为实现上述目的，本专利技术采用了以下技术方案：一种手势按键融合的智能汽车无线驾驶控制系统，包括：本文档来自技高网...

【技术保护点】
1.一种手势按键融合的智能汽车无线驾驶控制系统，基于汽车车身控制器，其特征在于：还包括车端控制器、掌端控制器和摄像头；/n所述掌端控制器和摄像头分别与车端控制器通讯连接，所述车端控制器通过CAN总线与汽车车身控制器通讯连接；/n所述掌端控制器供操作员握持，掌端控制器上包括指纹识别模块；/n所述摄像头设置在汽车内部正对着驾驶位的位置，摄像头用于采集坐在驾驶位上的驾驶员人脸信息；/n其中，所述掌端控制器用于生成对车辆转向、制动、油门、挡位、驻车的控制参量和接收语音指令，并通过短距无线模块传输给车端控制器处理；/n车端控制器用于接收掌端控制器发来的各项控制参量，利用摄像头视频数据对设定信息进行深度处...

【技术特征摘要】
1.一种手势按键融合的智能汽车无线驾驶控制系统，基于汽车车身控制器，其特征在于：还包括车端控制器、掌端控制器和摄像头；
所述掌端控制器和摄像头分别与车端控制器通讯连接，所述车端控制器通过CAN总线与汽车车身控制器通讯连接；
所述掌端控制器供操作员握持，掌端控制器上包括指纹识别模块；
所述摄像头设置在汽车内部正对着驾驶位的位置，摄像头用于采集坐在驾驶位上的驾驶员人脸信息；
其中，所述掌端控制器用于生成对车辆转向、制动、油门、挡位、驻车的控制参量和接收语音指令，并通过短距无线模块传输给车端控制器处理；
车端控制器用于接收掌端控制器发来的各项控制参量，利用摄像头视频数据对设定信息进行深度处理，同时完成相应控制报文的组包，并通过CAN总线发送到车辆的相应执行部件，完成车辆控制。


2.根据权利要求1所述的手势按键融合的智能汽车无线驾驶控制系统，其特征在于：所述掌端控制器包含处理器，以及还包括分别与处理器一通讯连接的指纹传感器、惯性测量单元、短距无线通信模块、线性按键、拨动按键、麦克风、喇叭；
所述指纹传感器用于采集控制人员指纹，核对身份；
所述处理器包括惯性测量单元，用于估计操作员手臂挥动的倾角，并转换成车辆转向的控制参量一，该控制参量一会通过短距无线通信模块传输到车端控制器；
所述线性按键电路产生控制油门和刹车的控制参量二，该控制参量二会通过短距无线通信模块传输到车端控制器；
所述拨动按键用于产生控制挡位和驻车的控制参量三，该控制参量三会通过短距无线通信模块传输到车端控制器；
所述麦克风用于采集控制员语音，经过解码后通过短距无线通信模块传输到车端控制器；
所述喇叭用于完成语音输出或声音提示，告知驾驶员相关状态和信息。


3.根据权利要求2所述的手势按键融合的智能汽车无线驾驶控制系统，其特征在于：所述掌端控制器还包含指示灯，所述指示灯与处理器通讯连接，用于提示异常信息。


4.根据权利要求2所述的手势按键融合的智能汽车无线驾驶控制系统，其特征在于：所述掌端控制器还包含振动电机，所述振动电机与处理器通讯连接，用于提示异常信息。


5.根据权利要求1所述的手势按键融合的智能汽车无线驾驶控制系统，其特征在于：所述车端控制器包括处理器二，以及分别与处理二通讯连接的短距无线通信模块二、扩展接口、CAN总线收发控制器；
其中，所述处理器二接收掌端控制器发来的指纹采集的操作员身份信息，结合读取并处理摄像头视频获取的驾驶员人脸识别信息，来进行双重身份的核对，既保证操作员权限的合法，又保证驾驶员在有效的镜头区域内操作，为后续安全操作提供条件；
所述处理器二还接收掌端控制器发来的驾驶员手臂倾角信息和生成的转向控制参量，通过采集摄像头视频数据，使用机器学习、深度学习方法识别操作员的手势动作，获取图像中操作员手臂倾斜度的像素级判断，再将IMU倾角和像素拟合倾角进行融合，获得更为可靠的操作员手臂倾斜度量，进而转...

【专利技术属性】
技术研发人员：张阳，罗杰，朱彬，刘亚，周玉栋，张灿明，尤虎，韩雪非，杨旭，陈向成，
申请(专利权)人：深圳市路畅智能科技有限公司，
类型：发明
国别省市：广东;44