一种融合视觉识别技术的汽车线控转向系统及其控制方法技术方案

本发明专利技术公开了一种融合视觉识别技术的汽车线控转向系统及其控制方法，包括：视觉采集模块、视觉处理模块、转向路径规划模块、车辆状态采集模块、转向控制模块、通知与警报模块以及转向执行模块；通过融合视觉识别技术，协助驾驶员判断并识别障碍物及危险信息，通过线控转向执行机构突破传统转向系统的机械连接的限制，提供针对驾驶员转向操作的同向修正及反向紧急干预，进行多种工作模式的切换，实现不同工况下线控转向执行机构的精准控制，提高车辆转向的精准性和安全性。

A Vehicle Steering-by-Wire System Fused with Visual Recognition Technology and Its Control Method

The invention discloses an automobile steering-by-wire system incorporating visual recognition technology and its control method, including visual acquisition module, visual processing module, steering path planning module, vehicle status acquisition module, steering control module, notification and alarm module and steering execution module; and assists drivers to judge and identify obstacles and dangers by integrating visual recognition technology. Risk information, through breaking through the limitation of mechanical connection of traditional steering system by steering-by-wire actuator, provides co-directional correction and reverse emergency intervention for driver steering operation, carries out switching of various working modes, realizes precise control of steering-by-wire actuator under different working conditions, and improves the accuracy and safety of vehicle steering.

【技术实现步骤摘要】
一种融合视觉识别技术的汽车线控转向系统及其控制方法
本专利技术属于汽车转向系统
，具体指代一种融合视觉识别技术的汽车线控转向系统及其控制方法。
技术介绍
智能驾驶是当前汽车发展的方向，其核心在于智能感知、智能决策和精准执行。现有的感知手段主要包括：摄像头、毫米波雷达、激光雷达、红外线等，而对于执行机构而言，线控转向完全解除了传统机械连接式转向系统的约束，能够自由改变传动比并进行转向修正，解放了汽车横向控制。但是，现有的视觉识别技术仍处于整车匹配阶段，尚未出现针对线控转向系统的设计和控制方案，少量面向转向系统的研发技术主要有：中国专利技术专利申请号为CN201610041628.5，名称“一种基于机器视觉的转向助力预警系统及其工作方法”中提出利用机器视觉判断驾驶员失误、车速过高等危险状态，通过控制转向助力电机帮助车轮转向，中国专利技术专利申请号为CN201710764130.6，名称“一种转向角纠正方法、电子助力转向系统及车辆”中提出根据图像信息判定汽车偏离行驶路线的异常转向状态，控制助力电机输出目标力矩抵制异常转向，避免危险的发生。中国专利技术专利申请号为CN201610604746.2，名称“一种用于车辆的自动紧急转向系统及其控制方法”中提出根据获取的车辆外部环境信息判断车辆前方出现障碍并规划出合适的避让转向路径，触发执行单元，实现对车辆驾驶员的保护。综上所述，现有的汽车视觉识别技术主要通过判断危险情况，直接控制执行机构进行修正，没有考虑到转向系统的动力学特性和助力特性，也不能突破转向系统的机械连接。线控转向是智能驾驶汽车执行机构的关键，因此基于线控转向系统，融合视觉识别技术，开发融合视觉识别的线控转向系统，对于车辆安全和转向精准修正具有重大意义。
技术实现思路
针对于上述现有技术的不足，本专利技术的目的在于提供一种融合视觉识别技术的汽车线控转向系统及其控制方法，针对转向工况的视觉识别选择工作模式，进行线控转向执行机构的精准控制，以克服现有技术中存在的问题。为达到上述目的，本专利技术采用的技术方案如下：本专利技术的一种融合视觉识别技术的汽车线控转向系统，包括：视觉采集模块、视觉处理模块、转向路径规划模块、车辆状态采集模块、转向控制模块、通知与警报模块以及转向执行模块；所述视觉采集模块包括第一摄像头、第二摄像头、第三摄像头和图像采集卡，所述第一摄像头设置在车身前端的前围板中央，第二摄像头和第三摄像头对称排列在车身后端的后围板两侧，摄像头用于采集车辆前后实时路面信息及障碍物的图像信息，并传输给图像采集卡；所述图像采集卡控制摄像头的快门速度、曝光时间，并将摄像头拍摄的模拟图像信息转化为数字图像信息数据流，传输给视觉处理模块；所述视觉处理模块包括图像处理卡，专用集成电路以及车载通讯单元；图像处理卡用于获取图像采集卡传输的数字图像信息数据流，并对数据流进行实时压缩处理，存储于专用集成电路中；专用集成电路对上述数据流进行图像识别处理，检测路面及障碍物情况，并通过车载通讯单元与转向路径规划模块进行通讯；所述车辆状态采集模块用于获取车辆实时状态下的参数，并将参数传递给转向路径规划模块和转向控制模块；所述转向路径规划模块根据车辆状态采集模块及视觉处理模块传递的信息，进行实时的转向路径规划，并将规划后的转向路径信息传递给转向控制模块；所述转向控制模块输入端连接车辆状态采集模块、转向路径规划模块以及转向执行模块，输出端连接通知与警报模块以及转向执行模块，用于输出控制汽车转向工作模式信号；所述转向执行模块根据转向控制模块输入信号，执行汽车转向动作；所述通知与警报模块与转向控制模块连接，用于语音播报系统转向干预情况及视频显示障碍物位置及汽车转向路径,包括语音播报装置、显示装置。进一步的，所述车辆状态采集模块包括：角度传感器、位移传感器、转矩传感器、车速传感器、横摆角速度传感器及激光雷达；所述角度传感器安装在方向盘下方与转向管柱的连接处，用于测量驾驶员输入方向盘的转角；位移传感器安装在转向横拉杆上，通过测量转向横拉杆输出位移获取前轮输出转角；转矩传感器安装在转向管柱上，获取驾驶员得到的反馈转矩；车速传感器安装在汽车变速箱的输出轴上，用于测量车速；横摆角速度传感器安装在汽车中控台下方，用于测量车辆的横摆角速度；激光雷达安装在汽车前保险杠上，用于测量障碍物的三维位置信息。进一步地，所述转向执行模块采用双电机线控转向装置。进一步地，所述的转向执行模块包括：方向盘、路感总成、第一电机总成、第二电机总成、转向横拉杆、转向梯形、转向车轮；方向盘连接路感总成，所述路感总成包括：转向轴、转向管柱、扭杆、路感电机、第三转速传感器及蜗轮蜗杆；驾驶员通过方向盘输入的作用力经过转向轴作用于扭杆上；路感电机输出端通过第三转速传感器与涡轮蜗杆连接，蜗轮蜗杆安装在转向管柱上；路感电机输出的反馈作用力依次经过蜗轮蜗杆、转向管柱，传递至方向盘；所述第一电机总成包括：第一电机、第一螺母，第一丝杆、第一转速传感器；所述第二电机总成包括：第二电机、第二螺母、第二丝杆、第二转速传感器；所述第一电机、第一转速传感器、第一螺母及第一丝杆依次连接，第一丝杆固定安装在转向横拉杆上；所述第二电机、第二转速传感器、第二螺母及第二丝杆依次连接，第二丝杆固定安装在转向横拉杆上；第一电机和第二电机输出的旋转运动分别经第一、第二螺母及第一、第二丝杆转换并进行叠加，输出为转向横拉杆的位移运动；转向横拉杆两端分别通过转向梯形连接转向车轮，将转向横拉杆的位移转化为转向车轮的转向角，完成车辆转向动作。本专利技术的一种融合视觉识别技术的汽车线控转向系统的控制方法，基于上述系统，包括步骤如下：步骤1：转向路径规划模块分别接收车辆状态采集模块传输的车辆车速信息和障碍物三维位置信息、视觉处理模块获取的的车身前后图像信息，并进行障碍物识别；转向控制模块接收车辆状态采集模块传输的驾驶员方向盘转角信息，并进行驾驶员意图的识别；步骤2：转向路径规划模块根据驾驶员意图和障碍物识别信息，判断是否需要进行转向干预，若处于正常行驶状态无需进行转向干预，则进入步骤3，否则进入步骤4；步骤3：转向控制模块控制转向执行模块，执行转向助力工作模式，完成后返回步骤1；步骤4：转向路径规划模块根据障碍物状态及驾驶员意图，规划转向路径；步骤5：转向控制模块判断是否接受驾驶员输入的方向盘转角信息的转向方向，若接受则通过转向控制模块控制转向执行模块，执行转向补偿工作模式，完成后返回步骤1，若不接受则进入步骤6；步骤6：转向控制模块控制转向执行模块，执行转向强制干预工作模式，完成后返回步骤1。进一步的，所述转向助力工作模式的具体步骤如下：转向控制模块以驾驶员输入的方向盘转角信号作为预设值，计算转向车轮的转向角度及当前车速下所需的转向助力大小，并判断车速是否大于30Km/h；若大于30Km/h，转向控制模块输出控制第一电机控制信号，控制第一电机工作，输出所需的转向助力，同时计算模拟转向路感值对应的路感电机转矩，控制路感电机输出相应的反馈转矩，通过方向盘向驾驶员提供转向路感；若车速小于30Km/h，则输出第一电机和第二电机控制信号，由第一电机和第二电机同时输出转矩，提供叠加的转向助力，并控制路感电机输出当前车速下的反馈转矩，提供驾驶员转向路感。进一步的，所述本文档来自技高网...

【技术保护点】
1.一种融合视觉识别技术的汽车线控转向系统，其特征在于，包括：视觉采集模块、视觉处理模块、转向路径规划模块、车辆状态采集模块、转向控制模块、通知与警报模块以及转向执行模块；所述视觉采集模块包括第一摄像头、第二摄像头、第三摄像头和图像采集卡，所述第一摄像头设置在车身前端的前围板中央，第二摄像头和第三摄像头对称排列在车身后端的后围板两侧，摄像头用于采集车辆前后实时路面信息及障碍物的图像信息，并传输给图像采集卡；所述图像采集卡控制摄像头的快门速度、曝光时间，并将摄像头拍摄的模拟图像信息转化为数字图像信息数据流，传输给视觉处理模块；所述视觉处理模块包括图像处理卡，专用集成电路以及车载通讯单元；图像处理卡用于获取图像采集卡传输的数字图像信息数据流，并对数据流进行实时压缩处理，存储于专用集成电路中；专用集成电路对上述数据流进行图像识别处理，检测路面及障碍物情况，并通过车载通讯单元与转向路径规划模块进行通讯；所述车辆状态采集模块用于获取车辆实时状态下的参数，并将参数传递给转向路径规划模块和转向控制模块；所述转向路径规划模块根据车辆状态采集模块及视觉处理模块传递的信息，进行实时的转向路径规划，并将规划后的转向路径信息传递给转向控制模块；所述转向控制模块输入端连接车辆状态采集模块、转向路径规划模块以及转向执行模块，输出端连接通知与警报模块以及转向执行模块，用于控制汽车转向工作模式；所述转向执行模块根据转向控制模块输入信号，执行汽车转向动作；所述通知与警报模块与转向控制模块连接，用于语音播报系统转向干预情况及视频显示障碍物位置及汽车转向路径,包括语音播报装置、显示装置。...

【技术特征摘要】
1.一种融合视觉识别技术的汽车线控转向系统，其特征在于，包括：视觉采集模块、视觉处理模块、转向路径规划模块、车辆状态采集模块、转向控制模块、通知与警报模块以及转向执行模块；所述视觉采集模块包括第一摄像头、第二摄像头、第三摄像头和图像采集卡，所述第一摄像头设置在车身前端的前围板中央，第二摄像头和第三摄像头对称排列在车身后端的后围板两侧，摄像头用于采集车辆前后实时路面信息及障碍物的图像信息，并传输给图像采集卡；所述图像采集卡控制摄像头的快门速度、曝光时间，并将摄像头拍摄的模拟图像信息转化为数字图像信息数据流，传输给视觉处理模块；所述视觉处理模块包括图像处理卡，专用集成电路以及车载通讯单元；图像处理卡用于获取图像采集卡传输的数字图像信息数据流，并对数据流进行实时压缩处理，存储于专用集成电路中；专用集成电路对上述数据流进行图像识别处理，检测路面及障碍物情况，并通过车载通讯单元与转向路径规划模块进行通讯；所述车辆状态采集模块用于获取车辆实时状态下的参数，并将参数传递给转向路径规划模块和转向控制模块；所述转向路径规划模块根据车辆状态采集模块及视觉处理模块传递的信息，进行实时的转向路径规划，并将规划后的转向路径信息传递给转向控制模块；所述转向控制模块输入端连接车辆状态采集模块、转向路径规划模块以及转向执行模块，输出端连接通知与警报模块以及转向执行模块，用于控制汽车转向工作模式；所述转向执行模块根据转向控制模块输入信号，执行汽车转向动作；所述通知与警报模块与转向控制模块连接，用于语音播报系统转向干预情况及视频显示障碍物位置及汽车转向路径,包括语音播报装置、显示装置。2.根据权利要求1所述的融合视觉识别技术的汽车线控转向系统，其特征在于，所述车辆状态采集模块包括：角度传感器、位移传感器、转矩传感器、车速传感器、横摆角速度传感器及激光雷达；所述角度传感器安装在方向盘下方与转向管柱的连接处，用于测量驾驶员输入方向盘的转角；位移传感器安装在转向横拉杆上，通过测量转向横拉杆输出位移获取前轮输出转角；转矩传感器安装在转向管柱上，获取驾驶员得到的反馈转矩；车速传感器安装在汽车变速箱的输出轴上，用于测量车速；横摆角速度传感器安装在汽车中控台下方，用于测量车辆的横摆角速度；激光雷达安装在汽车前保险杠上，用于测量障碍物的三维位置信息。3.根据权利要求1所述的融合视觉识别技术的汽车线控转向系统，其特征在于，所述转向执行模块采用双电机线控转向装置。4.根据权利要求3所述的融合视觉识别技术的汽车线控转向系统，其特征在于，所述的转向执行模块包括：方向盘、路感总成、第一电机总成、第二电机总成、转向横拉杆、转向梯形、转向车轮；方向盘连接路感总成，所述路感总成包括：转向轴、转向管柱、扭杆、路感电机、第三转速传感器及蜗轮蜗杆；驾驶员通过方向盘输入的作用力经过转向轴作用于扭杆上；路感电机输出端通过第三转速传感器与涡轮蜗杆连接，蜗轮蜗杆安装在转向管柱上；路感电机输出的反馈作用力依次经过蜗轮蜗杆、转向管柱，传递至方向盘；所述第一电机总成包括：第一电机、第一螺母，第一丝杆、第一转速传感器；所述第二电机总成包括：第二电机、第二螺母、第二丝杆、第二转速传感器；所述第一电机、第一转速传感器、第一螺母及第一丝杆依次连接，第一丝杆固定安装在转向横拉杆上...

【专利技术属性】
技术研发人员：赵万忠，周小川，汪桉旭，栾众楷，王春燕，
申请(专利权)人：南京航空航天大学，
类型：发明
国别省市：江苏,32