一种端到端自动驾驶方法与系统、存储介质技术方案

本发明专利技术涉及一种端到端自动驾驶方法与系统、存储介质，包括：在车辆驾驶过程中，接收当前时刻的车辆前方图像，并对所述当前时刻的车辆前方图像进行语义识别获得当前时刻的第一语义分割图；将所述当前时刻的车辆前方图像和所述当前时刻的第一语义分割图作为当前时刻的模型输入量一并输入预先训练好的端到端自动驾驶模型进行处理，得到第二语义分割图和所述车辆动作控制信息；其中，所述车辆动作控制信息包括方向盘转角、车辆速度。本发明专利技术能够解决传统自动驾驶的端到端模型无法获知驾驶策略是如何对驾驶环境进行解释的，且驾驶策略学习的输入样本包括多种信息，较为复杂的技术问题。题。题。

【技术实现步骤摘要】
一种端到端自动驾驶方法与系统、存储介质


[0001]本专利技术涉及自动驾驶
，具体涉及一种端到端自动驾驶方法与系统、存储介质。

技术介绍

[0002]在传统自动驾驶中，都是采用基于规则的模块化方法，一般分为感知、决策规划和控制。模块化方案依赖于各个模块的精细复杂设计，而人为设计的系统往往覆盖不了各种驾驶场景，比如感知模块需要以一种有意义的表示形式来完美地表征外部环境，有助于决策与控制模块；而端到端自动驾驶方案更接近于人类本质，是一种纯AI的方法，端到端自动驾驶方案具有人工智能特性，以纯数据驱动的学习形式，学习感知的同时采取控制行为。
[0003]在实现本专利技术的过程中，专利技术人发现传统自动驾驶的端到端模型无法获知驾驶策略是如何对驾驶环境进行解释的，再者是驾驶策略学习的输入样本包括多种信息，较为复杂。

技术实现思路

[0004]本专利技术的目的在于提出一种端到端自动驾驶方法与系统，以解决传统自动驾驶的端到端模型无法获知驾驶策略是如何对驾驶环境进行解释的，且驾驶策略学习的输入样本包括多种信息，较为复杂的技术问题。<本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种端到端自动驾驶方法，其特征在于，包括如下步骤：步骤S100、在车辆驾驶过程中，接收当前时刻的车辆前方图像，并对所述当前时刻的车辆前方图像进行语义识别获得当前时刻的第一语义分割图；步骤S200、将所述当前时刻的车辆前方图像和所述当前时刻的第一语义分割图作为当前时刻的模型输入量一并输入预先训练好的端到端自动驾驶模型进行处理，得到第二语义分割图和所述车辆动作控制信息；其中，所述车辆动作控制信息包括方向盘转角、车辆速度；其中，所述端到端自动驾驶模型包括概率图模型和驾驶策略模型；所述概率图模型用于根据当前时刻的模型输入量进行推理得到潜在状态变量，并根据所述潜在状态变量进行解码得到第二语义分割图；所述驾驶策略模型用于根据所述概率图模型输出的潜在状态变量进行驾驶决策得到车辆动作控制信息。2.根据权利要求1所述的方法，其特征在于，所述概率图模型具体用于根据所述当前时刻的模型输入量以及历史时刻的模型输入量和车辆动作进行推理得到潜在状态变量。3.根据权利要求2所述的方法，其特征在于，所述概率图模型包括滤波模块、潜在动态模块和生成模块，所述滤波模块用于对输入所述概率图模型的模型输入量进行滤波处理，所述潜在动态模块用于根据所述滤波模块的滤波处理结果推理得到潜在状态变量，所述生成模块用于根据所述潜在状态变量进行解码得到第二语义分割图。4.根据权利要求3所述的方法，其特征在于，所述驾驶策略模型基于最大熵强化学习算法中的随机策略学习算法训练得到。5.根据权利要求4所述的方法，其特征在于，所述端到端自动驾驶模型的优化目标函数为f＝f1+f2，所述概率图模型的优化目标函数为f1，所述驾驶策略模型的优化目标函数为f2；其中：其中：其中：其中：其中：其中：表示所述生成模块根据所述潜在状态变量进行解码得到车辆前方图像，为所述第二语义分割图，为所述潜在动态模块推理得到的潜在状态变量，为所述滤波模块的滤波处理结果，x
1：t+1
为车辆驾驶的初始时刻到t+1时刻的车辆前方图像，a
1：t
为车辆驾驶的初始时刻到t时刻的车辆动作，m
1：t+1
为车辆驾驶的初始时刻到t+1时刻的语义分割图，z
1：t+H
为车辆驾驶的初始时刻到t+H时刻的潜在状态变量，z
1：t+1
为车辆驾驶的初始时刻到t+1时刻的潜在状态变量，a
t+1：t+H
为车辆驾驶的t+1时刻到t+H时刻的车辆动作，t+1时刻为当前...

【专利技术属性】
技术研发人员：王丹，王玉龙，
申请(专利权)人：广州汽车集团股份有限公司，
类型：发明
国别省市：