一种利用深度卷积神经网络实现视觉运动控制的方法技术

本发明专利技术公开了一种利用深度卷积神经网络实现视觉运动控制的方法，只需要单目相机获取移动平台的当前图像，以及只需要对当前获取的单帧图像进行分析，便可得到当前视角下的合理运动控制规划。不需要通过多帧图像的多图像关联得到移动平台的定位信息，同时也不需要进行特征点数据匹配以及平面映射。另外，与已有的基于神经网络的视觉运控方案不同，本发明专利技术不需要进行路标识别以及特征点提取。再者，本发明专利技术利用深度神经网络具有语义分割的能力，对当前获取图像进行语义分割。并直接将该分割结果用以运动目标点规划，从单帧图像输入到运动控制目标点的规划，整个过程无需人为先验知识的输入。本发明专利技术具有成本低、运控简单快捷等优点。

【技术实现步骤摘要】
一种利用深度卷积神经网络实现视觉运动控制的方法
本专利技术涉及机器人视觉的
，尤其涉及到一种利用深度卷积神经网络实现视觉运动控制的方法。
技术介绍

技术实现思路
本专利技术的目的在于克服现有技术的不足，提出一种利用深度卷积神经网络实现视觉运动控制的方法。本方法使用深度卷积神经网络对单目视觉传感所采集的图像进行语义分割，以地板、土地等平面为分割目标，以得到当前获得图像视角下的可行驶区域。根据分割结果，通过统计可行驶区域分割结果像素的分布情况，对当前视角下的运动控制目标点进行规划，从而得到运动目标。为实现上述目的，本专利技术所提供的技术方案为：一种利用深度卷积神经网络实现视觉运动控制的方法，包括以下步骤：S1：在移动平台上安装单目相机，采集移动平台前方的图像信息；S2：以单帧单目图像作为算法输入，利用深度卷积神经网络进行地面分割，以得到当前获得图像视角下的可行驶区域；S3：根据分割结果，通过统计可行驶区域分割结果像素的分布情况，对当前视角下的运动控制目标点进行规划，从而得到运动控制目标点；S4：得到运动控制目标点后，将图像原点假设为当前移动平台所在位置，根据在图像空间得到的运动控制目本文档来自技高网...

【技术保护点】
1.一种利用深度卷积神经网络实现视觉运动控制的方法，其特征在于，包括以下步骤：S1：在移动平台上安装单目相机，采集移动平台前方的图像信息；S2：以单帧单目图像作为算法输入，利用深度卷积神经网络进行地面分割，以得到当前获得图像视角下的可行驶区域；S3：根据分割结果，通过统计可行驶区域分割结果像素的分布情况，对当前视角下的运动控制目标点进行规划，从而得到运动控制目标点；S4：得到运动控制目标点后，将图像原点假设为当前移动平台所在位置，根据在图像空间得到的运动控制目标点与当前移动平台的相对位置，通过PID运动控制器实现移动平台控制。

【技术特征摘要】
1.一种利用深度卷积神经网络实现视觉运动控制的方法，其特征在于，包括以下步骤：S1：在移动平台上安装单目相机，采集移动平台前方的图像信息；S2：以单帧单目图像作为算法输入，利用深度卷积神经网络进行地面分割，以得到当前获得图像视角下的可行驶区域；S3：根据分割结果，通过统计可行驶区域分割结果像素的分布情况，对当前视角下的运动控制目标点进行规划，从而得到运动控制目标点；S4：得到运动控制目标点后，将图像原点假设为当前移动平台所在位置，根据在图像空间得到的运动控制目标点与当前移动平台的相对位置，通过PID运动控制器实现移动平台控制。2.根据权利要求1所述的一种利用深度卷积神经网络实现视觉运动控制的方法，其特征在于，所述步骤S3通过对可行驶区域分割结果的像素分布进行统计，得到其像素分布沿着图像空间XY方向的分布统计，进而根据该统计情况，在最大可能运动方向上进行运动控制目标点规划。3.根据权利要求2所述的一种利用深度卷积神经网络实现视觉运动控制的方法，其特征在于，所述最大可能运动方向的求解过程为：像素坐标下不同方向的地面延伸程度分别用标准差vx和vy表示，也即是在该方向上移动平台可...

【专利技术属性】
技术研发人员：张宏，陈炜楠，朱蕾，何力，管贻生，
申请(专利权)人：广东工业大学，
类型：发明
国别省市：广东,44