当前位置: 首页 > 专利查询>复旦大学专利>正文

利用中层视觉先验的强化学习路径规划方法技术

技术编号:40140346 阅读:23 留言:0更新日期:2024-01-23 23:31
本发明专利技术提供了一种利用中层视觉先验的强化学习路径规划方法,具有这样的特征,包括以下步骤:步骤S1,将图像数据输入视觉处理网络得到中层特征信息;步骤S2,将中层特征信息向量化为向量信息D;步骤S3,对坐标进行转化;步骤S4,将向量信息D、当前位置坐标Q’和目标点坐标T’输入决策模型,得到下一个路径点P’;步骤S5,将下一个路径点P’作为当前位置坐标Q’,迭代执行步骤S4,得到可跟随路径L;步骤S6,控制机器人根据可跟随路径L移动,t时间后重新采集图像数据;步骤S7,重复执行步骤S1至步骤S6,直至控制机器人移动至目标点。总之,本方法能够利用感知信息控制机器人进行更有效的导航移动。

【技术实现步骤摘要】

本专利技术涉及机器人路径规划领域,具体涉及一种利用中层视觉先验的强化学习路径规划方法


技术介绍

1、机器人的导航是移动机器人领域最核心的问题之一,而导航问题当中,路径规划则是不可或缺的一个层面。

2、传统的路径规划算法主要包括基于搜索的a*算法、dijkstra算法、d*算法、基于采样的prm算法、rrt算法等。传统的机器人导航技术长期使用视觉预处理来有效利用视觉信息,比如移动机器人领域最重要的技术之一——视觉slam技术,常常预先提取图像的深度信息,或进行地平面检测等。然而传统的导航技术在决策能力上往往受限于算法的进步,存在着决策能力较差、速度较慢等问题,对于机器人的操控水平远远落后于人类实际手动操控的水平。

3、近年来随着人工智能技术的发展,出现了许多可以应用于路径规划问题中的智能和仿生路径规划算法,包括神经网络算法、强化学习算法,蚁群算法、遗传算法等。以机器学习尤其是强化学习为基础模型的、端到端方式的移动机器人路径规划方法,常常使用原始图像作为路径规划模型的输入。然而,强化学习算法是端到端的方法或者依赖于大量的样本数据,或者本文档来自技高网...

【技术保护点】

1.一种利用中层视觉先验的强化学习路径规划方法,用于根据机器人采集的图像数据、机器人当前位置坐标Q和目标点坐标T控制所述机器人移动至目标点,其特征在于,包括以下步骤:

2.根据权利要求1所述的利用中层视觉先验的强化学习路径规划方法,其特征在于:

3.根据权利要求1所述的利用中层视觉先验的强化学习路径规划方法,其特征在于:

4.根据权利要求3所述的利用中层视觉先验的强化学习路径规划方法,其特征在于:

5.根据权利要求1所述的利用中层视觉先验的强化学习路径规划方法,其特征在于:

6.根据权利要求5所述的利用中层视觉先验的强化学习路径...

【技术特征摘要】

1.一种利用中层视觉先验的强化学习路径规划方法,用于根据机器人采集的图像数据、机器人当前位置坐标q和目标点坐标t控制所述机器人移动至目标点,其特征在于,包括以下步骤:

2.根据权利要求1所述的利用中层视觉先验的强化学习路径规划方法,其特征在于:

3.根据权利要求1所述的利用中层视觉先...

【专利技术属性】
技术研发人员:刘子昂李伟张隆源刘司澳
申请(专利权)人:复旦大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1