一种基于视觉语言模型的自动导引车导航方法及装置制造方法及图纸

技术编号:41871424 阅读:20 留言:0更新日期:2024-07-02 00:22
本申请属于物流管理技术领域,公开了一种基于视觉语言模型的自动导引车导航方法及装置,通过利用视觉语言模型根据用户输入的货物指令以及场景图像,预测出相应的场景描述信息,以结合该场景描述信息生成可移动至货物所在区域的第一导航路径,以及可移动至目标货物附近的第二导航路径,无需划定固定路线以及点位即可进行自动导航,极大降低了人工工作量以及部署成本;其次还可通过检测货物底部是否存在托盘,进一步确定目标货物所对应的搬运方式,进而有效保障货物的搬运效率。

【技术实现步骤摘要】

本申请属于物流管理,特别的涉及一种基于视觉语言模型的自动导引车导航方法及装置


技术介绍

1、随着物流产业的不断扩大,物流机器人的应用得到普及,例如各类自动导引车(automated guided vehicle,agv)已出现在物流各个环节上,不仅有效提升物流生产过程的智能化水平,还可减小人工投入,以降低整体管理成本。

2、然而现有自动导引车的智能化水平较差,需要完全依赖人工指定路线以及位置进行工作,缺乏对场景以及货物的理解能力,导致适应性较差;其次,自动导引车在搬运货物的过程中,还需要求人工按照要求将货物摆放在指定位置,并根据控制指令来进行货物搬运,不仅极大增加人工工作量以及操作步骤,还会货物搬运效率造成严重影响。


技术实现思路

1、本申请为解决上述提到的需要完全依赖人工指定路线以及位置进行工作,缺乏对场景以及货物的理解能力,导致适应性较差;其次,自动导引车在搬运货物的过程中,还需要求人工按照要求将货物摆放在指定位置,并根据控制指令来进行货物搬运,不仅极大增加人工工作量以及操作步骤,还会货物搬本文档来自技高网...

【技术保护点】

1.一种基于视觉语言模型的自动导引车导航方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述场景描述信息包括障碍物信息以及道路信息;

3.根据权利要求1所述的方法,其特征在于,所述在所述货物区域获取包含所有所述待识别货物的货物图像之后,还包括:

4.根据权利要求2所述的方法,其特征在于,所述场景描述信息还包括关键对象信息;

5.根据权利要求4所述的方法,其特征在于,所述根据所述关键对象信息得到对象运动轨迹,包括:

6.根据权利要求4所述的方法,其特征在于,所述目标子货物的位姿信息包含目标位置以及第一姿态角度;...

【技术特征摘要】

1.一种基于视觉语言模型的自动导引车导航方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述场景描述信息包括障碍物信息以及道路信息;

3.根据权利要求1所述的方法,其特征在于,所述在所述货物区域获取包含所有所述待识别货物的货物图像之后,还包括:

4.根据权利要求2所述的方法,其特征在于,所述场景描述信息还包括关键对象信息;

5.根据权利要求4所述的方法,其特征在于,所述根据所述关键对象信息得到对象运动轨迹,包括:

6.根据权利要求4所述的方法,其特征在于,所...

【专利技术属性】
技术研发人员:刘勇任杰马煜铠
申请(专利权)人:浙江大学湖州研究院
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1