柑橘果实采摘定位方法、装置、设备及介质制造方法及图纸

技术编号:42707947 阅读:59 留言:0更新日期:2024-09-13 12:00
本申请涉及柑橘果实采摘定位方法、装置、设备及介质,方法包括:调用预设的co lmap算法从各个角度的柑橘果树图像中提取特征点并匹配,以生成柑橘果树图像相对应的相机位姿数据;采用已训练至收敛状态的神经辐射场模型根据相机位姿数据,从各个角度的柑橘果树图像中学习柑橘果树的隐式三维表示,以生成柑橘果树相对应的三维点云数据;基于已训练至收敛状态的语义分割模型对柑橘果树相对应的三维点云数据进行端到端的语义分割,以提取出成熟柑橘果实相对应的三维点云数据以及三维空间坐标;采摘作业机器人根据成熟柑橘果实相对应的三维点云数据以及三维空间坐标确定成熟柑橘果实的采摘位置。本申请能够对成熟柑橘果实的精准、快速定位,实现自动化采摘。

【技术实现步骤摘要】

本申请涉及三维重建领域,尤其涉及一种柑橘果实采摘定位方法、相应的装置、电子设备及计算机可读存储介质。


技术介绍

1、果树三维重建是果实空间定位的重要基础,通过对果树的三维结构进行建模,可以获取丰富的空间信息,为果实定位提供参考。传统的果树三维重建方法主要包括基于图像的建模和基于点云的建模两大类。

2、基于图像的建模方法通过对果树的多视角图像进行拍摄,利用结构化运动(sfm)、多视角立体视觉(mvs)等技术重建果树的三维模型。dong等[1]提出了一种基于sfm和mvs的果园三维重建与信息提取方法,实现了对果树的三维可视化和参数估计。然而,基于图像的建模方法容易受到光照变化、遮挡等因素的影响,难以准确恢复果树的复杂结构。

3、基于点云的建模方法使用激光雷达等深度传感器直接获取果树的三维点云数据,通过点云配准、融合、表面重建等步骤生成果树的三维模型。gené-mola等使用车载激光雷达对果园进行扫描,获取高精度的点云数据,实现了果树三维重建和农艺参数估计。基于点云的建模方法,其点云的噪声、稀疏等问题可能影响建模的精度,且一套激光雷达的设本文档来自技高网...

【技术保护点】

1.一种柑橘果实采摘定位方法,其特征在于,包括:

2.根据权利要求1所述的柑橘果实采摘定位方法,其特征在于,采用已训练至收敛状态的神经辐射场模型根据所述相机位姿数据,从所述各个角度的柑橘果树图像中学习柑橘果树的隐式三维表示,以生成柑橘果树相对应的三维点云数据的步骤,包括:

3.根据权利要求1所述的柑橘果实采摘定位方法,其特征在于,基于已训练至收敛状态的语义分割模型对所述柑橘果树相对应的三维点云数据进行端到端的语义分割,以提取出成熟柑橘果实相对应的三维点云数据以及三维空间坐标的步骤,包括:

4.根据权利要求3所述的柑橘果实采摘定位方法,其特征在于,基于已...

【技术特征摘要】

1.一种柑橘果实采摘定位方法,其特征在于,包括:

2.根据权利要求1所述的柑橘果实采摘定位方法,其特征在于,采用已训练至收敛状态的神经辐射场模型根据所述相机位姿数据,从所述各个角度的柑橘果树图像中学习柑橘果树的隐式三维表示,以生成柑橘果树相对应的三维点云数据的步骤,包括:

3.根据权利要求1所述的柑橘果实采摘定位方法,其特征在于,基于已训练至收敛状态的语义分割模型对所述柑橘果树相对应的三维点云数据进行端到端的语义分割,以提取出成熟柑橘果实相对应的三维点云数据以及三维空间坐标的步骤,包括:

4.根据权利要求3所述的柑橘果实采摘定位方法,其特征在于,基于已训练至收敛状态的语义分割模型对所述柑橘果树相对应的三维点云数据进行端到端的语义分割,以提取出成熟柑橘果实相对应的三维点云数据以及三维空间坐标的步骤,包括:

5.根据权利要求1所述的柑橘果实采摘定位方法,其特征在于,基于已训练至收敛状态的语义分割模型对所述柑橘果树相对应的三维点云数据进行端到端的语义分割,以提取出成熟柑橘果实相对应的三维点云...

【专利技术属性】
技术研发人员:张亚莉杨达成郭俊孙智磊方熙鹏杨景许曦丹张智杰林少臻彭婉航
申请(专利权)人:华南农业大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1