【技术实现步骤摘要】
智能化农业果实采摘识别与定位方法、系统及装置
[0001]本专利技术涉及图像识别
，尤其涉及一种智能化农业果实采摘识别与定位方法、系统及装置。
技术介绍
[0002]现有技术中，由于种植规模的提升，以及人力成本的大幅提高，采用智能化设备实现农业果实智能采摘势在必行。其中基于计算机视觉的农业果实定位是实现智能采摘的关键步骤，精确的果实定位信息可以大幅度提高采摘成功率。研究表明果实定位主要包括果实识别及距离测量。即首先利用视觉检测方法识别出摄像头拍摄画幅中农业果实的像素坐标信息，其次利用测距方法测量出识别出的果实相对于摄像头的空间坐标信息。
[0003]这种方法被应用的很多，但是也会存在很多缺陷，比如：精确的果实识别是实现果实定位的关键一步，传统果实识别大多采用基于色差与形状信息的视觉检测方法进行识别，将果实从背景(树枝与树叶)中分离出来。但是传统方法依赖于各种阈值参数的设立才能取得较好的效果，由于自然环境中，摄像头普遍受光照的影响，不同顺光、逆光情况下需要配合不同的阈值参数；此外，农业果实还受到自身树叶的遮挡、与...
【技术保护点】
【技术特征摘要】
1.一种智能化农业果实采摘识别与定位方法，其特征在于，包括以下步骤：对获取到的原始RGB图像进行光照归一化处理，得到归一化图像，其中，原始RGB图像中至少包括一个待识别物体；将归一化图像输入预设目标检测模型中进行目标检测，得到每个待识别物体在RGB图像中目标检测框及每个待识别物体的置信度；将所有置信度按照从大到小进行排序，选择前N个置信度高对应的目标检测框；计算N个目标检测框的中心像素坐标；将所述中心像素坐标映射到原始深度图像中，得到原始深度图像中待识别物体相对于深度相机的坐标位置，其中，原始RGB图像和原始深度图像都通过深度相机获取。2.根据权利要求1所述的智能化农业果实采摘识别与定位方法，其特征在于，所述对获取到的原始RGB图像进行光照归一化处理，包括以下步骤：将原始RGB图像从RGB空间转换到YUV空间，得到YUV图像；在YUV图像中，对分量V进行限制对比度自适应直方图均衡处理得到处理后YUV图像；将处理后YUV图像转换到RGB空间。3.根据权利要求1所述的智能化农业果实采摘识别与定位方法，其特征在于，所述对分量V进行限制对比度自适应直方图均衡处理得到处理后YUV图像，包括以下步骤：将YUV图像根据预设图像分块尺寸及预设裁剪值进行分块处理，得到分块结果图像；对分块结果图像依次进行直方图计算、直方图修建及直方图均衡处理，得到多个图像块；对所有图像块进行图像插值处理，得到块处理结果；将块处理结果和原始RGB图像做图层滤色混合处理，得到处理后YUV图像。4.根据权利要求3所述的智能化农业果实采摘识别与定位方法，其特征在于，所述预设图像分块尺寸及预设裁剪值通过以下方式获得：取若干包含不同光照度下的原始RGB图像分别进行分块处理，得到最佳效果的每个原始RGB图像对应的初始图像分块尺寸与初始裁剪值，将初始图像分块尺寸与初始裁剪值作为首次分块处理的预设图像分块尺寸及预设裁剪值；分别对初始图像分块尺寸与初始裁剪值进行均值化处理，得到两者的均值作并对初始图像分块尺寸与初始裁剪值进行替换并作为后续分块处理的预设图像分块尺寸及预设裁剪值。5.根据权利要求1所述的智能化农业果实采摘识别与定位方法，其特征在于，所述预设目标检测模型获取的过程包括离线训练和在线推理，离线训练包括以下步骤：获取多种光照强度下含待识别物体的原始RGB图像数据库；对所有原始RGB图像中各个待识别物体进行目标检测框标注，得到原始数据集；对原始数据集进行光照归一化处理，得到含有目标检测框的归一化数据集，将归一化数据集作为网络输入，以目标检测框为网络输出，进行目标检测模型训练，得到目标检测模型；在线推理步骤包括以下步骤：对实时获取到的原始RGB图像进行光照归一化处理，得到实时归一化图像；将所述实时归一化图像输入训练好的目标检...
【专利技术属性】
技术研发人员：孔令瑜，蒲奕，王盛，
申请(专利权)人：苏州书农科技有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。