一种视触觉感知的采摘末端抓手以及果实大小和姿态解析方法技术

本发明专利技术涉及果实采摘领域，目的是提供一种视触觉感知的采摘末端抓手以及果实大小和姿态解析方法，以实现柔性抓取并准确判断果实的大小和姿态。技术方案是一种视触觉感知的采摘末端抓手，包括设有三条手指的底座；其特征在于：所述手指包括通过弹性件连接的前指节与后指节，后指节通过转轴可转动地定位在底座上，转轴上设有带动手指张开的扭簧，底座上还设有带动三条手指同时合拢的驱动机构；所述前指节与后指节上设有视触觉传感器；所述视触觉传感器与驱动机构同时电连接控制器。器与驱动机构同时电连接控制器。器与驱动机构同时电连接控制器。

【技术实现步骤摘要】
一种视触觉感知的采摘末端抓手以及果实大小和姿态解析方法


[0001]本专利技术涉及果实采摘领域，具体是一种视触觉感知的采摘末端抓手以及果实大小和姿态解析方法。

技术介绍

[0002]在果实种植生产过程中，每年需要大量的劳动力进行采摘作业。然而，随着城乡人口转型和老龄化问题加剧，使得相关劳动人口进一步减少，劳动力成本进一步上升。而开发采摘机器人是解决上述问题的可行方向之一。
[0003]采摘末端抓手作为采摘机器人核心基础部件已得到了广泛应用，但在实际使用过程中还存在一些不足之处，比如，目前的采摘末端抓手大都不具备柔性抓取能力，因此容易造成果实损伤，并且采摘时主要依靠视觉识别来获取果实信息，但视觉识别容易受到自然光照变化和枝叶遮挡的影响，造成信息缺失和不准确，在判断果实大小和姿态时误差较大，影响后续作业。

技术实现思路

[0004]本专利技术的目的是克服上述
技术介绍
中的不足，提供一种视触觉感知的采摘末端抓手以及果实大小和姿态解析方法，以实现柔性抓取并准确判断果实的大小和姿态。
[0005]本专利技术的技术方案是：
[0006]一种视触觉感知的采摘末端抓手，包括设有三条手指的底座；其特征在于：所述手指包括通过弹性件连接的前指节与后指节，后指节通过转轴可转动地定位在底座上，转轴上设有带动手指张开的扭簧，底座上还设有带动三条手指同时合拢的驱动机构；所述前指节与后指节上设有视触觉传感器；所述视触觉传感器与驱动机构同时电连接控制器。
[0007]所述视触觉传感器包括框架、设置在框架前部的弹性体、设置在框架中用于支撑弹性体的透明板、设置在框架后部的相机、照射弹性体的LED灯。
[0008]所述视触觉传感器的弹性体位于前指节与后指节的指腹；所述弹性体包括依次布置的透明弹性体、矩形阵列的标记点、不透明弹性体。
[0009]所述驱动机构包括电推杆以及分别连接电推杆的伸缩杆与各手指的三条传动绳。
[0010]所述后座包括支架以及固定在支架端部的支板；所述电推杆设置在支架内部，三条传动绳的一端连接电推杆的伸缩杆并且另一端穿过支板的中心孔后分别连接各手指。
[0011]所述传动绳伸出支板的中心孔后，先从前往后延伸到后手指的后部，然后绕过视触觉传感器并从后往前延伸到后手指的前部，再穿过后手指与前指节的间隙并与前手指固定。
[0012]所述弹性件为硅胶制成；所述弹性体的透明弹性体与不透明弹性体为硅胶制成。
[0013]一种果实大小和姿态解析方法，用于视触觉感知的采摘末端抓手，包括以下步骤：
[0014]步骤1：采摘末端抓手抓取目标果实，弹性体与目标果实接触发生形变，相机拍摄
弹性体内嵌标记点变形的图像后，进行相机标定，得到标记点的切向位移，再基于DFD方法得到标记点的法向位移，最后得到各视触觉传感器坐标系下标记点的三维坐标点云；
[0015]步骤2：通过采用D
‑
H矩阵法，将所有视触觉传感器坐标系下标记点的三维坐标点云变换到同一坐标系下，得到目标果实局部外轮廓的三维坐标点云；
[0016]步骤3：通过PCA算法将目标果实局部外轮廓的三维坐标点云与果实外轮廓模板点云进行粗配准，再通过ICP算法将目标果实局部外轮廓的三维坐标点云与果实外轮廓模板点云进行精配准，得到目标果实的大小和姿态信息。
[0017]所述果实外轮廓模板点云的获取方法为：
[0018]通过激光扫描仪对同一品种不同大小和形状的果实进行扫描，采集果实外轮廓点云集，通过点云叠加可以得到番茄果实外轮廓点云带，以点云带中心为原点建立三维坐标系，将番茄果实外轮廓点云带的X、Y、Z坐标进行缩放，得到不同大小和形状的番茄外轮廓模型作为果实外轮廓模板点云。
[0019]本专利技术的有益效果是：
[0020]本专利技术通过视触觉传感器的弹性体实现对果实柔性接触和柔性抓取，通过视触觉信息感知克服传统纯视觉信息感知存在的不足，从而减少与果实接触时的损伤，提高采摘质量；本专利技术的手指指节之间采用弹体件连接，确保抓取时各指节对果实外轮廓更好地自适应性包裹，避免因抓取力过大而损伤果实，实现柔性抓取；本专利技术可以克服视觉感知受限于自然光照变化、茎叶遮挡、果实重叠簇生等影响因素，更加准确地检测果实姿态和大小。
附图说明
[0021]图1是本专利技术的采摘末端抓手的立体结构示意图。
[0022]图2是本专利技术的采摘末端抓手的剖面结构示意图。
[0023]图3是本专利技术的手指的放大结构示意图。
[0024]图4是本专利技术的视触觉传感器的放大结构示意图。
[0025]图5是本专利技术的弹性体的爆炸图。
[0026]图6是本专利技术方法的流程图。
[0027]附图标记：
[0028]前指节1、上绳孔1.1、上插口1.9、后指节2、转轴2.1、下绳孔2.2、中绳孔2.3、下插口2.9、弹性件3、凸台3.1、扭簧4、视触觉传感器5、框架6、弹性体7、透明弹性体7.1、标记点7.2、不透明弹性体7.3、透明板8、相机9、LED灯10、电推杆11、传动绳12、支架13、支板14、中心孔14.1。
具体实施方式
[0029]为了使本专利技术的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本专利技术进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用于解释本专利技术，并不用于限定本专利技术。
[0030]如图1所示，一种视触觉感知的采摘末端抓手，包括底座、三条手指、驱动机构、视触觉传感器、控制器。
[0031]所述三条手指可活动地设置在底座上并可自动张开，驱动机构用于带动三条手指
同时合拢，视触觉传感器设置在手指上用于接触果实，控制器电连接视触觉传感器与驱动机构。
[0032]所述后座包括支架13与支板14，支板固定在支架的前端(图2中支架的上端)，支板的中间设有中心孔14.1，三条手指均匀布置在中心孔的周围。
[0033]所述手指包括前指节1、后指节2、弹性件3、扭簧4。所述后指节的下端设有转轴2.1，后指节通过转轴可转动地定位在支板上，扭簧装套在转轴上用于带动后指节转动以使手指张开。所述前指节与后指节通过弹性件连接，弹性件的两端设有凸台3.1，前指节与后指节的端部设有与凸台插接配合的卡槽，凸台嵌入对应的卡槽中使得弹性件连接前指节与后指节。所述弹性件为硅胶制成。
[0034]所述视触觉传感器设置在前指节与后指节上。所述前指节上设有用于安装视触觉传感器的上插口1.9，后指节上设有用于安装视触觉传感器的下插口2.9。
[0035]所述视触觉传感器包括框架6、弹性体7、透明板8、相机9、LED灯10。所述框架固定在上插口或下插口中，弹性体设置在框架前部(图4的上端)，透明板设置在框架中用于支撑弹性体，相机设置在框架后部(图4的下端)用于拍摄弹性体，LED灯设置在相机的两侧用于照射弹性体。
[0036]所述弹性体设置在手指的前部(朝向果实的一面)从而作为前指节与后指节的指腹部位，并且弹性体凸本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种视触觉感知的采摘末端抓手，包括设有三条手指的底座；其特征在于：所述手指包括通过弹性件(3)连接的前指节(1)与后指节(2)，后指节通过转轴可转动地定位在底座上，转轴上设有带动手指张开的扭簧(4)，底座上还设有带动三条手指同时合拢的驱动机构；所述前指节与后指节上设有视触觉传感器(5)；所述视触觉传感器与驱动机构同时电连接控制器。2.根据权利要求1所述的视触觉感知的采摘末端抓手，其特征在于：所述视触觉传感器包括框架(6)、设置在框架前部的弹性体(7)、设置在框架中用于支撑弹性体的透明板(8)、设置在框架后部的相机(9)、照射弹性体的LED灯(10)。3.根据权利要求2所述的视触觉感知的采摘末端抓手，其特征在于：所述视触觉传感器的弹性体位于前指节与后指节的指腹；所述弹性体包括依次布置的透明弹性体(7.1)、矩形阵列的标记点(7.2)、不透明弹性体(7.3)。4.根据权利要求3所述的视触觉感知的采摘末端抓手，其特征在于：所述驱动机构包括电推杆(11)以及分别连接电推杆的伸缩杆与各手指的三条传动绳(12)。5.根据权利要求4所述的视触觉感知的采摘末端抓手，其特征在于：所述后座包括支架(13)以及固定在支架端部的支板(14)；所述电推杆设置在支架内部，三条传动绳的一端连接电推杆的伸缩杆并且另一端穿过支板的中心孔后分别连接各手指。6.根据权利要求5所述的视触觉感知的采摘末端抓手，其特征在于：所述传动绳伸出支板的中心孔后，先从前往后延伸到后手指的后部，然后...

【专利技术属性】
技术研发人员：谭励，马锃宏，曾伟，杜小强，贺磊盈，
申请(专利权)人：浙江理工大学，
类型：发明
国别省市：