一种基于双目视觉的快递包裹抓取装置制造方法及图纸

本实用新型专利技术公开了一种基于双目视觉的快递包裹抓取装置，快递包裹抓取装置包括一个支架，装置支架的顶端安装有双目摄像机，在双目摄像机的下方设置有笼车，笼车的一侧设置有六轴机械臂，六轴机械臂上安装有机械抓手。本实用新型专利技术的有益技术效果是：操作对象为快递包裹，形状基本近似于长方体，装置的主要功能包括图像中的关键点识别、包裹轮廓识别、抓取机器人末端抓取位姿计算、抓取轨迹控制等，实现了功能一体化，节省工作空间，保证操作精度，提升工作的智能化水平，后续可与更大范围的快递分拣系统集成应用。

An express package grabbing device based on binocular vision

【技术实现步骤摘要】
一种基于双目视觉的快递包裹抓取装置
本技术涉及一种快递包裹抓取装置，尤其涉及一种基于双目视觉的快递包裹抓取装置。
技术介绍
抓取动作是工业机器人应用中的一个常见任务。传统定位方法必须经过精确的人工定位后，按照“示教式”程序一步一步实现标准位姿工件的抓取和放置，但很多情况下工件位姿无法预知，没有规律可循。这就对机器人物体识别的智能化程度提出了需求。基于视觉识别的机器人模仿人的视觉，可以实现对目标物体的识别，获得场景深度信息，近年来得到了很快的发展。机械臂的视觉识别指的是用摄像机模拟人眼来控制机械臂的动作。随着机器人人工智能化的程度的提升和图像处理的高速发展，计算机图像处理技术与工业机器人技术的交互利用日益频繁且技术日趋成熟[1]。法国AldebaranRobotics公司研制出的机器人NAO配有多种传感器，可通过边缘检测以及颜色分割完成对目标的识别[2]。BurgetF等人通过图像处理技术来获得目标物体的三维信息，然后制定相应的抓取姿态对目标物体进行抓取[3]。日本本田公司研制的仿生机器人基于视觉识别与定位技术，成功完成端茶倒水的任务[4]。另外，日本Fanuc公司、瑞士的ABB公司和德国KUKA公司都推出了“拣选”系统[5]。日本的Murakami利用CCD相机传感技术，研制出机器人跟踪控制系统[6]。澳大利亚Western大学用CCD相机配合六自由度机器人开发出三维码垛机器人实现三维空间的码垛，瑞士SIG利用代视觉识别的并联机器人，应用与流水输送线上的搬运[7]。上海大学何永义教授的团队研发的家具服务轮式机器人，通过三目摄像头，实现对物体的识别抓取等功能[8]；华中科技大学提出基于视觉引导和超声被测距的手眼机器人系统实现了对运动目标的跟踪和抓取[9]。[1]焦恩章，杜荣工业机器人分拣技术的实现【J】组合机床与自动化加工技术。2010[2]MullerJ，FreseU，RoferT.Grabamug-ObjectdetectionandgraspmotionplanningwiththeNaorobot[C]//Ieee-RasInternationalConferenceonHumanoidRobots.IEEE，2012：349-356.[3]DalibardS，bastien，ElKhouryA，etal.DynamicWalkingandWhole-BodyMotionPlanningforHumanoidRobots：anIntegratedApproach[J].InternationalJournalofRoboticsResearch，2013，32(9-10)：1089-1103.[4]GiengerM，ToussaintM，GoerickC.Whole-bodyMotionPlanning-BuildingBlocksforIntelligentSystems[M]//MotionPlanningforHumanoidRobots.SpringerLondon，2010：67-98.[5]权欢欢，张洛平.装配线零件图像识别与系统实现.[D].洛阳：河南科技大学，2008[6]chaumetteF，malisE.2D1/2visualservoing：Apossiblesolutiontoimage-basedandposition-basedandposition-basedvisualservoings[C].IEEEInternationalConferenceonRoboticsandAutomation，SanFrancisco，2000：630-635[7]GoshtasbyA，GageSH，BartholicJF，Atwo-stagecrosscorrelationapproachtotemplatematching[J]，PatternAnalysisandMachineIntelligence，IEEETransactionon，1984(3)：374-384[8]刘鹏玉.服务机器人手眼协调仿生控制研究[D].上海大学，2012.[9]王敏.基于视觉与超声技术机器人自动识别抓取系统[J].华中科技大学学报(自然科学版)，2001，29(1)：73-75。
技术实现思路
本技术的目的在于提供一种基于双目视觉的快递包裹抓取装置和抓取方法，解决现有技术存在的缺憾。本技术采用如下技术方案实现：一种基于双目视觉的快递包裹抓取方法，其特征在于，该方法包括如下步骤：1)建立坐标系：对双目摄像机进行标定，建立相机坐标系、世界坐标系和机械臂坐标系，并明确各坐标系之间的关系，完成双目摄像机内外参数的标定；2)图像预处理：对图像进行包括二值化、轮廓提取的操作预处理；3)角点检测：采用harris算子对图像进行角点检测，完成特征点提取；4)轮廓提取：采用链码方法以检测到角点为起点寻找一个封闭的四边形，并得到封闭四边形四个角的平面坐标，完成轮廓提取，封闭四边形是某个包裹的一个完整表面，按照常规属于最容易抓取的表面。5)确定机器人抓取位姿：根据双目摄像机的内外参数，将提取的平面轮廓转化为空间位置和姿态数据，作为机器人抓取的目标。一种基于双目视觉的快递包裹抓取装置，该装置具有一个支架，所述支架的顶端安装有双目摄像机，在所述双目摄像机的下方设置有笼车，在所述笼车的一侧设置有六轴机械臂，所述六轴机械臂上安装有机械抓手。本技术的有益技术效果是：操作对象为快递包裹，形状基本近似于长方体，装置的主要功能包括图像中的关键点识别、包裹轮廓识别、抓取机器人末端抓取位姿计算、抓取轨迹控制等，实现了功能一体化，节省工作空间，保证操作精度，提升工作的智能化水平，后续可与更大范围的快递分拣系统集成应用。附图说明图1是本技术的总体流程图。图2是抓取装置的结构示意图。图3是角点识别结果。图4是轮廓提取结果。图5是目标识别结果。具体实施方式通过下面对实施例的描述，将更加有助于公众理解本技术，但不能也不应当将申请人所给出的具体的实施例视为对本技术技术方案的限制，任何对部件或技术特征的定义进行改变和/或对整体结构作形式的而非实质的变换都应视为本技术的技术方案所限定的保护范围。一种基于双目视觉的快递包裹抓取方法，该方法包括如下步骤：1)建立坐标系：对双目摄像机进行标定，建立相机坐标系、世界坐标系和机械臂坐标系，并明确各坐标系之间的关系，完成双目摄像机内外参数的标定；2)图像预处理：对图像进行包括二值化、轮廓提取的操作预处理；3)角点检测：采用harris算子对图像进行角点检测，完成特征点提取；4)轮廓提取：采用链码方法以检测到角点为起点寻找一个封闭的四边形，并得到封闭四边形四个角的平面坐标，完成轮廓提取，封闭四边形是某个包裹的一个完整表面，按照常规属于最容易抓取的表面。5)确定机器人抓取位姿：根据双目摄像机的内外参数，将提取的平面轮廓转化为空间位置和姿态数据，作为机器人抓取的目标。在图5中，虚线框内的封闭四边形即为目标的识别结果。机器人抓取位姿计算：深度检测是基于视差原理的，通常在双目摄像机拍摄的两张图中存在着视觉差，我们通过视差以及摄像机成像原理就能得到该点的深度。目标包裹的二维平面本文档来自技高网...

【技术保护点】
一种基于双目视觉的快递包裹抓取装置，其特征在于，该装置具有一个支架，所述支架的顶端安装有双目摄像机，在所述双目摄像机的下方设置有笼车，在所述笼车的一侧设置有六轴机械臂，所述六轴机械臂上安装有机械抓手。

【技术特征摘要】
1.一种基于双目视觉的快递包裹抓取装置，其特征在于，该装置具有一个支架，所述支架的顶端安装有双目摄像机...

【专利技术属性】
技术研发人员：高振清，徐炜东，
申请(专利权)人：北京印刷学院，
类型：新型
国别省市：北京,11