基于视觉测量的消防机器人上水带接头对接方法及系统技术方案

本发明专利技术提出了基于视觉测量的消防机器人上水带接头对接方法及系统，解决了现有技术中消防机器人不能够自动进行消防水带对接的问题；该方法包括取点进行拍照，并确定图像中像素距离与物理距离之间的关系；对水带公头进行拍照，获取图像，并对图像的分析获取水带公头位置；将水带公头位置发送到执行机构，通过执行机构将水带母头与水带公头进行对接；该系统包括承载机构，设置在使用地；执行机构，设置在使用地的墙体上；摄像装置，设置在使用地的墙体上；本发明专利技术提出的基于视觉测量的消防机器人上水带接头对接方法及系统在实现自动对接作业的同时，能够节约出警时间，且保证消防热源的安全。

Docking method and system of water hose joint of fire fighting robot based on vision measurement

【技术实现步骤摘要】
基于视觉测量的消防机器人上水带接头对接方法及系统
本专利技术涉及平面视觉测量领域，特别是指基于视觉测量的消防机器人上水带接头对接方法及系统。
技术介绍
消防机器人作为先进消防装备，其应用可显著提高对恶性事故的消防处理能力，大大减少人员伤亡。现有技术中，消防机器人普遍采用人工遥控方式，尤其是需要人工方式对接消防水带到消防机器人，致使消防及时性受到约束。在出现火灾警情时，倘若能够通过视觉方式测量消防机器人水带接头，并将接头位姿发送给消防水带对接执行机构，由执行机构实现水带自动对接作业，则可有效节约出警灭火时间，同时保证消防人员的安全。
技术实现思路
本专利技术提出基于视觉测量的消防机器人上水带接头对接方法及系统，解决了现有技术中消防机器人不能够自动进行消防水带对接的问题。本专利技术的技术方案是这样实现的：一种基于视觉测量的消防机器人上水带接头对接方法，包括如下步骤：S1、取点进行拍照，并确定图像中像素距离与物理距离之间的关系；S2、对水带公头进行拍照，获取图像，并对图像的分析获取水带公头位置；S3、将水带公头位置发送到执行机构，通过执行机构将水带母头与水带公头进行对接。作为进一步的技术方案，S1步骤包括：S11、进行摄像装置的安装，并在摄像装置下方设置游标卡尺，任取两个刻度点的物理距离为amm；S12、对取点进行拍照，并对拍照后的图像进行处理，获取S11步骤游标卡尺上选取的两个刻度点之间的像素距离bpixel；S13、通过公式factor＝a/bmm/pixel，获得在摄像装置安装高度处，图像中1个像素点对应物理距离的值。作为进一步的技术方案，S2步骤包括：将带有水带公头的设备置于摄像装置的视野范围内；当出现火灾警情时，通过摄像装置对水带公头进行拍照，获取图像，并对图像的分析获取水带公头位置。作为进一步的技术方案，S2步骤包括：S21、将带有水带公头的设备置于摄像装置的视野范围内，并获取水带公头在物理坐标系中的特征点的位置；当出现火灾警情时，通过摄像装置对水带公头进行拍照，获取图像；S22、将获取的图像进行图像分析，获取水带公头的位置。作为进一步的技术方案，S22步骤包括：将获取的图像进行图像分析，获取水带公头在图像坐标系中的位置；并根据图像像素与物理尺寸的关系，将水带公头在图像坐标系中的位置换算得到水带公头在物理坐标系的位置。作为进一步的技术方案，S22步骤包括：利用深度学习的目标检测方法将获取水带公头在的图像中的区域；与该区域内利用图像处理的边缘提取方法获取水带公头在图像坐标系中特征点的坐标点及偏航角度；并通过图像像素与物理标尺的关系将水带公头在图像坐标系中的特征点坐标和偏航角度转换为在物理坐标系中的坐标点和偏航角度，进而获取水带公头的位置。本专利技术还公开了一种基于视觉测量的消防机器人上水带接头对接系统，包括：用于进行水带公头承载，并进行位置移动的承载机构，设置在使用地；用于进行水带母头的夹持，并将夹持的水带母头与置于承载机构上的水带公头进行对接的执行机构，设置在使用地的墙体上；用于获取承载机构上水带公头图像的摄像装置，设置在使用地的墙体上。作为进一步的技术方案，承载机构为消防机器人。作为进一步的技术方案，执行机构包括：转动盘，设置在使用地墙体上；控制装置，与所述转动盘连接；并联手臂，设置在所述转动盘上，并与所述控制装置连接。作为进一步的技术方案，还包括：用于进行补光的LED光带，设置在摄像装置上。本专利技术技术方案通过摄像装置获取水带公头图像，对图像进行分析后得出水带公头的图像位置，通过图像坐标与物理坐标的换算关系，得到水带公头在物理坐标系下的位置，由于水带母头处于固定位置，因此，在获取水带公头的具体位置后，通过执行机构夹持水带母头与水带公头进行对接，这样，能够在发生火灾警情时自动的进行水带公头与水带母头的对接，无需在通过人工的方式完成，进而在实现自动对接作业的同时，能够节约出警时间，且保证消防热源的安全。附图说明为了更清楚地说明本专利技术实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本专利技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。图1为本专利技术基于视觉测量的消防机器人上水带接头对接系统的示意图；图2为水带公头置于物理坐标系的示意图；图3为水带公头置于图像坐标系中的示意图。图中：1、承载机构；2、执行机构；3、摄像装置；4、墙体；5、水带公头；6、水带母头。具体实施方式下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。如图1-3所示，本专利技术提出的一种基于视觉测量的消防机器人上水带接头对接方法，包括如下步骤：取点进行拍照，并确定图像中像素距离与物理距离之间的关系；其中，在本专利技术中，需要通过三步进行实现，首先进行摄像装置的安装，并在摄像装置下方设置游标卡尺，任取两个刻度点的物理距离为amm；其次，对取点进行拍照，并对拍照后的图像进行处理，获取S11步骤游标卡尺上选取的两个刻度点之间的像素距离bpixel；最后，通过公式factor＝a/bmm/pixel，获得在摄像装置安装高度处，所拍摄图像中1个像素点对应物理距离的值；当然，为提高数据的准确性，可以多次进行测试，并针对测试结果取平均值作为标定系数；对水带公头进行拍照，获取图像，并对图像的分析获取水带公头位置；具体的，将带有水带公头的设备置于摄像装置的视野范围内；当出现火灾警情时，通过摄像装置对水带公头进行拍照，获取图像，并对图像的分析获取水带公头位置；而在此过程中，可能伴随有环境光线较弱的情况，可以通过补光装置来增加拍摄环境的亮度，优选使用LED光带按照在摄像装置上，进行补光；其中，可以通过两步进行操作，首先，将带有水带公头的设备置于摄像装置的视野范围内；当出现火灾警情时，通过摄像装置对水带公头进行拍照，获取图像；而在实际拍摄的过程中，会伴随有复杂背景，这样会对图像造成干扰；因此，为提高水带公头位置测量的准确性，优选采用基于深度学习的目标检测技术，准备训练数据集时在不同光照条件、不同方位和不同拍摄距离下拍摄1000张图像，利用开源的目标检测算法，训练得到水带公头的检测模型；此种方式可提高水带公头图像检测算法的鲁棒性，消除图像中背景的干扰；其次，利用训练得到的水带公头目标检测模型，对拍摄的水带公头执行算法推理，得到水带公头在图像中所处的矩形区域，在该区域内进一步采用传统图像处理的边缘提取算法，本文档来自技高网...

【技术保护点】
1.一种基于视觉测量的消防机器人上水带接头对接方法，其特征在于，包括如下步骤：/nS1、取点进行拍照，并确定图像中像素距离与物理距离之间的关系；/nS2、对水带公头进行拍照，获取图像，并对图像的分析获取水带公头位置；/nS3、将水带公头位置发送到执行机构，通过执行机构将水带母头与水带公头进行对接。/n

【技术特征摘要】
1.一种基于视觉测量的消防机器人上水带接头对接方法，其特征在于，包括如下步骤：
S1、取点进行拍照，并确定图像中像素距离与物理距离之间的关系；
S2、对水带公头进行拍照，获取图像，并对图像的分析获取水带公头位置；
S3、将水带公头位置发送到执行机构，通过执行机构将水带母头与水带公头进行对接。


2.如权利要求1所述的基于视觉测量的消防机器人上水带接头对接方法，其特征在于，所述S1步骤包括：
S11、进行摄像装置的安装，并在摄像装置下方设置游标卡尺，任取两个刻度点的物理距离为amm；
S12、对取点进行拍照，并对拍照后的图像进行处理，获取S11步骤游标卡尺上选取的两个刻度点之间的像素距离bpixel；
S13、通过公式factor＝a/bmm/pixel，获得在摄像装置安装高度处，图像中1个像素点对应物理距离的值。


3.如权利要求1所述的基于视觉测量的消防机器人上水带接头对接方法，其特征在于，所述S2步骤包括：
S21、将带有水带公头的设备置于摄像装置的视野范围内；当出现火灾警情时，通过摄像装置对水带公头进行拍照，获取图像；
S22、将获取的图像进行图像分析，获取水带公头的位置。


4.如权利要求3所述的基于视觉测量的消防机器人上水带接头对接方法，其特征在于，所述S22步骤包括：
将获取的图像进行图像分析，获取水带公头在图像坐标系中的位置；并根据图像像素与物理尺寸的关系，将水带公头在图像坐标系中的位置换算得到水带公头在物理坐标系的位置。

【专利技术属性】
技术研发人员：李胜，母春阁，李鹏，
申请(专利权)人：北京新松融通机器人科技有限公司，
类型：发明
国别省市：北京;11