基于无人机的双目视觉三维测绘系统和方法技术方案

本发明专利技术涉及一种基于无人机的双目视觉三维测绘系统和方法。该系统以无人机作为载体，利用双目测量装置作为三维测绘的基本单元，通过地面控制无人机在被测物上方飞行，以获得完全覆盖被测物的左右视频图像序列。该方法首先通过对左右视频图像进行特征点提取和特征匹配，并结合左右摄像机参数完成局部三维点云重建；然后，对左摄像机相邻图像进行特征匹配，以确定局部三维点云的对应点，并估计两个三维点云之间坐标变换；最后，将局部三维点云的坐标统一化完成三维测绘。本发明专利技术用双目测量替代传统的激光雷达，用软件算法估算无人机的位姿，具有成本低、适用范围广、操控简单的优点。

【技术实现步骤摘要】

本专利技术涉及一种基于无人机的双目视觉三维测绘系统和方法，本专利技术所属
为测绘遥感及视觉测量
，尤其适用于对道路、楼宇等大型工程基建的三维信息提取。
技术介绍
随着我国经济的飞速发展，公路、铁路、房地产等基础建设规模很大，需要对工程施工开挖的土石方或填埋的土石方进行测绘计算。传统的基于地面人工测绘的方法，测量效率和测量精度受到很大限制。如何利用现代高技术，快速高效、高精度地确定这些基础工程的施工量，对于提高工程的进度、缩短施工周期和降低成本有非常重要的意义。本专利技术“基于无人机的双目视觉三维测绘系统和方法”，是将双目视觉立体测量系统放置在无人机平台上，通过无人机飞行，实现对道路等基础工程等快速立体测绘。该方案也可以用于渣土或者煤渣堆积的监测和管理，以及快速评估某些突发事件的破坏量。由于无人机具有飞行灵活、价格低廉、续航时间长、控制范围大、可重复使用和有效载荷大等优点，采用无人机挂载摄像机代替人工对大型施工场地、渣土或者煤渣或者进行巡查成为新的监管手段。但是传统的航空摄影测绘只能得到二维数字图片，针对这一问题，2015年专利公布号为CN104386249A的中国专利技术专利“一种快速测绘多旋翼无人机及其测绘方法”采用IMU姿态测量单元和调整支架让摄像机光轴始终保持与地面垂直，然后以比例换算的方法得到测绘数据。其缺陷在于系统中包含全球定位系统GPS单元、IMU单元、控制电机和调整云台机构，这些机构的引入在加大无人机的载重和电力供应同时，增加了使用成本。最为重要的是该专利技术无法提供高度方向的测绘信息，因此，该专利技术只能用于二维测绘。目前，对于机载三维测绘的应用主要采用挂载3D激光雷达扫描得到局部三维点云，然后结合GPS和惯性导航系统(INS)得到的无人机位姿，完成被测物整体的三维测绘功能。这种三维测绘方法的缺点为：(1)3D激光雷达价格昂贵、重量大，对无人机的载重要求高，不能应用在目前广泛使用的小型无人机上。(2)需要辅助的无人机位姿测量设备(GPS和INS)完成最终的测量三维坐标统一化，因此位姿测量精度直接影响最终的三维测绘精度。(3)这种方法得到的扫描三维点云与无人机的飞行路径和姿态密切相关，为得到均匀致密的三维测绘点需要对飞行器的飞行路径进行精确控制。经检索，中国专利公布号为CN102313536A，申请公布日为2012年1月11日，专利技术名称为：基于机载双目视觉的障碍物感知方法，将双目视觉挂载在无人机上，其专利技术目的是通过双目视觉的三维重建功能，对飞行器所处环境进行三维感知和自主避障导航，并不具备三维测绘功能。
技术实现思路
为了解决现有无人机三维测绘系统中存在的经济成本高、需要高精度辅助位姿测量设备、不能适用于小型无人机及飞行位姿控制复杂等技术问题，提出了基于无人机的双目视觉三维测绘系统和方法。本专利技术解决技术问题所采用的技术方案如下：一种基于无人机的双目视觉三维测绘系统，包括无人机、双目测量装置、地面控制中心。所述的无人机包括供电电池组、机载控制单元和WIFI或无线电传模块。供电电池组为无人机上的电子通信和图像采集设备提供必要的电力保障；机载控制单元接收WIFI或无线电传模块从地面控制中心得到的指令；WIFI或无线电传模块除了接收地面控制指令外，还主动向地面控制中心发送拍摄图像。所述的双目测量装置包括左右摄像机、双目支撑机构、存储SD卡、固定连接机构。左右摄像机采集无人机飞行过程中的航拍视频图像，右摄像机的视频图像直接存储到对应的SD卡中，左摄像机的视频图像除了存储在SD卡中，还分出一路给WIFI或无线电传模块，传输实时采集图片地面控制中心；双目支撑结构保证两个摄像机在飞行过程中，相对位置和姿态保持恒定，与左右摄像机一起组成双目三维传感器；固定连接机构用于将双目三维传感器固定在无人机上。所述的地面控制中心与前述WIFI或无线电传模块通信，用于控制无人机的飞行高度和飞行轨迹，同时具备控制左右摄像机的存储开始和停止功能。更进一步地，所述的左右摄像机为相同型号的摄像机具有相同的焦距和分辨率，并且采集图像时同步曝光。更进一步地，所述的双目三维传感器为平行配置的双目结构，挂载在无人机的底部。更进一步地，所述的双目固定机构和固定连接机构都采用碳纤维材料以减轻整体重量。本专利技术的基于无人机的双目视觉三维测绘方法，包含以下步骤：步骤1：根据小孔成像模型，确定双目三维传感器的内参数即摄像机焦距.f和外部结构参数即左右摄像机的基线距离B。步骤2：观察实时传回的左摄像机图像，控制无人机到适当高度，在被测量的大型渣土或者煤渣上空飞行，以获得完全覆盖被测物的左右视频图像序列。步骤3：将SD卡中的左右摄像机视频导入到电脑中，按时间顺序对视频图像帧进行编号，形成双目左右图像序列对。步骤4：对每一组左右图像对，先提取特征点，然后匹配特征点，最后以左摄像机为坐标系重建特征点的局部三维坐标。步骤5：结合左相机序列图像，匹配两个连续序列组的三维点云，解算两个局部坐标系之间的变换关系。步骤6：将所有的局部三维坐标转化到一个坐标系下，完成局部三维坐标的统一化，得到三维测绘结果。与现有三维测绘技术相比，本专利技术至少具有如下优点：(1)本专利技术采用双目视觉作为三维测绘传感器，其结构简单、成本低廉、重量轻，可以挂载在小型无人机上，具有广阔的应用前景。(2)本专利技术采用软件方法估计得到局部坐标系之间的变换关系，无需辅助的无人机位姿测量硬件设备，这是用于无人机测绘中三维局部点云统一化的一项原理创新。(3)本专利技术只需拍摄视频图像覆盖被测量区域即可，对无人机的飞行路线无特殊要求，具有操作简单，使用方便的优势。附图说明图1为本专利技术的一种基于无人机的双目视觉三维测绘系统示意图；图2为本专利技术实施例的一种典型测绘飞行路线；图3为本专利技术实施例的基于无人机的双目视觉三维测绘方法流程图。图4为本专利技术的平行双目三维传感器原理图；附图标记表示为：1-无人机；2-电池组；3-机载控制单元；4-WIFI或无线电传模块；5-固定连接机构；6-带SD卡存储的左摄像机；7-带SD卡存储的右摄像机；8-双目支撑机构；9.被测渣土或煤渣。具体实施方式本专利技术的三维测绘方法是一种以双目立体视觉重建为基础并结合软件算法估算无人机位姿连续变化的方法，下面结合附图详细说明本专利技术的系统组成结构和三维测绘实施过程。附图1为一种基于无人机的双目视觉三维测绘系统组成原理图，系统包括：无人机，电池组，机载控制单元，WIFI或无线电传模块，固定连接机构，带SD卡的左右摄像机和双目支撑机构，左右摄像机和双目支撑机构组成双目三维传感器，固定连接机构将双目三维传感器固定在无人机的底部。系统工作时，电池组为无人机上的电子设备提供动力源，地面控制中心与无人机上的WIFI或无线电传模块连接，接收其传回的左摄像机实时图像，并向无人机发送控制指令，机载控制单元控制无人机的飞行高度和方向，同时具备控制左右摄像机的存储开始和停止功能。针对某一次具体测绘任务，操控人员在地面控制中心，首先，控制无人机到达被测物上方约3-5m并启动视频图像的存储功能；其次，控制无人机以如附图2所示的飞行路径在被测物上方飞行，当飞行路径完全覆盖被测物后，停止视频图像存储；最后，控制无人机返回控制中心，处理SD卡中的视频图像得到三维测绘结果。如附图3所示本文档来自技高网...

【技术保护点】
一种基于无人机的双目视觉三维测绘系统，包括：无人机、双目测量装置、地面控制中心，其特征在于：无人机(1)包括供电电池组(2)、机载控制单元(3)和WIFI或无线电传模块(4)。供电电池组(2)为无人机(1)上的电子通信和图像采集设备提供必要的电力保障；机载控制单元(3)接收WIFI或无线电传模块(4)从地面控制中心得到的指令；WIFI或无线电传模块(4)除了接收地面控制指令外，还主动向地面控制中心发送拍摄图像；双目测量装置包括带SD卡存储的左摄像机(6)、带SD卡存储的右摄像机(7)、双目支撑机构(8)、固定连接机构(5)。左右摄像机采集无人机飞行过程中的航拍视频图像，右摄像机的视频图像直接存储到对应的SD卡中，左摄像机的视频图像除了存储在SD卡中，还分出一路给WIFI或无线电传模块，传输实时采集图片地面控制中心；双目支撑结构保证两个摄像机在飞行过程中，相对位置和姿态保持恒定，与左右摄像机一起组成双目三维传感器；固定连接机构(5)用于将双目三维传感器固定在无人机上。

【技术特征摘要】
1.一种基于无人机的双目视觉三维测绘系统，包括：无人机、双目测量装置、地面控制中心，其特征在于：无人机(1)包括供电电池组(2)、机载控制单元(3)和WIFI或无线电传模块(4)。供电电池组(2)为无人机(1)上的电子通信和图像采集设备提供必要的电力保障；机载控制单元(3)接收WIFI或无线电传模块(4)从地面控制中心得到的指令；WIFI或无线电传模块(4)除了接收地面控制指令外，还主动向地面控制中心发送拍摄图像；双目测量装置包括带SD卡存储的左摄像机(6)、带SD卡存储的右摄像机(7)、双目支撑机构(8)、固定连接机构(5)。左右摄像机采集无人机飞行过程中的航拍视频图像，右摄像机的视频图像直接存储到对应的SD卡中，左摄像机的视频图像除了存储在SD卡中，还分出一路给WIFI或无线电传模块，传输实时采集图片地面控制中心；双目支撑结构保证两个摄像机在飞行过程中，相对位置和姿态保持恒定，与左右摄像机一起组成双目三维传感器；固定连接机构(5)用于将双目三维传感器固定在无人机上。2.根据权利要求1所述的三维测绘系统，其特征在于：所述的地面控制中心与WIFI或无线电传模块通信(4)，用于控制无人机的飞行高度和飞行轨迹，同时具备控制左右摄像机的存储开始和停止功能。3.根据权利要求1所述的三维测绘系统，其特征在于：所述的左摄像机(6)和右摄像机(7)为相同型号的摄像机具有相同的焦距和分辨率，并且采集图像时同步曝光。4.根据权利要求1所述的三维测绘系统，其特征在于：所述的双目三维传感器为平行配置的双目结构，挂载在无人机的底部。5.根据权利要求1所述的三维测绘系统，所述的双目固定机构和固定连接机构都采用碳纤维材料以减轻整体重量。6.一种基于无人机的双目视觉三维测绘方法，其特征在于，包含以下步骤：步骤1：根据小孔成像模型，确定双目三维传感器的内参数即摄像机焦距f和外部结构参数...

【专利技术属性】
技术研发人员：王建立，吕耀文，
申请(专利权)人：王建立，
类型：发明
国别省市：吉林;22