基于英伟达TX2处理器的无人机运动跟踪系统技术方案

一种基于英伟达TX2处理器的无人机运动跟踪系统，由F450四旋翼机架、飞行控制板、处理器载板、英伟达TX2处理器四部分组成，其中英伟达TX2处理器用于实现系统的运动目标检测与跟踪、无人机跟踪飞行等功能；处理器载板用于实现英伟达TX2处理器的数据接口扩展和面向系统的电源输出；飞行控制板用于实现四旋翼飞行器的电机控制和定位飞行；F450四旋翼机架作为系统的基础构架，用于负责执行英伟达TX2处理器和飞行控制板的控制命令，实现跟踪飞行。本发明专利技术集成度高，可以在小型化无人机上实现在线图像采集和运动跟踪飞行，提高了无人机在线视频图像处理系统的效率。

The UAV motion tracking system based on TX2 processor NVIDIA

A UAV motion tracking system based on TX2 processor NVIDIA, F450 four rotor frame, flight control board, processor board, NVIDIA TX2 processor is composed of four parts, including NVIDIA TX2 processor for realizing the system, the moving target detection and tracking of UAV Flight Tracking and other functions; processor board for data interface the NVIDIA TX2 processor expansion and system oriented power output; for motor control and positioning of the flight four rotor aircraft flight control board; F450 four rotor frame as the basic frame of the system, responsible for the implementation of control commands for NVIDIA TX2 processor and flight control board, flight tracking. The invention has high integration degree, and can realize online image acquisition and motion tracking flight on miniaturized UAV, and improves the efficiency of UAV online video and image processing system.

【技术实现步骤摘要】
基于英伟达TX2处理器的无人机运动跟踪系统
本专利技术涉及无人机、机器视觉、运动跟踪、自动控制等
，特别是涉及一种基于英伟达TX2处理器的无人机运动跟踪系统。
技术介绍
近年来，随着计算机技术，自动控制理论，嵌入式开发，芯片设计以及传感器技术的迅速发展，让UAV能够在更加小型化的同时，拥有更多的处理能力，无人机上的相关技术也受到越来越多的关注。小型无人机拥有操控灵活，续航能力强等优势，从而能够在狭小环境中处理复杂任务，在众多领域都有广泛的应用前景。但在目前，传统的无人机由于机载处理器计算性能的限制，需要离线进行数字图像处理，即使用无线发送模块讲无人机获取到的图像传到PC或其他高性能处理器中进行处理。然而，在有些对资源、功耗要求比较高的工程应用中，并没有加载这类设备的可行性。因此，急需一种搭载高清摄像头，并且能实时处理视频流的无人机平台，用于处理多种场景下的视觉信息。
技术实现思路
为了克服现有的无人机控制系统的集成度较低、实时性较弱、性能较弱的不足，本专利技术为无人机平台提供一种集成度高、实时性强、拥有GPU处理能力的高性能小型的基于英伟达TX2处理器的无人机视觉跟踪系统。本专利技术解决其技术问题所采用的技术方案是：一种基于英伟达TX2处理器的无人机运动跟踪系统，由F450四旋翼机架(1000)、飞行控制板(1100)、处理器载板(1200)、英伟达TX2处理器(1300)组成；其中英伟达TX2处理器(1300)用于实现系统的运动目标检测与跟踪、无人机跟踪飞行等功能；处理器载板(1200)用于实现英伟达TX2处理器(1300)的数据接口扩展和面向系统的电源输出；飞行控制板(1100)用于实现四旋翼飞行器的电机控制和定位飞行；F450四旋翼机架(1000)作为系统的基础构架，用于负责执行英伟达TX2处理器(1300)和飞行控制板(1100)的控制命令，实现跟踪飞行。进一步，所述F450四旋翼机架(1000)是系统的机械结构基础，1047二叶桨(1001)、直流无刷电机(1002)、飞行控制板(1100)、电机调速器(1101)、光流传感器(1102)、处理器载板(1200)、USB3.0摄像头(1201)、英伟达TX2处理器(1300)均设置在F450四旋翼机架(1000)上；其中，所述四旋翼机架采用轴距为450mm的四旋翼机架，材料为碳纤维和硬质塑料；1047二叶桨(1001)的直径为20.4cm，螺距为11.43cm，材质为塑料，本系统共含有四个二叶桨；所述直流无刷电机(1002)型号为X2212，该直流无刷电机在电压11.1v下的空载转速为10878转每分钟，本系统共含有四个直流无刷电机。再进一步，所述飞行控制板(1100)中，电机调速器(1101)直接和飞行控制板的电机输出口相连，光流传感器(1102)直接和飞行控制板的I2C接口相连，处理器载板(1200)扩展出来的串行接口直接与飞行控制板的串行接口相连；该飞行控制板的硬件接口包括一个PPM信号输入接口、一个安全开关接口、一个GPS信号输入接口、一个I2C信号输入接口、一个电源供电和监测接口、一个microUSB接口、3个串型通信接口、一个蜂鸣器接口、四个电机输出接口、六路云台控制接口、一个JTAG烧写接口、两个芯片电源指示灯、两个芯片烧写状态指示灯、一个系统活动心跳指示灯、一个系统状态主指示灯、一个microSD卡槽；该飞行控制板采用STM32F427作为主控芯片、STM32F100作为IO扩展芯片，电源管理单元采用LTC4417芯片，传感器单元采用L3GD20H陀螺芯片、LSM303D加速度/磁场芯片、MS5611气压芯片、MPU600陀螺/加速度芯片组成具有冗余保护的传感器单元；该飞行控制板运行NuttX实时操作系统，使用PX4开源飞控固件并且可以通过串口接收基于MAVLink协议的飞行控制命令。优选的，所述电机调速器(1101)用于实现系统中直流无刷电机(1002)的驱动，该模块接收飞行控制板(1100)输出的脉宽调制信号，通过硬件电路将脉宽调制信号转换为三相电压信号控制直流无刷电机的转速，该电机调速器的工作电流为30A，峰值电流为35A。更进一步，所述光流传感器(1102)是PX4平台发布的一种智能光学流动传感器，该传感器用于在室内或室外进行辅助定位飞行，该模块包含一个MT9V034图像传感器，一个MB1043声纳传感器，该传感器向下安装在F450四旋翼机架(1000)上，通过裁剪和光流法高速计算飞行器的水平位移量，加入声纳传感器采集的高度信息就可以通过I2C接口向飞行控制板(1101)反馈飞行器的相对三维坐标；所述处理器载板(1200)用于实现英伟达TX2处理器(1300)的接口扩展和面向系统的电源输出；USB3.0摄像头模块(1201)直接与处理器载板的USB3.0接口连接，飞行控制板(1100)直接与处理器载板的串行接口连接，英伟达TX2处理器(1300)通过Samtec的连接器REF-186138-02与处理器载板相连；该处理器载板的硬件接口包含一个REF-186138-02接口、一个USB3.0接口、一个电源输入接口、四个串行接口、一个HDMI视频输出接口；该处理器载板采用TPS53015电源主控芯片，将12V系统输入电压转换为5V和3.3V，采用APW8805作为从控芯片，将5V转换为1.8V输出；所述USB3.0摄像头(1201)是系统的视觉输入接口，负责进行图像获取；该摄像头模块与处理器载板(1200)的USB3.0接口相连；该模块使用MT9V034全局快门工业相机作为图像传感器，最大可以采集752x480分辨率下30帧每秒的图像数据；所述英伟达TX2处理器(1300)是系统的核心处理模块，其包含了图像采集模块(1301)、数据协议转换模块(1302)、运动目标检测模块(1303)、目标坐标提取模块(1304)、飞行轨迹发布模块(1305)；该处理器模块通过REF-186138-02连接器与处理器载板(1200)相连；该英伟达TX2处理器拥有2个英伟达Denver核心、4个ARMCortexA57核心、256个Pascal架构CUDA核心、8GBLPDDR4内存、64GBeMMC闪存；该处理器运行LinuxUbuntu16.04操作系统，在此之上使用机器人操作系统(ROS)协同处理多个任务节点，使用OpenCV库进行图像运算。所述图像采集模块(1301)用于负责采集USB3.0摄像头(1201)的实时图像数据，该模块基于CYUSB和LIBUSB驱动库进行开发，可以实时采集和控制系统摄像头模块，并且将采集到的图像转换为机器人操作系统标准图像消息发布在机器人操作系统中，本系统采集的图像为30帧每秒、320x240分辨率的图像；所述数据协议转换模块(1302)是在机器人操作系统中针对MAVLink协议的数据转换节点，该模块可以双向转换标准ROS数据消息和MAVLink数据，使用相关软件接口可以实时获取飞行数据和发布飞行控制命令；所述运动目标检测模块(1303)用于负责提取场景图像中的被跟踪目标，该模块在机器人操作系统中订阅图像采集模块发布的图像信息，交替使用两个高斯模型进行背景建模，在不断更新背景的同时避免背景模型被前景本文档来自技高网...

【技术保护点】
一种基于英伟达TX2处理器的无人机运动跟踪系统，其特征在于：系统由F450四旋翼机架(1000)、飞行控制板(1100)、处理器载板(1200)、英伟达TX2处理器(1300)组成；其中英伟达TX2处理器(1300)用于实现系统的运动目标检测与跟踪、无人机跟踪飞行等功能；处理器载板(1200)用于实现英伟达TX2处理器(1300)的数据接口扩展和面向系统的电源输出；飞行控制板(1100)用于实现四旋翼飞行器的电机控制和定位飞行；F450四旋翼机架(1000)作为系统的基础构架，用于负责执行英伟达TX2处理器(1300)和飞行控制板(1100)的控制命令，实现跟踪飞行。

【技术特征摘要】
1.一种基于英伟达TX2处理器的无人机运动跟踪系统，其特征在于：系统由F450四旋翼机架(1000)、飞行控制板(1100)、处理器载板(1200)、英伟达TX2处理器(1300)组成；其中英伟达TX2处理器(1300)用于实现系统的运动目标检测与跟踪、无人机跟踪飞行等功能；处理器载板(1200)用于实现英伟达TX2处理器(1300)的数据接口扩展和面向系统的电源输出；飞行控制板(1100)用于实现四旋翼飞行器的电机控制和定位飞行；F450四旋翼机架(1000)作为系统的基础构架，用于负责执行英伟达TX2处理器(1300)和飞行控制板(1100)的控制命令，实现跟踪飞行。2.如权利要求1所述的基于英伟达TX2处理器的无人机运动跟踪系统，其特征在于：所述F450四旋翼机架(1000)是系统的机械结构基础，1047二叶桨(1001)、直流无刷电机(1002)、飞行控制板(1100)、电机调速器(1101)、光流传感器(1102)、处理器载板(1200)、USB3.0摄像头(1201)、英伟达TX2处理器(1300)均设置在F450四旋翼机架(1000)上；其中，所述四旋翼机架采用轴距为450mm的四旋翼机架，材料为碳纤维和硬质塑料；所述1047二叶桨(1001)的直径为20.4cm，螺距为11.43cm，材质为塑料，本系统共含有四个二叶桨；所述直流无刷电机(1002)型号为X2212，该直流无刷电机在电压11.1v下的空载转速为10878转每分钟，本系统共含有四个直流无刷电机。3.如权利要求1或2所述的基于英伟达TX2处理器的无人机运动跟踪系统，其特征在于：所述飞行控制板(1100)用于实现飞行器的飞行控制，电机调速器(1101)直接和飞行控制板的电机输出口相连，光流传感器(1102)直接和飞行控制板的I2C接口相连，处理器载板(1200)扩展出来的串行接口直接与飞行控制板的串行接口相连；该飞行控制板的硬件接口包括一个PPM信号输入接口、一个安全开关接口、一个GPS信号输入接口、一个I2C信号输入接口、一个电源供电和监测接口、一个microUSB接口、3个串型通信接口、一个蜂鸣器接口、四个电机输出接口、六路云台控制接口、一个JTAG烧写接口、两个芯片电源指示灯、两个芯片烧写状态指示灯、一个系统活动心跳指示灯、一个系统状态主指示灯、一个microSD卡槽；该飞行控制板采用STM32F427作为主控芯片、STM32F100作为IO扩展芯片，电源管理单元采用LTC4417芯片，传感器单元采用L3GD20H陀螺芯片、LSM303D加速度/磁场芯片、MS5611气压芯片、MPU600陀螺/加速度芯片组成具有冗余保护的传感器单元；该飞行控制板运行NuttX实时操作系统，使用PX4开源飞控固件并且可以通过串口接收基于MAVLink协议的飞行控制命令。4.如权利要求3所述的基于英伟达TX2处理器的无人机运动跟踪系统，其特征在于：所述电机调速器(1101)用于实现系统中直流无刷电机(1002)的驱动，该模块接收飞行控制板(1100)输出的脉宽调制信号，通过硬件电路将脉宽调制信号转换为三相电压信号控制直流无刷电机的转速，该电机调速器的工作电流为30A，峰值电流为35A。5.如权利要求1或2所述的基于英伟达TX2处理器的无人机运动跟踪系统，其特征在于：所述光流传感器(1102)是PX4平台发布的一种智能光学流动传感器，该传感器用于在室内或室外进行辅助定位飞行，该模块包含一个MT9V034图像传感器，一个MB1043声纳传感器，该传感器向下安装在F450四旋翼机架(1000)上，通过裁剪和光流法高速计算飞行器的水平位移量，加入声纳传感器采集的高度信息就可以通过I2C接口向飞行控制板(1101)反馈飞行器的相对三维坐标。6.如权利要求1或2所述的基于英伟达TX2处理器的无人机运动跟踪系统，其特征在于：所述处理器载板(1200)主要...

【专利技术属性】
技术研发人员：陈朋，党源杰，任金金，王海霞，梁荣华，
申请(专利权)人：浙江工业大学，
类型：发明
国别省市：浙江,33