一种基于视觉传达的无人机引导系统技术方案

技术编号:20545139 阅读:26 留言:0更新日期:2019-03-09 18:07
本发明专利技术主要提出来一种基于视觉传达的无人机引导系统,主要包括飞行控制模块和图像处理模块,主要载体包括无人机和控制器,无人机上设置有定位器、飞行控制单元、图像处理单元,控制器上设置有显示屏、图像处理单元、飞行控制单元,所述飞行控制模块,用于根据无人机控制终端接收的语音控制指令和动作控制指令,调整电机参数,控制无人机的飞行和摄像头的角度,所述图像处理模块,用于将飞行控制模块的飞行数据与摄像头拍摄的视频图像进行整合生成包含所述飞行数据的视频图像;实现了语音与行为相结合的一体化控制方式,在满足用户接收视频图像的同时,又可以对无人机进行智能有效的远程控制。

A UAV Guidance System Based on Visual Communication

The invention mainly proposes a UAV guidance system based on visual communication, which mainly includes flight control module and image processing module. The main carrier includes UAV and controller. The UAV is equipped with positioner, flight control unit and image processing unit. The controller is equipped with display screen, image processing unit and flight control unit. The flight control module is described. The image processing module is used to integrate the flight data of the flight control module with the video image captured by the camera to generate the video image containing the flight data, and realizes the combination of voice and behavior. The integrated control mode not only satisfies the user to receive video images, but also intelligently and effectively remotely controls the UAV.

【技术实现步骤摘要】
一种基于视觉传达的无人机引导系统
本专利技术涉及无人机领域,具体一种基于视觉传达的无人机引导系统。
技术介绍
目前,随着无人机技术的发展,无人机在各个领域的应用需求越来越大,无人机的跟随功能是指通过某种技术手段使无人机自主跟随运动中的特定人或物,实现操作人员对无人机的引导飞行,是无人机自主飞行中的一项重要技术,随着科学技术的不断发展,无人机已经深入到我们生活中,现有的无人机操作一般都是通过人为操控控制器来实现无人机向着目标方位进行移动的方式,对操纵者的技术要求较高,难度大,现有对无人机的引导功能主要是通过装备有GPS模块的可移动地面站实现:地面站通过GPS模块获取自身地理位置信息,然后经无线传输模块手动遥控将地理位置信息传输给无人机,无人机据此跟踪移动的地面站,以上方法可实现操作员对无人机较好的引导功能,但该方法中的无线传输链路易受电磁干扰,而GPS模块信号在有建筑物遮挡或云层较厚等情况下会受到影响甚至丢失,因此生产一种结构简单,操作方便,适用范围广,工作和运行效率高,易于操作,结构合理的多用途视觉传达设计系统,具有广阔的市场前景。
技术实现思路
为了解决上述问题,本专利技术提供如下技术方案:一种基于视觉传达的无人机引导系统,其特征在于,主要包括飞行控制模块和图像处理模块,所述飞行控制单元,用于接收无人机控制终端发送的控制指令,根据所述控制指令调整电机参数,调整所述无人机的飞行和摄像头的角度,所述图像处理单元,用于将飞行控制模块的飞行数据与摄像头拍摄的视频图像进行整合生成包含所述飞行数据的视频图像;所述图像处理单元主要分为图像采集单元、图像发送单元、图片接收单元、图像存储单元、图像处理单元、报警系统模块,所述飞行控制单元主要分为语音控制单元、运动控制单元、信号接收单元、云台控制单元,所述主要载体包括无人机和控制器,无人机和控制器通过模块之间的通信传输进行操作控制,所述图像处理单元和飞行控制单元通过芯片传输控制。进一步的,所述图片处理模块主要包括图像采集单元、图像发送单元、图片接收单元、图像存储单元、图像处理单元、报警系统模块,所述图像采集单元主要包括摄像头和图像处理芯片,摄像头拍摄标识物的视频图像,传输给图像处理芯片,图像处理芯片对图像进行处理,将处理结果传输到图像发送单元,所述图像发送单元主要包括图像信号发送器,图像发送器把需要发送的信号进行调制,传输信号,将发送到图像接收单元,图像接收单元对信号进行解调,还原信号,图像存储模块包括存储器和显示屏,用于存储引导标识物的图像,以便后续图像处理模块将实时视频图像与之进行对比计算,图像处理模块连接显示屏和图像处理芯片,所述图像处理芯片进行视频图像处理,检测并跟踪引导标识物,计算每一帧图像中引导标识物相对上一帧的偏移量,并根据该偏移量计算出使引导标识物位于图像中央时飞行器及云台所需的控制量,所述报警系统模块用于当图像处理模块发现相似引导物时,发出警报并向飞行控制模块发出悬停控制指令,所述无人机上包括图像采集单元、图像发送单元,所述控制器包括图片接收单元、图像存储单元、图像处理单元、报警系统模块,其中,所述视频图像中包含有所述飞行过程中的飞行数据;并将信息传送到图像存储模块。进一步的,所述飞行控制模块主要包括语音控制单元、运动控制单元、信号接收单元、云台控制单元,所述语音控制单元主要有语音接收单元,所述声音接收单元主要包括麦克风和声音处理器,用于采集声音信息并且将语音信息传送到语音识别单元,所述语音识别单元主要有语音识别芯片,用于根据预先训练的声学模型对所述声音信息进行识别,获取语音控制指令,并且将语音控制指令发送到语音发送单元;语音发送单元将语音信息调制后发送到信号接收单元,同时向信号接收单元发送所述语音控制指令,所述运动控制单元包括:运动感应单元主要包括运动方位感应器,用于通过预设的运动信息传感采集,运动识别单元用于根据预先训练的运动模型对所述运动信息进行识别,获取运动控制指令,运动指令发送单元,用于向信号接收单元发送运动控制指令,所述信号接收单元把声音控制单元,运动控制模块给出的信号进行解调处理,传输给云台控制单元,云台控制单元根据发出运动控制指令,调节无人机的飞行轨迹或摄像头的拍摄角度,所述控制台上设置声音控制单元和运动控制单元,所述无人机上设置信号接收单元、云台控制单元。进一步的,所述图像处理模块采用FPGA+DSP架构,所述显示屏用LCD显示所述视频图像;其中,所述视频图像中包含有所述飞行控制模块中的飞行数据。所述无人机为多旋翼无人机,且旋翼的个数不少于4个。所述无人机机体的机臂上的超声波接收器与机臂之间采用可拆卸连接。所述摄像头采用两个机载CCD摄像头组成双目视觉图像采集模块。本专利技术主要提出来一种基于视觉传达的无人机引导系统,主要包括飞行控制模块和图像处理模块,主要载体包括无人机和控制器,无人机上设置有定位器、飞行控制单元、图像处理单元,控制器上设置有显示屏、图像处理单元、飞行控制单元,所述飞行控制模块,用于根据无人机控制终端接收的语音控制指令和动作控制指令,调整电机参数,控制无人机的飞行和摄像头的角度,所述图像处理模块,用于将飞行控制模块的飞行数据与摄像头拍摄的视频图像进行整合生成包含所述飞行数据的视频图像;实现了语音与行为相结合的一体化控制方式,在满足用户接收视频图像的同时,又可以对无人机进行智能有效的远程控制。附图说明为了使本专利技术的内容更容易被清楚地理解,下面根据具体实施例并结合附图,对本专利技术作进一步详细的说明。图1为本专利技术一种基于视觉传达的无人机引导系统的系统模块图;图2为本专利技术一种基于视觉传达的无人机引导系统的飞行处理单元流程图;图3为本专利技术一种基于视觉传达的无人机引导系统的图像处理单元流程图;图4为本专利技术一种基于视觉传达的无人机引导系统的工作流程图。参照图1,一种基于视觉传达的无人机引导系统,其特征在于,主要包括飞行控制模块和图像处理模块,所述飞行控制单元,用于接收无人机控制终端发送的控制指令,根据所述控制指令调整电机参数,调整所述无人机的飞行和摄像头的角度,所述图像处理单元,用于将飞行控制模块的飞行数据与摄像头拍摄的视频图像进行整合生成包含所述飞行数据的视频图像;所述图像处理单元主要分为图像采集单元、图像发送单元、图片接收单元、图像存储单元、图像处理单元、报警系统模块,所述飞行控制单元主要分为语音控制单元、运动控制单元、信号接收单元、云台控制单元,所述主要载体包括无人机和控制器,无人机和控制器通过模块之间的通信传输进行操作控制,所述图像处理单元和飞行控制单元通过芯片传输控制。参照图2,所述图片处理模块主要包括图像采集单元、图像发送单元、图片接收单元、图像存储单元、图像处理单元、报警系统模块,所述图像采集单元主要包括摄像头和图像处理芯片,摄像头拍摄标识物的视频图像,传输给图像处理芯片,图像处理芯片对图像进行处理,将处理结果传输到图像发送单元,所述图像发送单元主要包括图像信号发送器,图像发送器把需要发送的信号进行调制,传输信号,将发送到图像接收单元,图像接收单元对信号进行解调,还原信号,图像存储模块包括存储器和显示屏,用于存储引导标识物的图像,以便后续图像处理模块将实时视频图像与之进行对比计算,图像处理模块连接显示屏和图像处理芯片,所本文档来自技高网...

【技术保护点】
1.一种基于视觉传达的无人机引导系统,其特征在于,主要包括飞行控制模块和图像处理模块,所述飞行控制单元,用于接收无人机控制终端发送的控制指令,根据所述控制指令调整电机参数,调整所述无人机的飞行和摄像头的角度,所述图像处理单元,用于将飞行控制模块的飞行数据与摄像头拍摄的视频图像进行整合生成包含所述飞行数据的视频图像;所述图像处理单元主要分为图像采集单元、图像发送单元、图片接收单元、图像存储单元、图像处理单元、报警系统模块,所述飞行控制单元主要分为语音控制单元、运动控制单元、信号接收单元、云台控制单元,所述主要载体包括无人机和控制器,无人机和控制器通过模块之间的通信传输进行操作控制,所述图像处理单元和飞行控制单元通过芯片传输控制。

【技术特征摘要】
1.一种基于视觉传达的无人机引导系统,其特征在于,主要包括飞行控制模块和图像处理模块,所述飞行控制单元,用于接收无人机控制终端发送的控制指令,根据所述控制指令调整电机参数,调整所述无人机的飞行和摄像头的角度,所述图像处理单元,用于将飞行控制模块的飞行数据与摄像头拍摄的视频图像进行整合生成包含所述飞行数据的视频图像;所述图像处理单元主要分为图像采集单元、图像发送单元、图片接收单元、图像存储单元、图像处理单元、报警系统模块,所述飞行控制单元主要分为语音控制单元、运动控制单元、信号接收单元、云台控制单元,所述主要载体包括无人机和控制器,无人机和控制器通过模块之间的通信传输进行操作控制,所述图像处理单元和飞行控制单元通过芯片传输控制。2.根据权利要求1所述的一种基于视觉传达的无人机引导系统,其特征在于,所述图片处理模块主要包括图像采集单元、图像发送单元、图片接收单元、图像存储单元、图像处理单元、报警系统模块,所述图像采集单元主要包括摄像头和图像处理芯片,摄像头拍摄标识物的视频图像,传输给图像处理芯片,图像处理芯片对图像进行处理,将处理结果传输到图像发送单元,所述图像发送单元主要包括图像信号发送器,图像发送器把需要发送的信号进行调制,传输信号,将发送到图像接收单元,图像接收单元对信号进行解调,还原信号,图像存储模块包括存储器和显示屏,用于存储引导标识物的图像,以便后续图像处理模块将实时视频图像与之进行对比计算,图像处理模块连接显示屏和图像处理芯片,所述图像处理芯片进行视频图像处理,检测并跟踪引导标识物,计算每一帧图像中引导标识物相对上一帧的偏移量,并根据该偏移量计算出使引导标识物位于图像中央时飞行器及云台所需的控制量,所述报警系统模块用于当图像处理模块发现相似引导物时,发出警报并向飞行控制模块发出悬停控制指令,所述无人机上包括图像采集单元、图像发送单元,所述控制器包括图片接收单元、图像存储单元、图像处理单元、报警系统模块,其...

【专利技术属性】
技术研发人员:吴宜瑾
申请(专利权)人:常州信息职业技术学院
类型:发明
国别省市:江苏,32

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1