基于语音和手势识别的无人机控制系统及控制方法技术方案

本发明专利技术公开了一种基于语音和手势识别的无人机控制系统及控制方法，手势采集模块用于采集手势图像；手势处理模块对手势图像进行手势分割、特征提取、并利用分类器进行手势识别，得到手势识别结果；语音采集模块用于采集语音信号；语音处理模块对接收的语音信号进行分析与识别，得到语音识别结果；无人机机载处理器基于接收的手势识别结果或语音识别结果进行分析，并根据指令库存储的各个指令对应的关键字，提取出具体指令；指令库用于预先存储各个指令对应的关键字；无人机飞控用于根据具体运动指令控制无人机；通讯模块用于将手势识别结果和语音识别发送至所述无人机机载处理器。实现了一种新型的无人机控制方式，简化传统了无人机手动控制的操作流程。

【技术实现步骤摘要】
基于语音和手势识别的无人机控制系统及控制方法
本专利技术涉及智能控制
，更具体的说是涉及无人机的控制技术。
技术介绍
近年来，无人机迅速普及，让许多行业的工作空间立体化——航拍、测绘、执法、电力巡检、农林植保、地质勘探等在空中开展的工作，总少不了无人机的身影。一款操作便捷的无人机，在为操作人员带来极大便利的同时，也提升了工作质量。国内外无人机的控制方式依然以遥控器控制为主。无人机的遥控器控制主要分为四个环节：操作人员拨转遥控器上的操作杆；遥控器遥控指令发送给无人机上的信号接收器；信号接收器将接收到的信号传递给飞控板；飞控板对信号进行分析，通过控制桨叶电机的转速，实现对无人机飞行姿态的控制。此外，目前常见的无人机遥控器也分为多种，有“中国手”、“美国手”、“日本手”等类型，它们的主要区别在于控制通道的排列方式不同。在使用遥控器对无人机飞行姿态进行控制时，需要对方向舵、升降舵、油门、副翼等多个部分进行同时协调，这就需要操控手具备一定的无人机操控经验。因此，主流的遥控器控制方式主要具有两个缺点：操作复杂和控制精度低。无人机遥控器本文档来自技高网...

【技术保护点】
1.基于语音和手势识别的无人机控制系统，其特征在于，包括：手势采集模块、手势处理模块、语音采集模块、语音处理模块、无人机机载处理器、指令库和无人机飞控；/n所述手势采集模块用于采集手势图像；/n所述手势处理模块对接收的所述手势图像进行手势分割、特征提取、并利用分类器进行手势识别，得到手势识别结果；/n所述语音采集模块用于采集语音信号；/n所述语音处理模块对接收的所述语音信号进行分析与识别，得到语音识别结果；/n所述无人机机载处理器基于接收的所述手势识别结果或所述语音识别结果进行分析，并根据所述指令库存储的各个指令对应的关键字，提取出具体运动指令；/n所述指令库用于预先存储各个指令对应的关键字；...

【技术特征摘要】
1.基于语音和手势识别的无人机控制系统，其特征在于，包括：手势采集模块、手势处理模块、语音采集模块、语音处理模块、无人机机载处理器、指令库和无人机飞控；
所述手势采集模块用于采集手势图像；
所述手势处理模块对接收的所述手势图像进行手势分割、特征提取、并利用分类器进行手势识别，得到手势识别结果；
所述语音采集模块用于采集语音信号；
所述语音处理模块对接收的所述语音信号进行分析与识别，得到语音识别结果；
所述无人机机载处理器基于接收的所述手势识别结果或所述语音识别结果进行分析，并根据所述指令库存储的各个指令对应的关键字，提取出具体运动指令；
所述指令库用于预先存储各个指令对应的关键字；
所述无人机飞控用于根据所述具体运动指令控制无人机。


2.根据权利要求1所述的基于语音和手势识别的无人机控制系统，其特征在于，所述手势采集模块包括地面控制端的摄像头。


3.根据权利要求2所述的基于语音和手势识别的无人机控制系统，其特征在于，所述语音采集模块包括地面控制端录音设备。


4.根据权利要求1～3任意一项所述的基于语音和手势识别的无人机控制系统，其特征在于，还包括通讯模块，所述通讯模块采用ROS话题通信机制，用于将所述手势识别结果和所述语音识别发送至所述无人机机载处理器。


5.根据权利要求1～3任意一项所述的基于语音和手势识别的无人机控制系统，其特征在于，还包括无人机机载摄像头，所述无人机机载摄像头与所述无人机机载处理器连接。
<...

【专利技术属性】
技术研发人员：赵丹培，陈剑奇，王亚东，马力，师浩然，
申请(专利权)人：北京航空航天大学，
类型：发明
国别省市：北京;11