基于稳态视觉诱发电位的无人机操控方法及装置制造方法及图纸

本发明专利技术公开了一种基于稳态视觉诱发电位（Steady State Visual Evoked Potential，SSVEP）的无人机操控方法，属于认知神经科学、信息技术和自动控制相交叉的技术领域。该方法将无人机的操控指令抽象为一组稳态视觉诱发电位诱发画面同时显示在视觉刺激单元上，通过对操控者注视该视觉刺激单元所产生的脑电信号进行处理从而识别出操控者所注视的稳态视觉诱发电位诱发画面，并将该稳态视觉诱发电位诱发画面所对应的操控指令发送给无人机执行。本发明专利技术还公开了一种基于稳态视觉诱发电位的无人机操控装置。相比现有技术，本发明专利技术可有效提高无人机的操控特性，降低操控难度。

【技术实现步骤摘要】

本专利技术涉及一种无人机操控方法，尤其涉及一种基于稳态视觉诱发电位（SteadyStateVisualEvokedPotential，SSVEP）的无人机操控方法，属于认知神经科学、信息技术和自动控制相交叉的

技术介绍
现有的无人机操控系统通常采用遥控器实施操控。遥控器一般配备两个操控杆及多个功能按钮。其中，一个操控杆控制无人机在水平面内的前进，后退，左飞，右飞，另一个操控杆控制无人机在垂直面内的上升与下降，此外还有专门的按钮控制无人机进行顺时针或逆时针旋转。但这样遥控器操控需要操控人员将无人机所在的水平面和垂直面分别对应到对两个操控杆的操控，对无人机的某个飞行姿态需分解成对两个操控杆及功能按钮的分步操控，并需要由双手分别操作完成，无人机飞行姿态与操控过程之间存在着复杂的对应关系，操控人员需要经过大量训练才能熟练掌握操控技巧。
技术实现思路
本专利技术所要解决的技术问题在于克服现有技术不足，提供一种基于稳态视觉诱发电位的无人机操控方法及装置，以有效提高无人机的操控特性，降低操控难度。本专利技术具体采用以下技术方案解决上述技术问题：基于稳态视觉诱发电位的无人机操控方法，将无人机的操控指令抽象为一组稳态视觉诱发电位诱发画面同时显示在视觉刺激单元上，通过对操控者注视该视觉刺激单元所产生的脑电信号进行处理从而识别出操控者所注视的稳态视觉诱发电位诱发画面，并将该稳态视觉诱发电位诱发画面所对应的操控指令发送给无人机执行。进一步地，所述视觉刺激单元的显示背景为实时采集的无人机视角视频，所述稳态视觉诱发电位诱发画面叠加于显示背景之上。本专利技术可以采用常用的具有不同闪烁频率的稳态视觉诱发电位诱发画面，为了将相邻稳态视觉诱发电位诱发画面所诱发的脑电信号的特征差异最大化以提高分类正确率，优选地，所述稳态视觉诱发电位诱发画面为一组具有不同闪烁频率和相位的图标。优选地，对操控者注视该视觉刺激单元所产生的脑电信号进行处理时，使用典型相关分析方法对脑电信号进行特征提取及分类。根据相同的专利技术思路还可以得到以下技术方案：基于稳态视觉诱发电位的无人机操控装置，包括第一操控单元，所述第一操控单元包括：视觉刺激单元，用于同时显示一组稳态视觉诱发电位诱发画面，所述一组稳态视觉诱发电位诱发画面是由无人机的操控指令抽象而来；脑电信号处理单元，用于对操控者注视视觉刺激单元所产生的脑电信号进行处理从而识别出操控者所注视的稳态视觉诱发电位诱发画面，并将该稳态视觉诱发电位诱发画面所对应的操控指令发送给无人机执行。进一步地，所述第一操控单元还包括视频采集单元，用于实时采集无人机视角视频，并将实时采集的无人机视角视频传输给视觉刺激单元作为视觉刺激单元显示所述稳态视觉诱发电位诱发画面时的显示背景。优选地，所述脑电信号处理单元包括：脑电采集模块，用于对操控者注视视觉刺激单元所产生的脑电信号进行采集；SSVEP分类模块，用于对脑电采集模块所采集的脑电信号进行特征提取及分类，从而识别出操控者所注视的稳态视觉诱发电位诱发画面；操控信号传输模块，用于将SSVEP分类模块所识别出的稳态视觉诱发电位诱发画面相对应的操控指令传输给无人机。优选地，所述稳态视觉诱发电位诱发画面为一组具有不同闪烁频率和相位的图标。优选地，所述一组具有不同闪烁频率和相位的图标包括：分别位于视觉刺激单元显示背景的上、下、左、右、左上、左下、右上、右下位置上的箭头图标，依次对应于无人机向前、后、左、右、左前、左后、右前、右后方向飞行的操控指令，以及，位于视觉刺激单元显示背景的正下方处的逆时针旋转、向上、向下、顺时针旋转的箭头图标，依次对应于无人机的逆时针旋转、向上飞行、向下飞行、顺时针旋转的操控指令。为提升无人机操控系统的鲁棒性和适应性，进一步地，该装置还包括可与第一操控单元相互切换的第二操控单元，以及用于实现第一操控单元与第二操控单元相互切换的切换开关。相比现有技术，本专利技术具有以下有益效果：一、传统的无人机操控方法通过操控杆和按钮完成飞行操控，需要将操控指令分解到对水平面和垂直面的操作，并需要由双手分别操作完成，无人机位置及姿态坐标系与操控杆坐标系之间存在一个分解和转化的过程，对应关系复杂。本专利技术提出的操控方法，将操控指令由抽象为图标的稳态视觉诱发电位诱发画面表示，并进一步与无人机视角拍摄画面叠加显示，操控指令与无人机位置及姿态位于同一坐标系，操控更加直观简便，减少无操作的几率，提高了操控性。二、传统的无人机操控方法通过操控杆和按钮完成飞行操控，需要将无人机的某个飞行姿态分解成对两个操控杆及功能按钮的分步操控，无人机飞行姿态与操控过程之间存在着复杂的对应关系，操控人员需要经过大量训练才能熟练掌握操控技巧。在操控过程中需要眼和手的协调以及双手之间的协调，操控人员的负担较重。本专利技术提出的操控方法，操控人员只需注视视频便可完成操控，无需手眼协调和双手协调，操控简单直接，无需训练便可掌握。操控人员的体力和脑力负担减轻，适合长时间操控。三、传统的无人机操控方法，需要双手分别操作完成。本专利技术提出的操控方法，无需双手只需由目光注视即可完成操控，为伤残人士进行操控提供了可能。而对于健康操控人员，可以解放双手进行其它更加精密复杂的操控，为操控功能更加复杂的无人机提供可能。附图说明图1是SSVEP的时域信号及对应的频域信号；图2是本专利技术无人机操控装置一个优选实施例的系统构成示意图；图3是视觉刺激单元中无人机视角视频与SSVEP诱发画面叠加显示的一个实例；图4是视觉刺激单元中SSVEP诱发画面的频率及相位的设定。具体实施方式下面结合附图对本专利技术的技术方案进行详细说明：针对现有无人机操控技术所存在的问题，本专利技术的解决思路是基于稳态视觉诱发电位进行无人机操控，具体为：将无人机的操控指令抽象为一组稳态视觉诱发电位诱发画面同时显示在视觉刺激单元上，通过对操控者注视该视觉刺激单元所产生的脑电信号进行处理从而识别出操控者所注视的稳态视觉诱发电位诱发画面，并将该稳态视觉诱发电位诱发画面所对应的操控指令发送给无人机执行。为便于公众理解，在对本专利技术技术方案进行详细说明之前，先对本专利技术所涉及的相关技术进行介绍。脑机接口（Brain-ComputerInterface，BCI）是大脑与外部环境之间建立的一种信息交互和控制通道。利用这种通道，人们不需要通过语言或肢体动作，就可以进行大脑意识的表达或实现对外部设备的操控。现有的脑机接口范式主要包括基于慢皮层电位（SCP）,P300事件相关电位，运动想象事件相关电位（MI），视觉诱发电位（VEP）等几种诱发范式。其中视觉诱发电位（VisualEvokedPotential，VEP）是当人的眼睛受到视觉刺激时，在大脑视觉皮层上方位置配置的脑电（EEG）信号会发生变化，这种脑电电位称之为视觉诱发电位。VEP可分为三类：瞬时视觉诱发电位，伪随机码视觉诱发电位，以及稳态视觉诱发电位。稳态视觉诱发电位SSVEP是目前BCI中最常用的诱发范式。当双眼观察一个固定频率闪烁的视觉刺激的时候，在大脑视觉皮层处获取的EEG信号中会产生一个与刺激频率相关的响应（其时域信号及对应的频域信号如图1所示），即在刺激频率的基频及倍频处具有较高的能量分布，这样的响应被称为稳态视觉诱发电位（以下简称为SSVEP信号）。一个典型本文档来自技高网...

【技术保护点】
基于稳态视觉诱发电位的无人机操控方法，其特征在于，将无人机的操控指令抽象为一组稳态视觉诱发电位诱发画面同时显示在视觉刺激单元上，通过对操控者注视该视觉刺激单元所产生的脑电信号进行处理从而识别出操控者所注视的稳态视觉诱发电位诱发画面，并将该稳态视觉诱发电位诱发画面所对应的操控指令发送给无人机执行。

【技术特征摘要】
1.基于稳态视觉诱发电位的无人机操控方法，其特征在于，将无人机的操控指令抽象为一组稳态视觉诱发电位诱发画面同时显示在视觉刺激单元上，通过对操控者注视该视觉刺激单元所产生的脑电信号进行处理从而识别出操控者所注视的稳态视觉诱发电位诱发画面，并将该稳态视觉诱发电位诱发画面所对应的操控指令发送给无人机执行。2.如权利要求1所述无人机操控方法，其特征在于，所述视觉刺激单元的显示背景为实时采集的无人机视角视频，所述稳态视觉诱发电位诱发画面叠加于显示背景之上。3.如权利要求1所述无人机操控方法，其特征在于，所述稳态视觉诱发电位诱发画面为一组具有不同闪烁频率和相位的图标。4.如权利要求1所述无人机操控方法，其特征在于，对操控者注视该视觉刺激单元所产生的脑电信号进行处理时，使用典型相关分析方法对脑电信号进行特征提取及分类。5.基于稳态视觉诱发电位的无人机操控装置，包括第一操控单元，其特征在于，所述第一操控单元包括：视觉刺激单元，用于同时显示一组稳态视觉诱发电位诱发画面，所述一组稳态视觉诱发电位诱发画面是由无人机的操控指令抽象而来；脑电信号处理单元，用于对操控者注视视觉刺激单元所产生的脑电信号进行处理从而识别出操控者所注视的稳态视觉诱发电位诱发画面，并将该稳态视觉诱发电位诱发画面所对应的操控指令发送给无人机执行。6.如权利要求5所述无人机操控装置，其特征在于，所述第一操控单元还包括视频采集单元，用于...

【专利技术属性】
技术研发人员：葛盛，孙高鹏，刘慧，
申请(专利权)人：东南大学，
类型：发明
国别省市：江苏;32