基于AR眼镜的无人机操控系统及方法技术方案

本发明专利技术提供一种基于AR眼镜的无人机操控系统及方法，其中，该系统包括：头动操控模块，用于根据用户头部的旋转角度控制无人机摄像头的转动角度；语音操控模块，用于接收用户输入的语音，并根据预设的关键词唤醒和操控无人机；手势操控模块，用于捕捉到用户的手势和手指的坐标以触发相应的功能。通过头动、语音控制和手势操作的多种交互方式实现了AR眼镜操控无人机的飞行和拍摄，便于无人机全方位无死角巡检和更加便捷舒适地通过人机交互方式操作无人机。作无人机。作无人机。

【技术实现步骤摘要】
基于AR眼镜的无人机操控系统及方法


[0001]本专利技术涉及AR技术以及无人机远程操控领域，尤其涉及一种基于AR眼镜的无人机操控系统及方法。

技术介绍

[0002]AR眼镜与无人机相在联合巡检时，AR眼镜是作为外接的观看模块，通过无线投屏或连接线接入无人机，获取视频画面。而AR眼镜仅作为外接观看的显示设备，缺少与无人机的操控交互。

技术实现思路

[0003]本专利技术提供一种基于AR眼镜的无人机操控系统及方法。
[0004]第一方面，本专利技术提供了一种基于AR眼镜的无人机操控系统，包括：头动操控模块，用于根据用户头部的旋转角度控制无人机摄像头的转动角度；语音操控模块，用于接收用户输入的语音，并根据预设的关键词唤醒和操控无人机；手势操控模块，用于捕捉到用户的手势和手指的坐标以触发相应的功能。
[0005]进一步地，所述头动操控模块还用于获取至少一个自由度的旋转角度，并将关于所述至少一个自由度的旋转角度的控制信号发送至无人机，以控制无人机摄像头根据所述至少一个自由度的旋转角度转动。
[0006]进一步地，所述头动操控模块还用于根据AR眼镜内部的陀螺仪获取至少一个自由度的旋转角度，并调取已设定好的转动角度对照表，根据所述对照表和陀螺仪获取的至少一个自由度的旋转角度确定对应无人机的至少一个自由度的旋转角度，将关于所述对应无人机的至少一个自由度的旋转角度的控制信号发送至无人机，以控制无人机摄像头根据所述控制信号转动至少一个自由度的旋转角度。
[0007]进一步地，所述头动操控模块还用于根据无人机能够转动的最大角度控制无人机摄像头的转动角度。
[0008]进一步地，语音操控模块还用于根据预设的唤醒词唤醒无人机，根据预设的指令词操控无人机。
[0009]进一步地，语音操控模块还用于根据预设的指令词操控无人机的飞行状态，以及操控无人机的摄像头。
[0010]进一步地，所述功能包括无人机镜头对焦、在AR眼镜的视野中标记重点区域和控制无人机拍摄画面的功能。
[0011]进一步地，所述系统还包括：存储模块，用于将语音操控模块接收的语音转换为文字并记录下来，以及用于绑定存储对应所述文字的无人机拍摄的画面。
[0012]第二方面，本专利技术还提供了一种基于AR眼镜的无人机操控方法，包括：响应于获取用户头部的旋转角度和/或用户输入的语音和/或用户的手势和手指的坐标，将相应的控制信号发送至无人机，以控制无人机摄像头的转动角度和/或唤醒和操控无人机和/或触发其
他功能。
[0013]第三方面，本专利技术还提供了一种基于AR眼镜的无人机操控装置，包括第一处理模块，用于：响应于获取用户头部的旋转角度和/或用户输入的语音和/或用户的手势和手指的坐标，将相应的控制信号发送至无人机，以控制无人机摄像头的转动角度和/或唤醒和操控无人机和/或触发其他功能。
[0014]第四方面，本专利技术还提供一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现如上述的基于AR眼镜的无人机操控方法的步骤。
[0015]第五方面，本专利技术还提供一种非暂态计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现如上述的基于AR眼镜的无人机操控方法的步骤。
[0016]本专利技术提供的一种基于AR眼镜的无人机操控系统及方法，包括头动操控模块，用于根据用户头部的旋转角度控制无人机摄像头的转动角度；语音操控模块，用于接收用户输入的语音，并根据预设的关键词唤醒和操控无人机；手势操控模块，用于捕捉到用户的手势和手指的坐标以触发相应的功能。通过头动、语音控制和手势操作的多种交互方式实现了AR眼镜操控无人机的飞行和拍摄，便于无人机全方位无死角巡检和更加便捷舒适地通过人机交互方式操作无人机。
附图说明
[0017]为了更清楚地说明本专利技术或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本专利技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
[0018]图1是根据本专利技术提供的基于AR眼镜的无人机操控系统的一些实施例的流程示意图；图1a是至少一个自由度的旋转角度的示意图；图1b是单击手势以对焦或触发预设的其他操作的一个应用场景的示意图；图1c是拳头手势表示异常，OK手势表示通过的一个应用场景的流程示意图；图1d是抓取手势的一个应用场景的流程示意图；图1e是单手手指框选的一个应用场景的流程示意图；图1f是双手手指框选的一个应用场景的流程示意图；图2是根据本专利技术提供的基于AR眼镜的无人机操控方法的一些实施例的流程示意图；图3是根据本专利技术提供的基于AR眼镜的无人机操控装置的一些实施例的结构示意图；图4是根据本专利技术提供的电子设备的结构示意图。
具体实施方式
[0019]为使本专利技术的目的、技术方案和优点更加清楚，下面将结合本专利技术中的附图，对本专利技术中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本专利技术一部分实施例，
而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。
[0020]另外还需要说明的是，为了便于描述，附图中仅示出了与有关专利技术相关的部分。在不冲突的情况下，本专利技术中的实施例及实施例中的特征可以相互组合。
[0021]需要注意，本专利技术中提及的“第一”、“第二”等概念仅用于对不同的装置、模块或单元进行区分，并非用于限定这些装置、模块或单元所执行的功能的顺序或者相互依存关系。
[0022]需要注意，本专利技术中提及的“一个”、“多个”的修饰是示意性而非限制性的，本领域技术人员应当理解，除非在上下文另有明确指出，否则应该理解为“一个或多个”。
[0023]本专利技术实施方式中的多个装置之间所交互的消息或者信息的名称仅用于说明性的目的，而并不是用于对这些消息或信息的范围进行限制。
[0024]下面将参考附图并结合实施例来详细说明本专利技术。
[0025]请参阅图1，图1是本专利技术提供的基于AR眼镜的无人机操控系统的一些实施例的流程示意图。如图1所示，该基于AR眼镜的无人机操控系统，包括：头动操控模块，用于根据用户头部的旋转角度控制无人机摄像头的转动角度；语音操控模块，用于接收用户输入的语音，并根据预设的关键词唤醒和操控无人机；手势操控模块，用于捕捉到用户的手势和手指的坐标以触发相应的功能。针对目前AR眼镜只能观看无人机拍摄画面的情况，增加头动、语音和手势三种方式交互操控无人机，真正地将AR眼镜与无人机相融合。
[0026]在一些实施例中，用户头部的旋转可以控制无人机镜头转向，也可以控制无人机整体转向。
[0027]在一些可选的实现方式中，所述头动操控模块还用于获取至少一个自由度的旋转角度，并将关于所述至少一个自由度的旋转角度的控制信号发送至无人机，以控制无人机摄像头根据本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于AR眼镜的无人机操控系统，其特征在于，所述系统包括：头动操控模块，用于根据用户头部的旋转角度控制无人机摄像头的转动角度；语音操控模块，用于接收用户输入的语音，并根据预设的关键词唤醒和操控无人机；手势操控模块，用于捕捉到用户的手势和手指的坐标以触发相应的功能。2.根据权利要求1所述的基于AR眼镜的无人机操控系统，其特征在于，所述头动操控模块还用于获取至少一个自由度的旋转角度，并将关于所述至少一个自由度的旋转角度的控制信号发送至无人机，以控制无人机摄像头根据所述至少一个自由度的旋转角度转动。3.根据权利要求2所述的基于AR眼镜的无人机操控系统，其特征在于，所述头动操控模块还用于根据AR眼镜内部的陀螺仪获取至少一个自由度的旋转角度，并调取已设定好的转动角度对照表，根据所述对照表和陀螺仪获取的至少一个自由度的旋转角度确定对应无人机的至少一个自由度的旋转角度，将关于所述对应无人机的至少一个自由度的旋转角度的控制信号发送至无人机，以控制无人机摄像头根据所述控制信号转动至少一个自由度的旋转角度。4.根据权利要求3所述的基于AR眼镜的无人机操控系统，其特征在于，所述头动操控模块还用于根据无人机能够转动的最大角度控制无人机摄像头的转动角度。5.根据权利要求1所述的基于AR眼镜的无人机操控系统，其特征在于，语音操控模块还用于根据...

【专利技术属性】
技术研发人员：申童，吴斐，陆希炜，
申请(专利权)人：北京亮亮视野科技有限公司，
类型：发明
国别省市：