无人机智能跟随目标确定方法、无人机和遥控器技术

本发明专利技术实施例公开了一种无人机智能跟随目标确定方法、无人机和电子设备。所述方法包括：获取无人机传回的图像；根据用户对所述无人机传回的图像的点击获得感兴趣的区域图片；加载深度学习网络模型并将获取的所述区域图片输入所述深度学习网络模型，利用所述深度学习网络模型输出多个框选所述区域图片中目标的候选外接框及所述候选外接框内的目标属于预设类别的概率；依据所述候选外接框及所述候选外接框内的目标属于预设类别的概率判断所述区域图片内是否存在目标图像。本发明专利技术实施例通过获取用户感兴趣的图像，从而可以将该用户感兴趣的图像作为基于深度学习算法网络模型的输入，进行目标预测，计算量小、运算时间短、对硬件设备要求低。对硬件设备要求低。对硬件设备要求低。

【技术实现步骤摘要】
无人机智能跟随目标确定方法、无人机和遥控器


[0001]本专利技术实施例涉及计算机视觉领域，特别涉及一种无人机智能跟随目标确定方法、无人机和遥控器。

技术介绍

[0002]随着无人机技术的发展，无人机在军事及民用领域都得到了广泛的应用。随着应用的日趋广泛，对无人机的性能也不断提出新的要求，尤其是在智能化上的要求。基于视觉的无人机智能跟随是智能化无人机的关键功能之一，在行业中也有着重要的应用。在消费级无人机领域，智能跟随功能是高端无人机的重要标志之一，为用户带来很多乐趣；在行业级无人机领域，智能跟随可以用于异常目标行为分析等，有着重要的意义。
[0003]在智能跟随技术中，如何对无人机拍摄的目标进行初始化一直是智能跟随的难题之一，如果目标无法准确框选，接下来的跟踪过程很容易出现目标丢失的情况。目前，动态目标的框选和识别一般是通过基于深度学习的目标检测算法来完成，基于深度学习的目标检测算法，可以将目标识别与定位过程在一个统一的深度学习框架中完成，且定位准确、可识别种类很多。
[0004]实现本专利技术过程中，专利技术人发现相关技术中本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种无人机智能跟随目标确定方法，应用于电子设备，其特征在于，所述方法包括：获取无人机传回的图像，并根据用户对所述无人机传回的图像的点击获取用户在屏幕上的点击位置；根据所述点击位置获取感兴趣的区域图片；将区域图片输入深度学习网络模型后，获取所述图像中目标的候选外接框及所述候选外接框内的目标属于预设类别的概率；获取该候选外接框内的目标属于各个预设类别的概率中概率最大的预设类别作为该候选外接框内的目标所属的类别，并将最大概率大于第二预设阈值的目标作为可能目标图像；计算所述可能目标图像与所述用户点击位置的距离系数；获取各个可能目标图像的距离系数与其所属的类别的概率的乘积并找出所述乘积的最大值，如果该最大值大于第三预设阀值，则将该乘积的最大值对应的可能目标图像作为所述目标图像，并记录所述目标图像所属的类别；如果存在目标图像，则发送目标跟随命令给所述无人机。2.根据权利要求1所述的方法，其特征在于，所述方法还包括：如果不存在目标图像，所述电子设备提示用户所述图像内无感兴趣的目标。3.根据权利要求1所述的方法，其特征在于，所述方法还包括：如果不存在目标图像，所述电子设备提示用户重新点击所述图像以重新选择感兴趣目标。4.根据权利要求1中任一所述的方法，其特征在于，还包括：针对每一个所述预设类别，获取属于该预设类别概率最大的目标对应的候选外接框；分别计算该预设类别的候选外接框与该预设类别的其他各个候选外接框的重合率，将重合率大于第一预设阀值的候选外接框内的目标属于该预设类别的概率置为零；获取该候选外接框内的目标属于各个预设类别的概率中概率最大的预设类别作为该候选外接框内的目标所属的类别，并将最大概率大于第二预设阈值的目标作为可能目标图像；所述距离系数δ表示为：其中，可能目标图像的坐标为(x
o
，y
o
)，点击位置坐标为(x
p
，y
p
)。5.根据权利要求4中任一所述的方法，其特征在于，所述深度学习网络模型包括至少2个卷积层和至少2个采样层。6.根据权利要求5中任一所述的方法，其特征在于，所述深度学习网络模型依次包括：第一卷积层、第一下采样层、第二卷积层、第二下采样层、第三卷积层、第三下采样层、第四卷积层、第四下采样层、第五卷积层、第五下采样层、第六卷积层、第六下采样层、第七卷积层、第八卷积层和区域层。7.根据权利要求6所述的方法，其特征在于，所述第一卷积层、所述第二卷积层、所述第
三卷积层、所述第四卷积层、所述第五卷积层和所述第六卷积层中，后一个卷积层的滤波器数量是前一个卷积层滤波器数量的2倍，所述第六卷积层和所述第七卷积层的滤波器数量相等；所述第一下采样层、所述第二下采样层、所述第三下采样层、所述第四下采样层和所述第五下采样层的窗口尺寸为2*2像素，跳跃间隔为2，所述第六下采样层的窗口尺寸为2*2像素，跳跃间隔为1。8.根据权利要求6或7所述的方法，其特征在于，所述第一卷积层的滤波器数量为4，所述第一下采样层、所述第二下采样层、所述第三下采样层、所述第四下采样层、所述第五下采样层和所述第六下采样层均采用最大值下采样法。9.根据权利要求8中任一所述的方法，其特征在于，各个所述卷积层均使用3*3像素的滤波器。10.根据权利要求1
‑
6中任一所述的方法，其特征在于，所述区域图片大小为288*288像素，利用所述深度学习网络模型共获得9*9*5个所述候选外接框。11.一种无人机智能跟随目标确定方法，应用于无人机，其特征在于，所述方法包括：获取图像，并根据用户的点击操作获取感兴趣的区域图片；加载深度学习网络模型并将获取的所述区域图片输入所述深度学习网络模型，输出多个框选所述区域图片中目标的候选外接框及所述候选外接框内的目标属于预设类别的概率；获取该候选外接框内的目标属于各个预设类别的概率中概率最大的预设类别作为该候选外接框内的目标所属的类别，并将最大概率大于第二预设阈值的目标作为可能目标图像；计算所述可能目标图像与所述用户点击位置的距离系数；获取各个可能目标图像的距离系数与其所属的类别的概率的乘积并找出所述乘积的最大值，如果该最大值大于第三预设阀值，则将该乘积的最大值对应的可能目标图像作为所述目标图像，并记录所述目标图像所属的类别；如果存在目标图像，则跟随所述目标。12.根据权利要求11所述的方法，其特征在于，所述方法还包括：如果不存在目标图像，所述无人机发送指令至电子设备，所述指令用于提示所述用户所述图像内无感兴趣目标。13.根据权利要求11所述的方法，其特征在于，所述指令还用于提示所述用户重新点击所述图像以重新选择感兴趣目标。14.根据权利要求11中任一所述的方法，其特征在于，还包括：针对每一个所述预设类别，获取属于该预设类别概率最大的目标对应的候选外接框；分别计算该预设类别的候选外接框与该预设类别的其他各个候选外接框的重合率，将重合率大于第一预设阀值的候选外接框内的目标属于该预设类别的概率置为零；获取该候选外接框内的目标属于各个预设类别的概率中概率最大的预设类别作为该候选外接框内的目标所属的类别，并将最大概率大于第二预设阈值的目标作为可能目标图像；所述距离系数δ表示为：
其中，可能目标图像的...

【专利技术属性】
技术研发人员：梅江元，
申请(专利权)人：深圳市道通智能航空技术股份有限公司，
类型：发明
国别省市：