基于通道分离注意力模块的目标跟踪方法与系统技术方案

技术编号:43095957 阅读:28 留言:0更新日期:2024-10-26 09:41
本发明专利技术提出基于通道分离注意力模块的目标跟踪方法与系统,该方法包括:将模板图像和搜索图像输入模型,得到前半部分输入数据与后半部分输入数据;通过前半部分输入数据和后半部分输入数据得到结果特征图的模板图像和结果特征图的搜索图像,并通过采用迭代的方式得到最后的结果特征图;将最后的结果特征图输入在线评估模块,得到置信度得分;对模型进行训练并利用训练后的模型对目标进行在线跟踪。本发明专利技术通过使用通道分离注意力模块,融合动态卷积与注意力,使跟踪器具有动态性的局部和全局的特征提取能力,以增强跟踪器的特征提取与融合能力,让跟踪器能更好的在复杂场景中应对对象外观的变化,进而提高目标跟踪的性能。

【技术实现步骤摘要】

本专利技术涉及机计算机视觉与图像处理,特别涉及一种基于通道分离注意力模块的目标跟踪方法与系统


技术介绍

1、在计算机视觉与图像处理领域,视觉跟踪是一个重要的研究方向。其主要任务是利用目标的初始外观,在后续的视频帧中精确定位该目标。这项技术在许多领域有着广泛的应用,如视觉定位、自动驾驶和智慧城市。然而,由于现实世界中存在许多挑战,如部分遮挡、目标移出视野、背景杂乱、视角变化和比例变化等,开发一个稳健的跟踪器仍然非常困难。

2、目前,跟踪模型通常采用双流双阶段的模型架构。在这种方法中,分别提取来自模板和搜索区域的特征。然而,这种方法有一定的缺点,主要归因于传统注意力机制的高计算复杂度。此外,在提取具有全局上下文的特征时,往往会忽略局部特征信息。最近,单流架构已经成为一种可行的替代方案。这些架构带来了更快的处理和增强的特征融合能力,在跟踪性能方面取得了显著成功。其有效性背后的原因在于模型架构能够在早期阶段在模板和搜索区域之间建立不受阻碍的信息流,特别是从原始图像对。这有助于提取目标特定特征,并防止判别信息的丢失。


>

技术实本文档来自技高网...

【技术保护点】

1.一种基于通道分离注意力模块的目标跟踪方法,其特征在于,所述方法包括如下步骤:

2.根据权利要求1所述的基于通道分离注意力模块的目标跟踪方法,其特征在于,在所述步骤1中,将模板图像和搜索图像输入单阶段整体模型,通过单阶段整体模型的主干特征提取模块和特征增强模块得到模板令牌和搜索令牌,再将模板令牌与搜索令牌进行拼接,获得总输入令牌,对应过程存在的公式为:

3.根据权利要求2所述的基于通道分离注意力模块的目标跟踪方法,其特征在于,在所述步骤1中,对总输入令牌进行通道分离操作得到前半部分输入数据与后半部分输入数据,对应过程存在的公式为:

>4.根据权利要求3...

【技术特征摘要】

1.一种基于通道分离注意力模块的目标跟踪方法,其特征在于,所述方法包括如下步骤:

2.根据权利要求1所述的基于通道分离注意力模块的目标跟踪方法,其特征在于,在所述步骤1中,将模板图像和搜索图像输入单阶段整体模型,通过单阶段整体模型的主干特征提取模块和特征增强模块得到模板令牌和搜索令牌,再将模板令牌与搜索令牌进行拼接,获得总输入令牌,对应过程存在的公式为:

3.根据权利要求2所述的基于通道分离注意力模块的目标跟踪方法,其特征在于,在所述步骤1中,对总输入令牌进行通道分离操作得到前半部分输入数据与后半部分输入数据,对应过程存在的公式为:

4.根据权利要求3所述的基于通道分离注意力模块的目标跟踪方法,其特征在于,在所述步骤2中,对前半部分输入数据执行自适应卷积操作得到前半部分结果特征图,具体操作如下:

5.根据权利要求4所述的基于通道分离注意力模块的目标跟踪方法,其特征在于,所述步骤2中,对后半部分输入数据执行非对称...

【专利技术属性】
技术研发人员:王员云司英振王军
申请(专利权)人:南昌工程学院
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1