一种单目标视频跟踪方法、装置、存储介质及设备制造方法及图纸

技术编号:39968190 阅读:34 留言:0更新日期:2024-01-09 00:34
本申请公开了一种单目标视频跟踪方法、装置、存储介质及设备,该方法包括:首先在获取到包含待跟踪的单目标对象的目标视频后,从目标视频中确定出包含第一帧图像对应的图像跟踪模板的M张图像跟踪模板,然后提取M张图像跟踪模板的模板图像特征,以及提取目标视频中每一帧搜索图像的搜索图像特征,并将模板图像特征和搜索图像特征输入预先构建的编码器网络进行编码,得到编码特征;接着将编码特征和开始标志位向量输入预先构建的解码器网络进行解码,预测出编码特征对应的搜索图像中单目标对象的位置和尺寸,从而能够提高目标视频中每一帧搜索图像中对于单目标视频跟踪结果的准确性。

【技术实现步骤摘要】

本申请涉及图像处理,尤其涉及一种单目标视频跟踪方法、装置、存储介质及设备


技术介绍

1、视频目标跟踪的研究和应用作为计算机视觉领域的一个重要分支,已被广泛地应用到航空航天、自动驾驶等多个领域。从跟踪目标数量来说,视频目标跟踪可分为单目标视频跟踪和多目标视频跟踪,其中,单目标视频跟踪指的是在给定某视频序列初始帧图像中目标大小与位置的情况下,预测后续帧图像中该目标的大小与位置,单目标视频跟踪的研究具有较大的实用价值和广阔的发展前景。

2、目前,单目标视频跟踪方法通常有两种:一种是基于孪生网络的单目标视频跟踪方法,但这种跟踪方法的跟踪模板仅在视频第一帧图像中获取,导致该模版的特征不适用于后续帧图像中目标发生较大变化时的跟踪,得到的跟踪结果不够准确。而另一种常用的单目标视频跟踪方法则是采用以转换器(transformer)模型为基础的单目标视频跟踪方法,但这种跟踪方法不仅无法获取时序信息作为跟踪依据且网络复杂、计算量较大。可见,通过目前常见的这两种单目标视频跟踪方法,得到的跟踪结果的准确率还有待提高。


技术实现思路本文档来自技高网...

【技术保护点】

1.一种单目标视频跟踪方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述方法还包括:

3.根据权利要求1所述的方法,其特征在于,所述提取所述M张图像跟踪模板的模板图像特征;以及提取所述目标视频中每一帧搜索图像的搜索图像特征,包括:

4.根据权利要求1所述的方法,其特征在于,所述将所述模板图像特征和所述搜索图像特征输入预先构建的编码器网络进行编码,得到编码特征,包括:

5.根据权利要求1至4任一项所述的方法,其特征在于,所述编码器网络和所述解码器网络的构建方式如下:

6.根据权利要求5所述的方法,其特征在于,...

【技术特征摘要】

1.一种单目标视频跟踪方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述方法还包括:

3.根据权利要求1所述的方法,其特征在于,所述提取所述m张图像跟踪模板的模板图像特征;以及提取所述目标视频中每一帧搜索图像的搜索图像特征,包括:

4.根据权利要求1所述的方法,其特征在于,所述将所述模板图像特征和所述搜索图像特征输入预先构建的编码器网络进行编码,得到编码特征,包括:

5.根据权利要求1至4任一项所述的方法,其特征在于,所述编码器网络和所述解码器网络的构建方式如下:

6.根据权利要求5所述的方法,其特征在于,所述第一损失函数为交叉熵损失函数。

7.根据权利要求5所述的方法,其特征在于,所述单目标对象...

【专利技术属性】
技术研发人员:龚苏明于振华王金钖林垠沙文
申请(专利权)人:科大讯飞股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1