目标跟踪方法及装置制造方法及图纸

提供一种目标跟踪方法及装置。所述目标跟踪方法包括：基于视频的当前帧图像的搜索区域获得第一目标跟踪结果；基于第一目标跟踪结果的尺度特征预测所述搜索区域中的目标的尺度；基于尺度预测结果调整第一目标跟踪结果，得到第二目标跟踪结果。同时，可以使用人工智能模型来执行上述由电子设备执行的目标跟踪方法。型来执行上述由电子设备执行的目标跟踪方法。型来执行上述由电子设备执行的目标跟踪方法。

【技术实现步骤摘要】
目标跟踪方法及装置


[0001]本公开涉及计算机视觉
更具体地，本公开涉及一种目标跟踪方法及装置。

技术介绍

[0002]基于视觉的目标跟踪技术(visual object tracking)是计算机视觉中的一个重要方向。具体任务是在一个视频中，根据第一帧图像和给定的目标对象包络框(bounding box)，在后续帧图像持续预测目标对象的包络框。其核心思想是根据第一帧标注的目标(target)，提取模板信息(template)，在后续的视频帧搜索区域(search region)内计算不同侯选位置与模板的匹配度，选择匹配度最高的位置从而确定目标位置。
[0003]目标跟踪技术通常用于运动中的常见物体，如人、动物、飞机、汽车等等。但区别于目标识别技术(object detection)，目标跟踪算法并不检测物体的类别属性。目标跟踪算法根据所跟踪的场景，又可分为短时视觉目标跟踪(short
‑
term visual object tracking)和长时视觉目标跟踪(long
‑
term visual object tracking)。长时视觉目标的跟踪在短时视觉目标跟踪技术的基础上增加了估计目标跟踪状态的验证(verification)，以及在目标跟踪失败后的重找回检(re
‑
detection)。
[0004]在相关技术中，计算资源消耗较大，影响跟踪的实时性；在目标跟踪中产生的尺度的累计误差较大，影响目标跟踪的效果。

技术实现思路

[0005]本公开的示例性实施例在于提供一种目标跟踪方法及装置，以在降低计算消耗的情况下提高目标跟踪的效果。
[0006]根据本公开的示例性实施例，提供一种目标跟踪方法，包括：基于视频的当前帧图像的搜索区域获得第一目标跟踪结果；基于第一目标跟踪结果的尺度特征预测所述搜索区域中的目标的尺度；基于尺度预测结果调整第一目标跟踪结果，得到第二目标跟踪结果。
[0007]可选地，所述搜索区域可以是全图搜索区域、或者大于前一帧图像的目标跟踪结果的区域。
[0008]可选地，所述搜索区域可以是基于前一帧图像的目标跟踪结果确定的。
[0009]可选地，第一目标跟踪结果可包括第一跟踪包络框，第二目标跟踪结果可包括第二跟踪包络框。
[0010]可选地，所述目标跟踪方法还可包括：基于第一目标跟踪结果的尺度特征确定目标跟踪是否成功。
[0011]可选地，基于第一目标跟踪结果的尺度特征确定目标跟踪是否成功，可包括：获取第一目标跟踪结果的表观特征；基于第一目标跟踪结果的表观特征和尺度特征确定目标跟踪是否成功。
[0012]可选地，基于第一目标跟踪结果的尺度特征预测所述搜索区域中的目标的尺度之
前，所述目标跟踪方法还可包括：获取第一目标跟踪结果的尺度特征。
[0013]可选地，获取第一目标跟踪结果的尺度特征，可包括：获取多尺度模板感兴趣ROI特征；获取第一目标跟踪结果的ROI特征，其中，第一目标跟踪结果的ROI特征包括至少一个尺度的ROI特征；基于所述多尺度模板ROI特征和第一目标跟踪结果的ROI特征确定第一目标跟踪结果的尺度特征。
[0014]可选地，在基于所述多尺度模板ROI特征和第一目标跟踪结果的ROI特征确定第一目标跟踪结果的尺度特征之前，所述目标跟踪方法还可包括：基于第一目标跟踪结果的表观特征对第一目标跟踪结果的ROI特征中的每个尺度的ROI特征进行特征对齐。
[0015]可选地，基于所述多尺度模板ROI特征和第一目标跟踪结果的ROI特征确定第一目标跟踪结果的尺度特征，可包括：将所述多尺度模板ROI特征和第一目标跟踪结果的ROI特征执行相关计算，获得第一目标跟踪结果的尺度特征。
[0016]可选地，将所述多尺度模板ROI特征和第一目标跟踪结果的ROI特征执行相关计算，可包括：将第一目标跟踪结果的ROI特征中的每个尺度的ROI特征分别与所述多尺度模板特征执行相关计算。
[0017]可选地，第一目标跟踪结果的ROI特征可包括一个尺度的ROI特征，第一目标跟踪结果的尺度特征可包括一维尺度特征。
[0018]可选地，第一目标跟踪结果的ROI特征可包括多个尺度的ROI特征，第一目标跟踪结果的尺度特征可包括二维尺度特征。
[0019]可选地，所述目标跟踪方法还可包括：基于第一目标跟踪结果的表观特征对第一目标跟踪结果进行调整。根据本公开的示例性实施例，提供一种目标跟踪装置，包括：目标确定单元，被配置为基于视频的当前帧图像的搜索区域确定第一目标跟踪结果；尺度预测单元，被配置为基于第一目标跟踪结果的尺度特征预测所述搜索区域中的目标的尺度；尺度调整单元，被配置为基于尺度预测结果调整第一目标跟踪结果，得到第二目标跟踪结果。
[0020]可选地，所述搜索区域可以是全图搜索区域、或者大于前一帧图像的目标跟踪结果的区域。
[0021]可选地，所述搜索区域是基于前一帧图像的目标跟踪结果确定的。
[0022]可选地，第一目标跟踪结果可包括第一跟踪包络框，第二目标跟踪结果可包括第二跟踪包络框。
[0023]可选地，所述目标跟踪装置还可包括：结果检查单元，被配置为基于第一目标跟踪结果的尺度特征确定目标跟踪是否成功。
[0024]可选地，结果检查单元可被配置为：获取第一目标跟踪结果的表观特征；基于第一目标跟踪结果的表观特征和尺度特征确定目标跟踪是否成功。
[0025]可选地，所述目标跟踪装置还可包括：尺度特征获取单元，被配置为获取第一目标跟踪结果的尺度特征。
[0026]可选地，尺度特征获取单元可被配置为：获取多尺度模板感兴趣ROI特征；获取第一目标跟踪结果的ROI特征，其中，第一目标跟踪结果的ROI特征包括至少一个尺度的ROI特征；
[0027]基于所述多尺度模板ROI特征和第一目标跟踪结果的ROI特征确定第一目标跟踪结果的尺度特征。
[0028]可选地，所述目标跟踪装置还可包括：特征对齐单元，被配置为基于第一目标跟踪结果的表观特征对第一目标跟踪结果的ROI特征中的每个尺度的ROI特征进行特征对齐。
[0029]可选地，尺度特征获取单元可被配置为：将所述多尺度模板ROI特征和第一目标跟踪结果的ROI特征执行相关计算，获得第一目标跟踪结果的尺度特征。
[0030]可选地，尺度特征获取单元可被配置为：将第一目标跟踪结果的ROI特征中的每个尺度的ROI特征分别与所述多尺度模板特征执行相关计算。
[0031]可选地，第一目标跟踪结果的ROI特征可包括一个尺度的ROI特征，第一目标跟踪结果的尺度特征可包括一维尺度特征。
[0032]可选地，第一目标跟踪结果的ROI特征可包括多个尺度的ROI特征，第一目标跟踪结果的尺度特征可包括二维尺度特征。
[0033]可选地，所述目标跟踪装置还可包括：特征调整单元，被配置为基于第一目标跟踪结果的表观特征对第一目标跟踪结果进行调整本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种目标跟踪方法，包括：基于视频的当前帧图像的搜索区域确定第一目标跟踪结果；基于第一目标跟踪结果的尺度特征预测所述搜索区域中的目标的尺度；基于尺度预测结果调整第一目标跟踪结果，得到第二目标跟踪结果。2.根据权利要求1所述的目标跟踪方法，其特征在于，所述搜索区域是全图搜索区域、或者大于前一帧图像的目标跟踪结果的区域。3.根据权利要求1所述的目标跟踪方法，其特征在于，所述搜索区域是基于前一帧图像的目标跟踪结果确定的。4.根据权利要求1所述的目标跟踪方法，其特征在于，第一目标跟踪结果包括第一跟踪包络框，第二目标跟踪结果包括第二跟踪包络框。5.根据权利要求1所述的目标跟踪方法，还包括：基于第一目标跟踪结果的尺度特征确定目标跟踪是否成功。6.根据权利要求5所述的目标跟踪方法，其特征在于，基于第一目标跟踪结果的尺度特征确定目标跟踪是否成功，包括：获取第一目标跟踪结果的表观特征；基于第一目标跟踪结果的表观特征和尺度特征确定目标跟踪是否成功。7.根据权利要求6所述的目标跟踪方法，其特征在于，基于第一目标跟踪结果的尺度特征预测所述搜索区域中的目标的尺度之前，所述目标跟踪方法还包括：获取第一目标跟踪结果的尺度特征。8.根据权利要求7所述的目标跟踪方法，其特征在于，获取第一目标跟踪结果的尺度特征，包括：获取多尺度模板感兴趣区域ROI特征；获取第一目标跟踪结果的ROI特征，其中，第一目标跟踪结果的ROI特征包括至少一个尺度的ROI特征；基于所述多尺度模板ROI特征和第一目标跟踪结果的ROI特征确定第一目标跟踪结果的尺度特征。9.根据权利要求8所述的目标跟踪方法，其特征在于，在基于所述多尺度模板ROI特征和第一目标跟踪结果的ROI特征确定第一目标跟踪结果的尺度特征之前，所述目标跟踪方法还包括：基于第一目标跟踪结果的表观特征对第一目标跟踪结果的ROI特征中的每个尺度的ROI特征进行特征对齐。10.根据权利要求8所述的目标跟踪方法，其特征在于，基于所述多尺度模板ROI特征和第一目标跟踪结果的ROI特征确定第一目标跟踪结果的尺度特征，包括：将所述多尺度模板ROI特征和第一目标跟踪结果的ROI特征执行相关计算，获得第一目标跟踪结果的尺度特征。11.根据权利要求10所述的目标跟踪方法，其特征在于，将所述多尺度模板ROI特征和第一目标跟踪结果的ROI特征执行相关计算，包括：将第一目标跟踪结果的ROI特征中的每个尺度的ROI特征分别与所述多尺度模板特征执行相关计算。
12.根据权利要求8所述的目标跟踪方法，其特征在于，第一目标跟踪结果的ROI特征包括一个尺度的ROI特征，第一目标跟踪结果的尺度特征包括一维尺度特征。13.根据权利要求8所述的目标跟踪方法，其特征在于，第一目标跟踪结果的ROI特征包括多个尺度的ROI特征，第一目标跟踪结果的尺度特征包括二维尺度特征。14.根据权利要求6所述的目标跟踪方法，还包括：基于第一目标跟踪结果的表观特征对第一目标跟踪结果进行调整。15.一种目标跟踪装置，其特征在于，所述目标跟踪装置包括：目标确定单元，被配置为基于视频的当前帧图像的搜索区域确定第...

【专利技术属性】
技术研发人员：陈一伟，俞佳茜，潘思杨，朴昶范，李贤庭，王强，俞炳仁，
申请(专利权)人：三星电子株式会社，
类型：发明
国别省市：