【技术实现步骤摘要】
用于跟踪视频序列中的对象的装置和方法以及存储介质
本公开涉及用于跟踪视频序列中的对象的装置和方法以及存储介质。
技术介绍
用于跟踪视频序列中的对象的对象跟踪技术确定对象在视频序列中的每个视频帧中的位置,并且生成对象的长时跟踪轨迹。对象跟踪技术在监控领域变得越来越重要。对象跟踪技术通常在“基于检测的跟踪”("tracking-by-detection")的工作流程下开发,该工作流程包括两个主要处理:使用检测器检测每个视频帧中的对象(或对象的一部分)的检测处理;以及使用跟踪模板跟踪视频帧中的对象(或对象的一部分)以建立长时跟踪轨迹的跟踪处理。更具体而言,对象跟踪技术在首次检测到对象(或对象的一部分)时初始化跟踪模板。之后,对象跟踪技术在后续视频帧中使用跟踪模板来跟踪对象(或对象的一部分)。此外,对象跟踪技术使用跟踪结果更新跟踪模板以避免跟踪的漂移。
技术实现思路
本公开的目的是提供具有改进的跟踪精度的对象跟踪装置和方法。本公开提出了一种用于跟踪视频序列中的对象的装置。该装置可以包括:第一预测单元,被配置成对于当前视频帧,基于当前视频帧和一个或多个先前视频帧的使用第一跟踪模板跟踪对象的第一部位的结果来预测第一部位在后续视频帧中是否可见;第一更新单元,被配置成在第一预测单元预测第一部位在后续视频帧中不可见的情况下,基于当前视频帧中的对象的第二部位的图像来更新用于跟踪第二部位的第二跟踪模板;以及切换单元,被配置成对于后续视频帧,将跟踪方式从使用第一跟踪模板跟踪第一部位切换到使用更新后的第二跟踪模板跟踪第二部位。从参考附图的以下描述中,本公开的其他特点特征和优点将变得清楚 ...
【技术保护点】
1.一种用于跟踪视频序列中的对象的装置,其特征在于,所述装置包括:第一预测单元,被配置成对于当前视频帧,基于当前视频帧和一个或多个先前视频帧的使用第一跟踪模板跟踪对象的第一部位的结果来预测第一部位在后续视频帧中是否可见;第一更新单元,被配置成在第一预测单元预测第一部位在后续视频帧中不可见的情况下,基于当前视频帧中的对象的第二部位的图像来更新用于跟踪第二部位的第二跟踪模板;以及切换单元,被配置成对于后续视频帧,将跟踪方式从使用第一跟踪模板跟踪第一部位切换到使用更新后的第二跟踪模板跟踪第二部位。
【技术特征摘要】
1.一种用于跟踪视频序列中的对象的装置,其特征在于,所述装置包括:第一预测单元,被配置成对于当前视频帧,基于当前视频帧和一个或多个先前视频帧的使用第一跟踪模板跟踪对象的第一部位的结果来预测第一部位在后续视频帧中是否可见;第一更新单元,被配置成在第一预测单元预测第一部位在后续视频帧中不可见的情况下,基于当前视频帧中的对象的第二部位的图像来更新用于跟踪第二部位的第二跟踪模板;以及切换单元,被配置成对于后续视频帧,将跟踪方式从使用第一跟踪模板跟踪第一部位切换到使用更新后的第二跟踪模板跟踪第二部位。2.如权利要求1所述的装置,其中,所述对象包括目标人,所述第一部位包括人脸,并且所述第二部位包括头-上半身。3.如权利要求2所述的装置,其中,所述第一预测单元还被配置成:基于当前视频帧和所述一个或多个先前视频帧的目标人的人脸几何信息,计算目标人的人脸几何信息的变化率;以及在计算出的变化率满足预先设定的标准的情况下,预测目标人的人脸在后续视频帧中不可见。4.如权利要求3所述的装置,其中,所述人脸几何信息包括表示人脸姿态的值和/或表示人脸大小的值。5.如权利要求2所述的装置,其中,所述第一更新单元还被配置成:对于当前视频帧,检测目标人的人脸附近的一个或多个头-上半身;以及在检测到的头-上半身当中的对应的头-上半身与目标人的人脸基于它们之间的几何关系相关联的情况下,使用所述对应的头-上半身的图像来更新第二跟踪模板。6.如权利要求5所述的装置,其中,所述第一更新单元还被配置成:对于当前视频帧,在未能将对应的头-上半身与目标人的人脸进行关联的情况下,使用在利用目标人的人脸的位置而估计出的目标人的头-上半身的位置处的头-上半身的图像来更新第二跟踪模板。7.如权利要求2所述的装置,还包括:第二预测单元,被配置成对于使用第二跟踪模板来跟踪目标人的头-上半身的第二当前视频帧,预测头-上半身在第二后续视频帧中是否可见;以及第二更新单元,被配置成在第二预测单元预测头-上半身在第二后续视频帧中不可见的情况下,基于第二当前视频帧中的目标人的人脸的图像来更新第一跟踪模板,并且其中,所述切换单元还被配置成:对于第二后续视频帧,将跟踪方式从使用第二跟踪模板跟踪头-上半身切换到使用更新后的第一跟踪模板跟踪人脸。8.如权利要求7所述的装置,其中,所述第二预测单元还被配置成:基于第二后续视频帧中的目标人的头-上半身的估计位置和第二后续视频帧中的其他人的估计位置,预测目标人的头-上半身在第二后续视频帧中是否被其他人遮挡。9.如权利要求7所述的装置,其中,所述第二更新单元还被配置成:对于第二当前视频帧,检测目标人的头-上半身附近的一个或多个人脸;以及在检测到的人脸当中的对应的人脸与目标人的头-上半身基于它们之间的几何关系相关联的情况下,使用所述对应的人脸的图像来更新第一跟踪模板。10.如权利要求9所述的装置,其中,所述第二更新单元还被配置成:对于第二当前视频帧,在未能将对应的人脸与目标人的头-上半身进行关联的情况下,使用在利用目标人的头-上半身的位置估计出的目...
【专利技术属性】
技术研发人员:李荣军,李献,黄耀海,
申请(专利权)人:佳能株式会社,
类型:发明
国别省市:日本,JP
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。