基于表征学习的跨摄像头视频行人搜索方法、终端设备和计算机可读存储介质技术

技术编号:43745040 阅读:35 留言:0更新日期:2024-12-20 13:04
本发明专利技术公开了基于表征学习的跨摄像头视频行人搜索方法、终端设备和计算机可读存储介质,包括如下步骤:获取跨摄像头视频行人数据,构建查询集以及查询集对应候选视频库;将视频输入到目标检测网络中,学习每个行人边界框、边界框的置信度分数以及每个行人的特征;将行人边界框和特征输入基于时序特征融合的多目标跟踪网络中,对视频帧进行数据关联,获取每个行人的轨迹以及每个轨迹的时序特征;将查询集中的行人轨迹特征向量与该行人在候选视频库中的所有行人轨迹特征向量进行相似度计算,并且进行精确度计算。本发明专利技术针对现实视频监控场景,通过利用视频中长期时序特征对行人特征进行提取以及数据关联,实现跨摄像头场景下下对目标行人的搜索。

【技术实现步骤摘要】

本专利技术目标检测、行人重识别和目标跟踪领域,具体涉及基于表征学习的跨摄像头视频行人搜索方法、终端设备和计算机可读存储介质


技术介绍

1、行人搜索是行人检测和行人重识别的结合,即给定某个目标行人,在跨摄像机未经裁剪的监控图像中准确检测并标识出该目标行人,能够同时回答“是谁,在哪”的问题,很大程度上增强与提升智能视觉监控的功能与效率。

2、然目前行人搜索已经在cuhk-sysu和prw这两个主流的数据集上取得了不错的效果,但是这两个数据集的容均是图像,与现实中的视频监控场景仍然存在一定偏差,难以在实际的监控视频系统中落地,因此,视频行人搜索也是在多摄像头多目标跟踪的基础上被提出,多摄像头多目标跟踪旨在从多个摄像机拍摄的视频流中确定每个人在任何时候的位置,而视频行人搜索在此基础上增加了查询模块,在整个场景中跨摄像头的视频数据中找到要查询行人的轨迹,所以,视频行人搜索也可以认为是多目标跟踪和视频行人重识别的结合。

3、在数据集方面,多摄像头多目标跟踪领域的一个重要数据集是dukemtmc,它是由杜克大学在2014年提出的校园监控视频数据本文档来自技高网...

【技术保护点】

1.一种基于表征学习的跨摄像头视频行人搜索方法,其特征在于,包括:

2.根据权利要求1所述的一种基于表征学习的跨摄像头视频行人搜索方法,其特征在于,获取跨摄像头视频行人数据,划分训练集和测试集;构建查询集以及查询集对应的候选视频库具体包括:

3.根据权利要求1所述的一种基于表征学习的跨摄像头视频行人搜索方法,其特征在于,将跨摄像头视频行人数据输入到目标检测网络中,学习每个行人边界框、边界框的置信度分数以及每个行人的特征,具体包括:

4.根据权利要求3所述的一种基于表征学习的跨摄像头视频行人搜索方法,其特征在于,获取每个行人的轨迹以及每个轨迹的时序特征包...

【技术特征摘要】

1.一种基于表征学习的跨摄像头视频行人搜索方法,其特征在于,包括:

2.根据权利要求1所述的一种基于表征学习的跨摄像头视频行人搜索方法,其特征在于,获取跨摄像头视频行人数据,划分训练集和测试集;构建查询集以及查询集对应的候选视频库具体包括:

3.根据权利要求1所述的一种基于表征学习的跨摄像头视频行人搜索方法,其特征在于,将跨摄像头视频行人数据输入到目标检测网络中,学习每个行人边界框、边界框的置信度分数以及每个行人的特征,具体包括:

4.根据权利要求3所述的一种基于表征学习的跨摄像头视频行人搜索方法,其特征在于,获取每个行人的轨迹以及每个轨迹的时序特征包括:

5.根据权利要求4所...

【专利技术属性】
技术研发人员:秦杰应天成权荣
申请(专利权)人:南京航空航天大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1