一种基于观测终端网络的分布式车辆追踪方法与系统技术方案

本发明专利技术公开了一种基于观测终端网络的分布式车辆追踪方法与系统，方法包括：将观测终端位置人工标注，建立区域内观测终端分布图并人工标注观测终端位置及其连通情况，建立表述各个终端上下游关系的观测终端分布表，并将其预存于区域内各观测终端中；将当前终端位置与目标车辆首次观测时刻作为车辆ID，记录目标车辆首次观测时刻，提取目标车辆的语义信息和特征向量；设置下游观测终端与上游观测终端之间的交互；存储目标车辆经过的终端地理位置信息和经过时间信息，按照先后顺序，根据区域内观测终端分布图画出车辆轨迹。系统包括：计算单元和控制单元。本发明专利技术提高了追踪效率和精度。

A distributed vehicle tracking method and system based on observation terminal network

【技术实现步骤摘要】
一种基于观测终端网络的分布式车辆追踪方法与系统
本专利技术涉及车辆追踪领域，尤其涉及一种基于观测终端网络的分布式车辆追踪方法与系统。
技术介绍
随着视频监控和网络传输技术的快速发展，在各级城市的街道、路口、车站、重要建筑物普遍安装视频监控系统。通过对一定区域内的监控摄像机建立信息库，绘制区域内监控终端分布图，对于交通监控、安防都具有重大意义。以往在对目标车辆的追踪工作中，需要观察者长时间的对监控信息进行观察分析。近年来，计算机视觉与机器学习技术进步迅速，并在各个领域中都得到了广泛应用。诸如：人脸识别，行人识别等。在车辆追踪过程中，核心任务之一就是车辆的再识别任务，即从区域内不同的摄像头视频中选择出与目标车辆一致的车辆图像。这项任务可以借助计算机视觉技术完成，从而大大节约人力物力。现有的相关技术中，大多对时空信息利用不充分，也少有语义层次上的筛选，仅仅依赖单独的特征匹配方法，导致对车辆的追踪效率并不高。
技术实现思路
本专利技术提供了一种基于观测终端网络的分布式车辆追踪方法与系统，本专利技术提高了追踪效率和精度，详见下文描述：一种基于观测终端网络的分布式车辆追踪方法，所述方法包括以下步骤：将观测终端位置人工标注，建立区域内观测终端分布图并人工标注观测终端位置及其连通情况，建立表述各个终端上下游关系的观测终端分布表，并将其预存于区域内各观测终端中；将当前终端位置与目标车辆首次观测时刻作为车辆ID，记录目标车辆首次观测时刻ti，提取目标车辆的语义信息和特征向量；设置下游观测终端与上游观测终端之间的交互；存储目标车辆经过的终端地理位置信息和经过时间信息，按照先后顺序，根据区域内观测终端分布图画出车辆轨迹。其中，所述下游观测终端与上游观测终端之间的交互具体为：上游观测终端将目标车辆的首次观测时刻ti，目标车辆的语义信息和特征向量传递给其全部下游终端；下游终端提取候选车辆图像的特征向量，将其与目标车辆的特征向量进行匹配，将匹配分数与车辆时间信息反馈给上游观测终端；上游观测终端对来自下游观测终端的匹配分数进行排序，向获得匹配分数最高者的下游终端传递该车辆的ID；收到该ID的下游终端，记录该ID及其在本终端出现的时刻，并作为下一轮追踪的上游观测终端，向其下游终端传递来自首次追踪的上游终端的目标车辆信息。进一步地，所述候选车辆图像具体为：下游观测终端将ti时刻之后监控摄像机内的视频流，作为候选视频流，检测候选视频流中含有车辆的帧，将单个车辆的图像裁剪出来，提取车辆图像的语义信息，根据目标车辆的语义信息进行筛选，留下符合语义要求的车辆图像，作为候选车辆图像。其中，所述方法将图像语义提取、特征提取、相似性得分及匹配分数排序的计算过程放在观测终端。一种基于观测终端网络的分布式车辆追踪系统，所述系统通过基于观测终端网络的分布式观测终端实现车辆追踪，所述观测终端包括，计算单元用于车辆的检测、识别，通过时间、语义信息进行筛选，得出匹配分数；控制单元用于下游观测终端匹配分数排序和确定车辆路线，传递车辆信息。其中，所述计算单元包括：监控摄像机，时间筛选模块，车辆检测模块，语义提取模块，语义筛选模块，特征提取模块，特征匹配模块。进一步地，所述特征匹配模块采用在大型数据集上预训练过的卷积神经网络实现。其中，所述控制单元包括：收发模块，匹配分数排序模块。本专利技术提供的技术方案的有益效果是：1、本专利技术提出了建立区域内观测终端分布图，为车辆追踪任务提供了有利的先验条件，提高车辆追踪的效率；2、本专利技术提出了使用语义信息对车辆图像进行筛选，减少匹配的车辆图像数，进一步提高车辆追踪的效率；3、本专利技术将图像语义提取、特征提取、相似性得分及匹配分数排序等计算过程放在观测终端，提高了运行效率。附图说明图1为区域内观测终端网络的分布式示意图；图2为上下游观测终端交互示意图。具体实施方式为使本专利技术的目的、技术方案和优点更加清楚，下面对本专利技术实施方式作进一步地详细描述。实施例1一种基于观测终端网络的分布式车辆追踪方法，在小区范围内，使用已有的监控系统对进入小区的车辆进行追踪，该方法包括以下几个步骤：一、建立区域内观测终端分布图和分布表根据小区地图，将观测终端位置人工标注，建立区域内观测终端分布图。按照观测终端分布图，人工标注观测终端位置及其连通情况，建立表述各个终端上下游关系的观测终端分布表，并将其预存于区域内各观测终端中。表1观测终端分布表示例上游观测终端下游观测终端AB,C,DBA,ECA,F…………二、提取目标车辆的语义信息和特征向量设置小区入口处观测终端为初始观测终端，指定目标车辆，将当前终端位置与目标车辆首次观测时刻作为车辆ID，记录目标车辆首次观测时刻ti，其中i为观测终端标号。提取目标车辆的语义信息和特征向量。例如，语义信息包括：是否为小型乘用车、仓背乘用车、越野乘用车、短头乘用车、城市客车、货车；是否为白色、黑色、银灰色、红色、绿色、蓝色；是否有顶灯、行李架、尾翼。该观测终端的地理位置作为车辆轨迹起点。三、下游观测终端与上游观测终端之间的交互查询预存的区域内观测终端分布表，得到该观测终端的各个下游观测终端，向下游观测终端传递目标车辆本次观测时刻ti，语义信息和特征向量。下游观测终端将ti时刻之后监控摄像机内的视频流，作为候选视频流，检测候选视频流中含有车辆的帧，将单个车辆的图像裁剪出来，提取车辆图像的语义信息，根据目标车辆的语义信息进行筛选，留下符合语义要求的车辆图像，作为候选车辆图像。提取候选车辆图像的特征向量，将其与目标车辆的特征向量进行匹配，将匹配分数与车辆时间信息反馈给上游观测终端。上游观测终端对来自下游观测终端的匹配分数进行排序，向获得匹配分数最高者的下游终端传递该车辆的ID。收到该ID的下游终端，记录该ID及其在本终端出现的时刻，并作为下一轮追踪的上游观测终端，向其下游终端传递来自首次追踪的上游终端的目标车辆信息。四、根据区域内观测终端分布图画出目标车辆的轨迹存储目标车辆经过的终端地理位置信息和经过时间信息，按照时间先后顺序，根据区域内观测终端分布图画出车辆轨迹。其中，上述第三部分中的检测候选视频流中含有车辆的帧，将单个车辆的图像裁剪出来，可通过经典的目标检测算法实现，例如：在ImageNet数据集上预训练过的YOLO，SSD或Faster-RCNN。其中，上述第二部分和第三部分中的提取车辆的语义信息，可以通过将车辆图片输入事先训练好的语义提取模型中，得到输出的车辆语义信息。该语义提取模型的训练过程示例如下：选取大规模车辆再识别数据库VeRi-776作为模型训练集，将每张车辆图像按照比例(1：2：1)分为上，中，下三个部分，提取8个通道(RGB\HS\YCbcr)的颜色信息，以及在亮度通道上提取的21个纹理滤波器(GaborandSchmid)。其中，Gabor滤波器的参数γ，θ，λ，σ被设置为(0.3,0,4,2),(0.3,0,8,2),(0.4,0,4,1),(0.4,0,4,1),(0.3,π/2,4,2),(0.3,π/2,8,2),(0.4,π/2,4,1)和(0.4,π/2,4,1)。其中，Schmid的参数τ和σ为(2,1),(4,1),(4,2),(6,1),(6,2),(6,3),(8,1),(8,2),(8,3),(本文档来自技高网...

【技术保护点】
1.一种基于观测终端网络的分布式车辆追踪方法，其特征在于，所述方法包括以下步骤：将观测终端位置人工标注，建立区域内观测终端分布图并人工标注观测终端位置及其连通情况，建立表述各个终端上下游关系的观测终端分布表，并将其预存于区域内各观测终端中；将当前终端位置与目标车辆首次观测时刻作为车辆ID，记录目标车辆首次观测时刻ti，提取目标车辆的语义信息和特征向量；设置下游观测终端与上游观测终端之间的交互；存储目标车辆经过的终端地理位置信息和经过时间信息，按照先后顺序，根据区域内观测终端分布图画出车辆轨迹。

【技术特征摘要】
1.一种基于观测终端网络的分布式车辆追踪方法，其特征在于，所述方法包括以下步骤：将观测终端位置人工标注，建立区域内观测终端分布图并人工标注观测终端位置及其连通情况，建立表述各个终端上下游关系的观测终端分布表，并将其预存于区域内各观测终端中；将当前终端位置与目标车辆首次观测时刻作为车辆ID，记录目标车辆首次观测时刻ti，提取目标车辆的语义信息和特征向量；设置下游观测终端与上游观测终端之间的交互；存储目标车辆经过的终端地理位置信息和经过时间信息，按照先后顺序，根据区域内观测终端分布图画出车辆轨迹。2.根据权利要求1所述的一种基于观测终端网络的分布式车辆追踪方法，其特征在于，所述下游观测终端与上游观测终端之间的交互具体为：上游观测终端将目标车辆的首次观测时刻ti，目标车辆的语义信息和特征向量传递给其全部下游终端；下游终端提取候选车辆图像的特征向量，将其与目标车辆的特征向量进行匹配，将匹配分数与车辆时间信息反馈给上游观测终端；上游观测终端对来自下游观测终端的匹配分数进行排序，向获得匹配分数最高者的下游终端传递该车辆的ID；收到该ID的下游终端，记录该ID及其在本终端出现的时刻，并作为下一轮追踪的上游观测终端，向其下游终端传递来自首次追踪的上游终端的目标车辆信息。3.根据权利要求2所述的一种基于观测终端网络的分布式车辆追踪方法，其特征在于，所...

【专利技术属性】
技术研发人员：苏育挺，陈琦，周俊洁，井佩光，
申请(专利权)人：天津大学，
类型：发明
国别省市：天津,12