一种基于综合管廊视频监控系统的人员轨迹定位方法技术方案

本发明专利技术涉及城市综合管廊计算机技术领域，且公开了一种基于综合管廊视频监控系统的人员轨迹定位方法，首先对监控现场中视频监控设备的视频流，通过RTSP协议进行拉取，获取视频影像序列，并对多个视频纹理进行增强显示处理和融合处理。本发明专利技术通过实时捕捉视频流中的人员对象，结合后台算法获取目标对象所在纹理的坐标信息，存储坐标信息，在地图上实时绘制目标对象的行进轨迹，进行动态显示，通过视频监控系统进行巡检人员定位能够克服地下环境定位不准确、延时过长、空间定位无法实现等难题，降低运营成本，提高工作效率，保障公共环境下人员安全风险。

A method of human trajectory location based on the video monitoring system of the integrated pipe gallery

【技术实现步骤摘要】
一种基于综合管廊视频监控系统的人员轨迹定位方法
本专利技术涉及城市综合管廊计算机
，尤其涉及一种基于综合管廊视频监控系统的人员轨迹定位方法。
技术介绍
管廊安全是管廊运维过程中的重要环节，视频监控信息是描述管廊内部安全中心状况最为直观的资料，也是管廊运维管理过程中核心数据的来源，传统的视频监控系统是管廊内部所有的视频探头投影到电脑屏幕上，进行平铺显示。存在以下缺点：(1)用户无法直接了解管廊内部监控点摄像头安装的具体位置和周围环境，(2)由于监控点之间不存在拓扑依赖关系，无法整体还原管廊内部的现场情况，(3)由于管廊处于地下，受定位方式和信号强度的影响，人员在管廊内部巡检的过程中，一般无法精准的判定人员在管廊内部行进的具体路径和位置。
技术实现思路
为了实现上述目的，本专利技术采用了如下技术方案：一种基于综合管廊视频监控系统的人员轨迹定位方法，其特征在于：包括以下步骤：S1、获取监控现场视频影像序列，对视频纹理进行增强显示处理并融合处理得到全景视频融合的视频序列；S2、对视频影像序列进行标注和视频推流形成标记视频流；S3、将标记视频流序列与地表三维模型进行配准，估算摄像头姿态；S4、对视频影像序列进行纹理映射，实现视频流在三维场景下的集成渲染；S5、根据渲染结构获取视频流中标注的行人坐标信息，并在二维地图上进行重绘显示。其中，步骤S1具体为实时拉取摄像头的实时视频流，将视频流分解为视频影像序列，获取影像序列的相似点，通过相似点计算视频影像序列的变换矩阵，对视频影像序列做矩阵变换和图像融合操作，得到同一时段的全景视频融合的视频序列。其中，通过RTSP协议实时拉取摄像头的实时视频流；优选地，使用EmguCV图像处理库将相关摄像头的视频流分解为视频影像序列；优选地，通过SIFT获取影像序列的相似点。其中，步骤S2具体为将全景视频融合的视频序列数据送入行人检测识别引擎中，动态标注目标对象，将标记后的全景视频融合的视频序列重新组装成标记视频流。其中，步骤S3中标记视频流序列二维点与地表三维模型中三维点的配准通过筛选匹配特征点实现，具体为遍历计算标记视频流序列中的一个SIFT关键点到三维模型上的SIFT特征点的欧式距离，得到临近点D1和次临近点D2，当D1/D2<1时，认为这个SIFT关键点为匹配特征点。优选地，采用RANSAC对匹配特征点进行二次筛选，得到精确匹配特征点。其中，根据标记视频流序列二维点与地表三维模型中三维点对应关系估算摄像头姿态，假设相机矩阵为P，地表三维点为X，在影像上的对应点x＝[u,v,1]T满足关系：λx＝PX(1)令P1，P2，P3分别为表示相机矩阵的一、二、三行，则：令则AP＝0(4)。优选地，当匹配点对个数大于7时，采用最小二乘法求解相机矩阵的解。其中，步骤S4中纹理映射具体过程为：S4-1根据摄像头姿态建立标记视频流序列二维点与地表三维模型中三维点的映射关系；S4-2采用插值的方式得到当前屏幕像素对应的纹理坐标；S4-3进行纹理拾取，将映射纹理投影到地表三维模型显示，根据视频的fps进行视频影像的刷新显示。其中，根据行人像素坐标获取地理坐标，绘制行为轨迹；优选地，行人在标记视频流中出现的位置为行人像素坐标，根据建立的世界坐标系和图像像素坐标系之间的函数关系确定地理坐标；优选地，通过GIS技术绘制行为轨迹。与现有技术相比，本专利技术的有益效果是：1.通过视频流投影技术，将视频流作为纹理数据投影在三维管廊模型的内表面，进行实时监控视频流的显示，2.采用视频流纹理融合技术消除多路视频之间的色差拼缝，充分还原三维管廊内部的动态信息，3.通过实时捕捉视频流中的人员对象，结合后台算法获取目标对象所在纹理的坐标信息，存储坐标信息，在地图上实时绘制目标对象的行进轨迹，进行动态显示，4.通过视频监控系统进行巡检人员定位能够克服地下环境定位不准确、延时过长、空间定位无法实现等难题，降低运营成本，提高工作效率，保障公共环境下人员安全风险。附图说明图1为本专利技术视频流与三维场景实时集成技术流程图。具体实施方式下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。在本专利技术的描述中，需要理解的是，术语“上”、“下”、“前”、“后”、“左”、“右”、“顶”、“底”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本专利技术和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本专利技术的限制。一种基于综合管廊视频监控系统的人员轨迹定位方法，其特征在于：包括以下步骤：S1、获取监控现场视频影像序列，对视频纹理进行增强显示处理并融合处理得到全景视频融合的视频序列；S2、对视频影像序列进行标注和视频推流形成标记视频流；S3、将标记视频流序列与地表三维模型进行配准，估算摄像头姿态；S4、对视频影像序列进行纹理映射，实现视频流在三维场景下的集成渲染；S5、根据渲染结构获取视频流中标注的行人坐标信息，并在二维地图上进行重绘显示。其中，步骤S1具体为实时拉取摄像头的实时视频流，将视频流分解为视频影像序列，获取影像序列的相似点，通过相似点计算视频影像序列的变换矩阵，对视频影像序列做矩阵变换和图像融合操作，得到同一时段的全景视频融合的视频序列。具体可通过RTSP协议实时拉取摄像头的实时视频流，再使用EmguCV图像处理库将相关摄像头的视频流分解为视频影像序列，最后通过SIFT获取影像序列的相似点。其中，步骤S2具体为将全景视频融合的视频序列数据送入行人检测识别引擎中，动态标注目标对象，将标记后的全景视频融合的视频序列重新组装成标记视频流。其中，步骤S3中标记视频流序列二维点与地表三维模型中三维点的配准通过筛选匹配特征点实现，具体为遍历计算标记视频流序列中的一个SIFT关键点到三维模型上的SIFT特征点的欧式距离，得到临近点D1和次临近点D2，当D1/D2<1时，认为这个SIFT关键点为匹配特征点。为了获得精准数据，采用RANSAC对匹配特征点进行二次筛选，得到精确匹配特征点。再根据标记视频流序列二维点与地表三维模型中三维点对应关系估算摄像头姿态，假设相机矩阵为P，地表三维点为X，在影像上的对应点x＝[u,v,1]T满足关系：λx＝PX(1)令P1，P2，P3分别为表示相机矩阵的一、二、三行，则：令则AP＝0(4)。当匹配点对个数大于7时，采用最小二乘法求解相机矩阵的解。相机参数值包括：视场角、经度、维度、高程、Yaw航偏角、Pitch倾本文档来自技高网...

【技术保护点】
1.一种基于综合管廊视频监控系统的人员轨迹定位方法，其特征在于：包括以下步骤：/nS1、获取监控现场视频影像序列，对视频纹理进行增强显示处理并融合处理得到全景视频融合的视频序列；/nS2、对视频影像序列进行标注和视频推流形成标记视频流；/nS3、将标记视频流序列与地表三维模型进行配准，估算摄像头姿态；/nS4、对视频影像序列进行纹理映射，实现视频流在三维场景下的集成渲染；/nS5、根据渲染结构获取视频流中标注的行人坐标信息，并在二维地图上进行重绘显示。/n

【技术特征摘要】
1.一种基于综合管廊视频监控系统的人员轨迹定位方法，其特征在于：包括以下步骤：
S1、获取监控现场视频影像序列，对视频纹理进行增强显示处理并融合处理得到全景视频融合的视频序列；
S2、对视频影像序列进行标注和视频推流形成标记视频流；
S3、将标记视频流序列与地表三维模型进行配准，估算摄像头姿态；
S4、对视频影像序列进行纹理映射，实现视频流在三维场景下的集成渲染；
S5、根据渲染结构获取视频流中标注的行人坐标信息，并在二维地图上进行重绘显示。


2.根据权利要求1所述的一种基于综合管廊视频监控系统的人员轨迹定位方法，其特征在于：步骤S1具体为实时拉取摄像头的实时视频流，将视频流分解为视频影像序列，获取影像序列的相似点，通过相似点计算视频影像序列的变换矩阵，对视频影像序列做矩阵变换和图像融合操作，得到同一时段的全景视频融合的视频序列。


3.根据权利要求2所述的一种基于综合管廊视频监控系统的人员轨迹定位方法，
其特征在于：通过RTSP协议实时拉取摄像头的实时视频流；
优选地，使用EmguCV图像处理库将相关摄像头的视频流分解为视频影像序列；
优选地，通过SIFT获取影像序列的相似点。


4.根据权利要求1所述的一种基于综合管廊视频监控系统的人员轨迹定位方法，其特征在于：步骤S2具体为将全景视频融合的视频序列数据送入行人检测识别引擎中，动态标注目标对象，将标记后的全景视频融合的视频序列重新组装成标记视频流。


5.根据权利要求3所述的一种基于综合管廊视频监控系统的人员轨迹定位方法，其特征在于：步骤S3中标记视频流序列二维点与地表三维模型中三维点的配准通过筛选匹配特征点实现，具体为遍历计算标记视频流序列中的一个SIFT关键点到三维模型上的SIFT特...

【专利技术属性】
技术研发人员：姜云龙，刘超，史寅玉，田富海，施泽杰，
申请(专利权)人：中冶天工集团有限公司，
类型：发明
国别省市：天津;12