一种基于动态选取显著特征的跨卡口行人识别系统与方法技术方案

本发明专利技术涉及一种基于动态选取显著特征的跨卡口行人识别系统，包括城市卡口视频采集模块、行人检测与跟踪模块、多特征提取模块、特征挖掘模块、显著特征选取模块和行人识别模块；本发明专利技术还涉及一种基于动态选取显著特征的跨卡口行人识别方法；本发明专利技术的有益效果是：能够动态选取特征信息，不是采用将多种特征直接融合的方式，而是通过对各特征信息进行特征独特程度分析和处理，寻找行人识别分辨力最强的多种特征相融合的方式；解决了单一特征对行人识别不可靠的问题，通过该系统去除行人识别的冗余特征信息，寻找到最大区分行人识别的特征，提高了行人识别的鲁棒性。

【技术实现步骤摘要】

本专利技术涉及智能交通监控中的一种行人识别
，尤其涉及一种。
技术介绍
随着平安城市战略的启动，大量的网络监控摄像机被安装各个交通要道。当事件发生后，需要工作人员从海量监控视频画面中寻找可疑目标行人。面对海量的监控视频，工作人员难免觉得枯燥无味。如果工作人员过长时间盯着屏幕的监控画面难免就会造成眼睛的视觉疲劳加上每个工作人员的经验或者兴趣不一致导致结果的不一致性，最后给追踪可疑行人目标带来了困难。跨卡口行人识别是指在非重叠视域多摄像机监控下进行的行人匹配，即如何确认不同城市卡口位置的摄像机在不同时刻发现的目标是否为同一人。然而，目前跨卡口行人识别还处于研究阶段，还没有一套高鲁棒性的基于视频的行人识别系统。交通道路监控采用大多采用的500万像素的高清摄像机，但是让计算机能够从视频中寻找目标行人具有一定的挑战。由于摄像机的成像受参数、光照条件、角度、背景等因素的影响，导致不同摄像机拍摄的同一目标差异较大。也即不是所有的特征比对方法用于行人识别是放之四海而皆准，为解决单一特征比对行人目标识别率较低，只有将多个特征进行融合才能保证识别效果。将多个特征简单直接拼接识别率反而不高，因为环境或者行人的某些部位发生改变，用于识别的特征失效。一种基于动态选取显著特征的行人再识别方法，根据场景的变化自适应地从多种特征中选取对识别起作用的特征，也即选取显著特征来提高在实际场景中行人识别的鲁棒性。
技术实现思路
本专利技术所要解决的技术问题是提供，解决了单一特征对行人识别不可靠的问题，通过该系统去除行人识别的冗余特征信息，寻找到最大区分行人识别的特征，提高了行人识别的鲁棒性。本专利技术解决上述技术问题的技术方案如下:一种基于动态选取显著特征的跨卡口行人识别系统，包括城市卡口视频采集模块、行人检测与跟踪模块、多特征提取模块、特征挖掘模块、显著特征选取模块和行人识别模块，所述城市卡口视频采集模块，用于从各个城市卡口监控设备上采集各路视频画面；所述行人检测与跟踪模块，用于从采集到的视频画面中获取多张连续的图片，在连续的图片中检测是否有目标行人，如果有则捕获多帧该目标行人的序列行人图片；所述多特征提取模块，用于从序列行人图片中提取出目标行人的各个特征信息；所述特征挖掘模块，用于对提取的各个特征信息进行第一量化处理和第二量化处理，再分别将经过第一量化处理和第二量化处理的特征信息的结果进行相加，得到各个特征信息的独特程度等级结果；所述显著特征选取模块，用于根据各个特征信息的独特程度等级结果建立特征选取模型，所述特征选取模型用于给各个特征信息分配权重值，并根据权重值的大小从所有特征信息中筛选出对识别起作用的显著特征信息；所述权重值为0、1、2，权重值越高该特征信息的显著性越强。所述行人识别模块，用于根据所述特征选取模型分别对序列行人图片和行人目标图片中进行处理，从而从序列行人图片中找到与行人目标图片最相近的行人图片，并将找到的行人图片发送至监控视频设备中。本专利技术的有益效果是:能够动态选取特征信息，不是采用将多种特征直接融合的方式，而是通过对各特征信息进行特征独特程度分析和处理，寻找行人识别分辨力最强的多种特征相融合的方式；解决了单一特征对行人识别不可靠的问题，通过该系统去除行人识别的冗余特征信息，寻找到最大区分行人识别的特征，提高了行人识别的鲁棒性。在上述技术方案的基础上，本专利技术还可以做如下改进。进一步，所述行人检测与跟踪模块包括行人检测单元和行人跟踪单元，所述行人检测单元，用于从采集到的视频画面中获取多张连续的图片，并在连续的图片中检测ROI区域是否有目标行人；采用二次行人检测的方式，先采用相邻4帧做帧差法粗略定位到运动目标，然后采用HOG和SVM行人检测做二次精确定位方式。所述行人跟踪单元，用于从ROI区域检测到目标行人后，捕获该ROI区域内多帧该目标行人的序列行人图片。检测到目标行人后，对运动行人建立索引，依赖运动目标的帧间关系跟踪行人的位置变化。当第t帧检测到该运动行人，那么t+Ι帧该运动行人在原ROI区域的位置变化不大。每隔20帧重复所述二次行人检测方式更新运动行人的位置。采用上述进一步方案的有益效果是:能够准确识别行人。设置ROI区域，便于提取到行人识别算法最佳的行人图片。采用跟踪，能够捕获到更多的行人可靠行人识别的静态和动态方面的特征。进一步，所述多特征提取模块包括颜色特征提取单元、纹理特征提取单元、轮廓特征提取单元和姿态提取单元，所述颜色特征提取单元，用于提取目标行人的头部、上半身和下半身的外观颜色信息，所述外观颜色信息包括HSV颜色空间、RGB颜色空间和LAB颜色空间的信息，所述HSV颜色空间、RGB颜色空间和LAB颜色空间分为RGB、H、S、A和B颜色通道，组成所述上半身和下半身的直方图各需124维数据的颜色通道，所述124维数据包括RGB颜色通道取出24维数据、H颜色通道取出20维数据、S颜色通道取出16维数据、A、B颜色空间各取32维数据；所述纹理特征提取单元，用于提取目标行人的头部、颈部和肩部位置的外观纹理信息，所述外观纹理信息采用Gabor方法、Schmid滤波器方法以及Gabor和LBP相融合的方法获得；所述轮廓特征提取单元，用于提取目标行人的外观轮廓信息，所述外观轮廓信息包括整体外观轮廓和局部外观轮廓的信息；所述姿态提取单元，用于采用动态贝叶斯网络方法来提取目标行人的行走姿态信息，所述行走姿态信息包括步态轮廓信息、运动幅度信息和节奏信息。采用上述进一步方案的有益效果是:提取多种行人识别的特征信息，解决单一特征对行人识别不可靠的问题。行人识别多特征提取模块虽然提取到了更多的具有分辨力行人识别特征，但是也提取到了大量的冗余信息。如果不能很好地去除这些冗余特征信息可能会导致行人识别率还不如单一特征行人识别可靠。进一步，所述特征挖掘模块包括特征独特程度鉴定单元、特征受噪声干扰敏感程度鉴定单元和综合得分模块，所述特征独特程度鉴定单元，用于对提取的各个特征信息进行第一量化处理:采用k-means算法对提取的各个特征逐一进行聚类，计算出与目标行人相近的特征行人数量N/行人数量总和M，利用N/M的比值进行特征独特程度分级，比值越小则该特征的独特程度等级越尚;所述特征受噪声干扰敏感程度鉴定单元，用于对提取的各个特征信息进行第二量化处理:采用Random forests算法获得各个特征信息对噪声灵敏度的得分，得分越高则该特征的独特程度等级越高；所述综合得分模块，用于分别将经过第一量化处理和第二量化处理的特征信息的比值和得分进行相加，将相加的结果发送给所述显著特征选取模块。采用上述进一步方案的有益效果是:不是简单地将多种特征机械地拼接，而是挖掘出对行人识别有较强分辨能力、稳定和可靠的特征信息，去除行人识别冗余的特征信息。进一步，所述比值小于0.1，则该特征信息为“最显著特征”，所述比值在0.1?0.6之间，则该特征信息为“一般显著特征”，所述比值大于0.6，则该特征信息为“不显著特征”；所述得分在75?100之间，则该特征信息为“最显著特征”;所述得分在40?75之间，则该特征信息为“一般显著特征”;所述得分在O?40之间，则该特征信息为“不显著特征”。所述权重值为0、1、2，其对应的独特程度等级分别为“最显著本文档来自技高网...

【技术保护点】
一种基于动态选取显著特征的跨卡口行人识别系统，其特征在于，包括城市卡口视频采集模块(1)、行人检测与跟踪模块(2)、多特征提取模块(3)、特征挖掘模块(4)、显著特征选取模块(5)和行人识别模块(6)，所述城市卡口视频采集模块(1)，用于从各个城市卡口监控设备(7)上采集各路视频画面；所述行人检测与跟踪模块(2)，用于从采集到的视频画面中获取多张连续的图片，在连续的图片中检测是否有目标行人，如果有则捕获多帧该目标行人的序列行人图片；所述多特征提取模块(3)，用于从序列行人图片中提取出目标行人的各个特征信息；所述特征挖掘模块(4)，用于对提取的各个特征信息进行第一量化处理和第二量化处理，再分别将经过第一量化处理和第二量化处理的特征信息的结果进行相加，得到各个特征信息的独特程度等级结果；所述显著特征选取模块(5)，用于根据各个特征信息的独特程度等级结果建立特征选取模型，所述特征选取模型用于给各个特征信息分配权重值，并根据权重值的大小从所有特征信息中筛选出对识别起作用的显著特征信息；所述行人识别模块(6)，用于根据所述特征选取模型分别对序列行人图片和行人目标图片中进行处理，从而从序列行人图片中找到与行人目标图片最相近的行人图片，并将找到的行人图片发送至监控视频设备(8)中。...

【技术特征摘要】

【专利技术属性】
技术研发人员：蔡晓东，杨超，王迪，吕璐，赵秦鲁，宋宗涛，甘凯今，王丽娟，陈超村，刘馨婷，
申请(专利权)人：桂林电子科技大学，
类型：发明
国别省市：广西;45