客流量统计方法及装置制造方法及图纸

本申请提供一种客流量统计方法及装置，该方法包括：经Faster R‑CNN检测出待统计区域的实时监控图像中的目标框的宽度、高度信息；获得预设数量的目标框的宽度范围和高度范围并结合预设的经验系数，确定尺寸过滤区间；在后续客流量统计中，根据所述尺寸过滤区间，对经RPN网络检测出的待统计区域的实时监控图像中的目标候选框进行过滤，获取位于尺寸过滤区间的目标候选框并输入至Fast R‑CNN网络，获得行人目标框；跟踪待统计区域内的各行人目标框，形成各行人目标框的跟踪轨迹；当所述跟踪轨迹满足计数触发条件时，则计数。本申请能够大大提高目标检测的正确率，可适用于更广和较为复杂的应用场景。

Method and device of passenger traffic statistics

The application provides a passenger traffic statistical method and device. The method includes: detecting the width and height information of the target frame in the real-time monitoring image to be counted through the Faster R CNN, obtaining the width and height range of the predetermined number of target frames, and determining the size filtering interval with the preset empirical coefficients. In the subsequent passenger traffic statistics, according to the size filtering interval, the target candidate frame in the real-time monitoring image which is detected by the RPN network is filtered, the target candidate box located in the size filtering interval is obtained and input to the Fast R CNN network to obtain the pedestrian target frame, and the tracking of each area in the statistical area is tracked. The pedestrian target box forms the tracking path of each pedestrian target frame, and counts when the tracking trajectory meets the counting trigger condition. This application can greatly improve the accuracy of target detection, and it can be applied to more extensive and complex application scenarios.

【技术实现步骤摘要】
客流量统计方法及装置
本申请涉及图像处理
，尤其涉及一种客流量统计方法及装置。
技术介绍
在许多公共场合(例如商场、公园等)都部署了客流量统计系统，以便实时获取某一区域的客流量大小，并根据统计结果来确定是是否采取疏导措施，防止由于客流量较大造成的踩踏等危险事件。常用的客流量统计方法有红外计数法和视频检测方法。其中基于视频检测技术的客流量统计方法一般采用Adaboost(一种迭代算法)或SVM(SupportVectorMachine，支持向量机)等模式识别实时采集的图像中的人头或头肩，根据人头或头肩的数量进行客流量统计。此类方法在实时检测时需要兼顾准确率和性能，而监控范围越大，统计耗时会越多，因此需要限制人数统计的监控范围，一般是3米宽以下，进出人数在10人内。其次，此类方法在客流量较少时准确率较高，但人群密集时准确性会迅速下降。另外，此类方法对场景的限制较多，例如相机安装角度、高度，这些都会给现场施工增加难度和成本。例如，该类客流量统计方法一般适用于竖直安装(行人间遮挡少)的情况，水平安装(行人间遮挡多)时检测率会大大降低。
技术实现思路
有鉴于此，本申请提供一种客流量统计方法及本文档来自技高网...

【技术保护点】
一种客流量统计方法，其特征在于，该方法包括：经Faster R‑CNN检测出待统计区域的实时监控图像中的目标框的宽度、高度信息；当所述目标框达到预设数量时，获得所述预设数量的目标框的宽度范围和高度范围；根据所述预设数量的目标框的宽度范围、高度范围以及预设的经验系数，确定尺寸过滤区间的宽度范围和高度范围；在后续客流量统计中，根据所述尺寸过滤区间的宽度范围和高度范围，对经RPN网络检测出的所述待统计区域的实时监控图像中的目标候选框进行过滤，获取位于所述尺寸过滤区间的宽度范围、高度范围内的目标候选框并输入至Fast R‑CNN网络，获得行人目标框；跟踪待统计区域内的各行人目标框，形成各行人目标框的跟...

【技术特征摘要】
1.一种客流量统计方法，其特征在于，该方法包括：经FasterR-CNN检测出待统计区域的实时监控图像中的目标框的宽度、高度信息；当所述目标框达到预设数量时，获得所述预设数量的目标框的宽度范围和高度范围；根据所述预设数量的目标框的宽度范围、高度范围以及预设的经验系数，确定尺寸过滤区间的宽度范围和高度范围；在后续客流量统计中，根据所述尺寸过滤区间的宽度范围和高度范围，对经RPN网络检测出的所述待统计区域的实时监控图像中的目标候选框进行过滤，获取位于所述尺寸过滤区间的宽度范围、高度范围内的目标候选框并输入至FastR-CNN网络，获得行人目标框；跟踪待统计区域内的各行人目标框，形成各行人目标框的跟踪轨迹；将各行人目标框的跟踪轨迹与预设的计数触发条件进行比较，当所述跟踪轨迹满足所述计数触发条件时，则计数。2.如权利要求1所述的客流量统计方法，其特征在于，将位于所述尺寸过滤区间的宽度范围、高度范围内的目标候选框并输入至FastR-CNN网络，获得行人目标框，具体包括：将位于所述尺寸过滤区间的宽度范围、高度范围内的目标候选框输入至FastR-CNN网络，获得行人目标框的置信度和对应的行人目标框位置信息；对所述行人目标框进行非极大值抑制，获取最终的行人目标框。3.如权利要求2所述的客流量统计方法，其特征在于，对所述行人目标框进行非极大值抑制，获取最终的行人目标框，具体包括：对所述行人目标框对应的置信度进行排序；两两比较所有行人目标框的交集并集之比，当两个行人目标框的交集并集之比大于预设阈值时，则舍弃置信度低的行人目标框，选择置信度高的行人目标框作为最终的行人目标框；或者判断两行人目标框的重合度是否大于等于预设重合度阈值，当两行人目标框的重合度大于等于预设重合度阈值时，则舍弃置信度低的行人目标框，选择置信度高的行人目标框作为最终的行人目标框。4.如权利要求1所述的客流量统计方法，其特征在于，所述跟踪待统计区域内的各行人目标框，形成各行人目标框的跟踪轨迹，具体包括：将当前帧图像中待统计区域内的行人目标框与前一帧图像中所述待统计区域内的各行人目标框一一进行特征目标匹配，所述特征目标匹配的步骤为：根据当前帧图像中行人目标框与前一帧图像中各行人目标框中心位置之间的距离、面积差值以及预设的匹配阈值，判断当前帧图像中的行人目标框是否与前一帧图像中的某一行人目标框相匹配，若匹配，则当前帧图像中的行人目标框与前一帧图像中的某一行人目标框为同一目标产生；否则，则定义该行人目标框为新的行人目标框。5.如权利要求4所述的客流量统计方法，其特征在于，当前帧图像的行人目标框和前一帧图像的行人目标框进行匹配的步骤为：分别获取当前帧图像中行人目标框的中心位置坐标、前一帧图像中行人目标框的中心位置坐标以及宽度大小；根据当前帧图像中行人目标框的中心位置坐标、前一帧图像中行人目标框的中心位置坐标以及宽度大小，计算两行人目标框中心位置之间的距离dist(a,b)和两行人目标框的面积差值diff_area(a,b)：其中，xa、ya分别为当前帧图像中的行人目标框中心位置的横坐标、纵坐标；xb、yb分别为前一帧图像中的行人目标框中心位置的横坐标、纵坐标；wa为当前帧图像中行人目标框的宽度大小；wb为前一帧图像中行人目标框的宽度大小；根据两行人目标框中心位置之间的距离dist(a,b)和两行人目标框的面积差值diff_area(a,b)，计算评价值Thr：其中，ω1、ω2、ω3、ω4和η均为设定的系数，ω1+ω2＝1，ω3×η+ω4＝1，η＞1；Thr_Direction为经验值；当Thr<Thr_Direction时，判断两行人目标框为同一目标的行人目标框；否则，两行人目标框不匹配，当前帧图像的行人目标框被定义为新的行人目标框。6.如权利要求1所述的客流量统计方法，其特征在于，所述计数触发条件包括预设运动方向和预设触发线，所述各行人目标框的跟踪轨迹包括该行人目标框的运动方向，所述行人目标框的运动方向为所述行人目标框在当前一帧图像中的位置与所述行人目标框在当前帧图像中的位置形成的矢量；所述行人目标框的运动方向的判断为：比较各行人目标框的运动方向与预设运动方向，当所述动方向与预设方向相同时，则认为所述行人目标框为进状态；反之，则认为所述行人目标框为出状态。7.如权利要求6所述的客流量统计方法，其特征在于，所述方法还包括：比较所述行人目标框在当前帧图像中的位置、前一帧图像中的位置与所述预设触发线的位置关系，当所述行人目标框在当前帧图像中的位置和前一帧图像中的位置分别位于所述预设触发线的两侧时，比较所述行人目标框的运动方向与预设运动方向是否一致，若一致，则进行进状态计数，若不一致，则进行出状态计数；当所述行人目标框在当前帧图像中的位置和前一帧图像中的位置分别位于所述预设触发线的同侧时，则不计数。8.如权利要求1-7任一项所述的客流量统计方法，其特征在于，还包括：在经RPN网络检测出实时监控图像中的目标候选框后，去除位于所述监控图像边界的目标候选框。9.如权利要求1-7任一项所述的客流量统计方法，其特征在于，所述方法还包括：将同一相机的监控图像划分为多个区域，对所述多个区域分别进行客流量统计。10.一种客流量统计装置，其特征在于，该装置包括：目标检测模块(100)，经FasterR-CNN检测出待统计区域的实时监控图像中的目标框的宽...

【专利技术属性】
技术研发人员：毛泉涌，徐茜，万超，
申请(专利权)人：浙江宇视科技有限公司，
类型：发明
国别省市：浙江,33