人流计数系统及其方法技术方案

一种人流计数系统及方法。首先，记录第一时间点的第一人脸信息于存储器中。其次，辨识摄影机在第二时间点撷取的图像是否为肤色区域。若为肤色区域且为真人脸，则进一步判断其为正面人脸或侧面人脸，并将判断结果记录在假性人脸信息中。接着，将假性人脸信息与第一人脸信息进行一对一相似度匹配，当相似度达到设定条件时，以假性人脸信息更新第一人脸信息，当相似度匹配未达到设定条件时，记录假性人脸信息为第二人脸信息于存储器中，并设定第一人脸信息被遮蔽。最后，根据存储器所记录的人脸，统计通过的人流数量。

【技术实现步骤摘要】

本专利技术是有关于一种人流计数的系统及方法，且特别是有关于一种计数并分析在 摄影机的摄录范围内的通过人流的系统。
技术介绍
随着无线传输与计算机科技的进步，加上平面显示器成本价格日趋下降，传统的 广告广告牌渐渐被电子广告牌所取代。在捷运、机场、百货公司和便利商店中，电子广告牌 已被用作公共信息与商业广告的传播，其所能带来的广告市场确实不容小觑。广告在不同平台上播放时，分别是利用不同方式萃取观众观看的营销信息，先前 技术提出通过点选的方式记录网页广告被观看的次数，而在电视广告和节目收视率方面， 可通过数字电视盒在观众操作遥控器时做记录。另外，对于某产品的观感也可通过问卷调 查或人力访查的方式取得营销信息，但所能获取的样本数与耗费的人力资源有极大的关 系，因此是成本与效益衡量的方法，而且在进行问卷调查的过程中多少会受到访查人员的 介入或大部分民众不喜欢被打扰的影响，自然所获得的调查结果会有所偏差。因此在调查 民众 对广告的喜好信息，最好的方式是在没有访查人员、且民众在最自然的情况下进行，所 得到的数据受到外力因素的影响较少，自然可信度大幅提高。先前技术提出一种「闸口进出人流计数方法」，方法是将摄影机置于入口处的天花 板上俯摄，以判断独立移动物体的方式计数通过人数，然而此方法不具有人脸辨识的功能， 因而无法获得同一时间观看广告的人流数量。另外另一先前技术亦曾提出以人脸辨识装置 取得目前观看广告的人流数量，但只能提供每个时间点注视广告的人流数量，并未有其它 进一步分析数据的功能可供参考。因此，除了具备计数人流的功能之外，如果能够更进一步 从不同注视程度分类统计出民众对广告的喜好程度，便能够更精确地评估广告效益。
技术实现思路
为了达到分析人流行为与评估广告效益的目的，本专利技术以肤色信息作为人脸检测 的基础，再辅以多张人脸追踪的技术建立人流计数系统，并进一步将获得的信息进行量化 分析工作，分类统计出不同注视程度的人流数量，以作为广告营销参考的依据。因此，本专利技术提供一种。以多张人脸追踪的算法，配合检测 人脸在某一时刻为正脸或是侧脸，以判断人脸于此时刻对于广告的注视程度，藉此实现人 流计数的量化分析，且能适用于多种不同的电子装置。因此，本专利技术的一方面是在于提供一种人流计数系统，包含追踪物体记录器、肤色 区域检测器、人脸检测器、关联性匹配运算器以及计数运算器。追踪物体记录器具有第一时 间点的第一人脸信息。肤色区域检测器，用以辨识摄影机在第二时间点撷取的图像是否为 肤色区域，其中第二时间点紧接在第一时间点之后。人脸检测器，用以判断肤色区域是否为 真人脸，若为真人脸则判断真人脸为正面人脸或侧面人脸，将判断的结果记录为假性人脸 信息。关联性匹配运算器，用以将假性人脸信息与第一人脸信息进行一对一相似度匹配，其中当相似度达到设定条件时，以假性人脸信息更新第一人脸信息，当相似度匹配未达到设定条件时，且假性人脸为真人脸时，则将假性人脸当作第二人脸信息加入至追踪物体记录 器中，并设定第一人脸信息被遮蔽。计数运算器，根据追踪物体记录器所记录的人脸，统计 通过人流数量。依据本专利技术另一方面是在于提供一种人流计数方法。首先，记录第一时间点的第 一人脸信息于存储器中。其次，辨识摄影机在第二时间点撷取的图像是否为肤色区域，其中 第二时间点紧接在第一时间点之后。判断肤色区域是否为真人脸，若为真人脸则判断真人 脸为正面人脸或侧面人脸，将判断的结果记录在假性人脸信息中。接着，将假性人脸信息与 第一人脸信息进行一对一相似度匹配，其中当相似度达到设定条件时，以假性人脸信息更 新第一人脸信息，当相似度匹配未达到设定条件时，记录假性人脸信息为第二人脸信息于 存储器中，并设定第一人脸信息被遮蔽。最后，根据存储器所记录的人脸，统计通过的人流 数量。依据本专利技术的又一实施例，使用一人流计数的分析图来显示人流数量，其中人流 计数分析图包含注视程度直方图、人潮时段色彩标记以及多媒体互动留言板。其中，注视程 度直方图使用多个不同颜色的直方图来表示广告受通过人流的注视程度；而人潮时段色彩 标记使用多个不同颜色以标示出不同时间点的通过人流数量。综合以上所述，可以得知本专利技术通过判断通过人流的人脸为正脸或是侧脸，配合 人脸追踪技术，以更准确地分析通过人流的行为。更通过人脸被遮蔽的次数，以判断此人脸 是被遮蔽或者已经离开摄影机的摄录范围。本专利技术可以使广告商更直接且准确地对有需求 的客户群提供消息并进行互动，以此延伸出更多相关的应用。附图说明为让本专利技术的上述和其它目的、特征、优点与实施例能更明显易懂，所附图式的说 明如下图Ia是绘示依照本专利技术一实施方式的一种应用于人流计数系统的服务器。图Ib是绘示依照本专利技术一实施方式的一种应用于人流计数系统的人脸检测器。图Ic是绘示依照本专利技术一实施方式的一种应用于人流计数系统的追踪物体记录图2绘示依照本专利技术一实施方式的一种人流计数方法的流程图。图3是绘示依照本专利技术一实施例的人流计数的量化分析示意图。100:服务器110:肤色区域检测器120 人脸检测器122:表征信息记录器124a:正脸判断模块124b 侧脸判断模块130 追踪物体记录器132 表征信息记录器134a:正脸计数器134b 侧脸计数器136 人脸标号器138 被遮蔽计数器140 关联性匹配运算器150:计数运算器200 人流计数方法的流程图202 210 步骤300 人流计数的量化分析示意图302a 人潮时段色彩标记302b 人流数量色条304 注视程度直方图306a 广告吸睛力指数306b 广告效益评比308:多媒体互动留言板具体实施例方式本专利技术人流计数系统可适用于多种电子装置，其主要目的是以多张人脸追踪的算 法来实现人流计数的量化分析。应了解到，在本实施例中所提及的步骤，除特别叙明其顺序 者外，均可以依照实际需要调整其前后顺序，甚至可能全部或部分同时执行。本专利技术人流计数系统可以包含摄影机以及服务器，应用于电子广告牌上，是采用 分布式架构，亦即每个装置的数目皆可以为一台以上，只要通过网络便可以串联起来，以形 成一套更具规模的系统，亦便于藉此延伸出其它应用。其中，摄影机的架设位置必须使得通 过人流在观看电子广告牌时，此摄影机镜头不会受到遮蔽而能正确地撷取到图像，例如电 子广告牌的上方、左侧以及右侧。请参照图la，其绘示依照本专利技术一实施方式的一种应用于人流计数系统的服务器 100。服务器100包含追踪物体记录器130、肤色区域检测器110、人脸检测器120、关联性 匹配运算器140以及计数运算器150。如图lb所示人脸检测器120还包含表征信息记录 器122、正脸判断模块124a以及侧脸判断模块124b。如图lc所示追踪物体记录器130还 包含表征信息记录器132、正脸计数器134a、侧脸计数器134b、人脸标号器136以及被遮蔽 计数器138。当操作时，首先由摄影机撷取摄录范围内通过人流的图像，再使用肤色区域检测 器110，以检测图像中的肤色区域。肤色区域检测器110利用已知的肤色区域检测及划分方 法，例如分析图像中一区域的表征信息，包括纹理、色彩以及尺寸等信息，以取得多个肤色 区域。其中，肤色区域检测器110在检测肤色区域时，不会将相连的肤色区域切割开来。例 如，脸部的肤色区本文档来自技高网...

【技术保护点】
一种人流计数系统，包含：追踪物体记录器，具有第一时间点的第一人脸信息；肤色区域检测器，用以辨识摄影机在第二时间点撷取的图像是否为肤色区域，其中该第二时间点紧接在该第一时间点之后；人脸检测器，用以判断该肤色区域是否为真人脸，若为真人脸则判断该真人脸为正面人脸或侧面人脸，将判断的结果记录为假性人脸信息；关联性匹配运算器，用以将该假性人脸信息与该第一人脸信息进行一对一相似度匹配，其中当相似度匹配达到设定条件时，以该假性人脸信息更新该第一人脸信息，当该相似度匹配未达到设定条件时，且该假性人脸为该真人脸，则将该假性人脸当作第二人脸信息加入至该追踪物体记录器中，并设定该第一人脸信息被遮蔽；以及计数运算器，根据该追踪物体记录器所记录的该些人脸，统计通过人流数量。

【技术特征摘要】

【专利技术属性】
技术研发人员：萧佩琪，徐邦维，
申请(专利权)人：微星科技股份有限公司，
类型：发明
国别省市：71[中国|台湾]