基于对来自摄像机图像的对象的检测的警报事件的改进生成制造技术

本发明专利技术涉及一种设备，该设备从一个或多个摄像机接收图像，处理图像并自动检测摄像机视场中的未知人类，例如以防止盗窃。为此，该设备包括处理逻辑，该处理逻辑被配置为检测面部，识别面部并验证面部是否对应于已知人类的面部集合中的面部。如果检测到面部但不对应于已知面部，则触发警报事件。处理逻辑还被配置为在包括至少人类类别的对象类别中对图像中的对象进行分类。如果识别出人类，但针对该人类未检测到面部，则也触发警报事件。因此，在检测到不是已知的、可信赖的人类的任何情况下，都可以触发警报。

Improved generation of alarm events based on detection of objects from camera images

【技术实现步骤摘要】
【国外来华专利技术】基于对来自摄像机图像的对象的检测的警报事件的改进生成
本专利技术涉及对来自摄像机图像的对象的检测的领域。更具体地，本专利技术涉及基于对摄像机图像中的对象的检测的事件的改进生成。
技术介绍
视频监测是通过视频图像监测场所。视频监测提供了通常用于管理场所安全性的灵活性和效率。实际上，视频监测可以不断执行，并且捕获场所的图像允许对图像进行远程和自动处理。尽管可以对图像进行视觉处理(例如通过在控制中心实时显示，在该控制中心中安全代理实时监控来自视频监控摄像机的图像)，但是渐增的视频监测图像源的数量增加了自动处理视频监测图像的需求。视频监测是防止盗窃的有效解决方案。用于防止盗窃的常规视频监测解决方案依赖于放置在房屋内或房屋周围的一个或多个摄像机。一个或多个摄像机不断捕获图像，并实时自动对其进行处理。如果基于对摄像机图像的分析检测到人类，则发出警报(alert)，除非警报被去激活。该警报可以包括在房屋内发出的告警(alarm)，自动将检测到的人类的照片发送到警察，自动呼叫警察以使得警察能够进行快速干预，或者要采取的用于防止盗窃、限制留给盗贼来执行盗窃的时间、或者允许警察抓获盗贼采取的任何其他相关措施。在这样的系统中，告警可以由视频监测系统的用户(例如，房屋的所有者)使用数字代码手动地激活或去激活。例如，用户可以在进入或接近房屋时手动去激活告警，并在离开房屋或远离房屋时手动激活告警。因此，仅当不被预期的人(例如盗贼)接近或进入房屋时，才发出告警。然而，这样的系统给系统的用户带来了手动激活或去激活告警的重要负担。实际上，如果用户忘记在进入房屋之前去激活告警，则可能触发许多错误告警。相反，如果用户忘记在离开房屋时激活告警，则可能错过盗贼。与普通公共视频监测系统有关的另一挑战是视场的不受限制的性质。实际上，与其中摄像机的视场受到控制的特定视频监测系统(例如机场视频监测系统)相比，普通公共视频监测系统的摄像机可以放置在非常不同的环境中。因此，由于可以针对许多不同的角度或视场执行人的图像，因此难以对来自这种摄像机的图像进行分析。同时，由这种摄像机捕获的图像可能包含许多不同的运动对象(街上的汽车、宠物...)，这使图像的自动分析变得困难。因此，需要一种设备来自动检测未知人员并相应地触发警报事件，该设备不需要来自用户的繁琐的手动激活或去激活，并且能够在具有许多不同性质的移动对象的环境中进行操作。
技术实现思路
为此，本专利技术公开了一种设备，包括：通向图像传感器的通信链路；通向存储器的通信链路，所述存储器存储用于面部的第一集合的面部识别数据；处理逻辑，所述处理逻辑包括执行以下步骤的适配：从所述图像传感器接收图像；在包括人类类别的一组对象类别中对所述图像中的一个或多个对象进行分类；检测所述图像中的一个或多个面部；执行对一个或多个面部的面部识别；验证所述一个或多个面部是否包括在所述面部的第一集合中；如果所述一个或多个面部中的面部或属于所述人类类别的所述一个或多个对象中的对象与所述一个或多个面部中的任何一个面部都不对应，则触发警报事件。本专利技术的设备有利地允许检测入侵者，即使在包括具有不同性质的移动对象的复杂环境中。同时，当检测到已知人员时，在不需要来自用户的手动干预的情况下，本专利技术的设备不触发警报。有利地，所述触发警报事件的适配包括如果所述一个或多个面部中的面部未包括在所述面部的第一集合中，则触发警报事件的适配。如果检测到不属于授权人员列表的人类，则允许触发警报。有利地，所述触发警报事件的适配包括如果属于所述人类类别的一个或多个对象中的对象与所述一个或多个面部中的任何一个面部不对应，则触发警报事件的适配。如果检测到人类但不能识别该人类，则允许触发警报。有利地，所述处理逻辑包括用于检测所述图像中的运动区域的适配，并且所述用于对一个或多个对象进行分类的适配包括用于仅在所述运动区域中对所述一个或多个对象进行分类的适配；所述用于检测一个或多个面部的适配包括用于仅在所述运动区域中检测所述一个或多个面部的适配。这允许减少处理逻辑上的计算负载而不降低其检测能力。有利地，所述用于接收图像的适配包括用于从所述图像传感器接收视场的一系列连续图像的适配，所述图像属于所述一系列连续图像；所述用于对所述一个或多个对象进行分类的适配包括用于执行以下步骤的适配：计算图像与所述系列中紧邻的前一个图像之间的像素差；并基于所述像素差检测所述图像中的运动区域。这允许有效地检测两个连续图像之间的运动区域。有利地，所述用于检测所述图像中的一个或多个面部的适配包括用于基于所述运动区域的尺寸以及人类的面部与身高之间的预定义比率来定义面部检测区域的尺寸的适配。这允许以单个窗口尺寸来测试面部检测，并且因此大大减少了由于面部检测而产生的计算负载。同时，如果移动区域表示人类，则人类的身体尺寸与面部尺寸之间的比例对于不同的人类而言基本上相似，则预定义比例允许计算提供最可靠结果的窗口尺寸。因此，这允许大大减少由于面部检测而导致的计算负载，而不显著降低面部检测的效率。有利地，所述用于检测所述图像中一个或多个面部的适配包括用于确定所述一个或多个面部的相应位置的适配；所述用于对所述图像中一个或多个对象进行分类的适配包括用于确定属于所述人类类别的对象的相应位置的适配；所述处理逻辑包括用于通过将所述一个或多个面部的相应位置与属于所述人类类别的对象的相应位置进行比较来检测属于所述人类类别的所述一个或多个对象中的对象是否与所述面部集合中的所述一个或多个面部中的面部不对应的适配。这允许验证是否已经针对被分类为人类的每个对象检测到面部。有利地，所述用于检测所述图像中的一个或多个面部的适配包括仅在其中已检测到属于所述人类类别的对象的所述运动区域中检测面部的适配。仅在运动区域中的面部检测大大减小了被浏览以检测面部的像素区域的尺寸，因此减少了面部检测的计算负载。同时，所述设备旨在识别移动的人类。因此，仅在移动区域中执行面部检测减少了计算负载，但没有降低检测性能。有利地，所述处理逻辑包括用于验证是否存在至少一个其中没有检测到面部的运动区域；所述用于对一个或多个对象进行分类的适配包括仅在其中没有检测到面部的运动区域中对一个或多个对象进行分类的适配。这减少了其中应执行对象分类的运动区域的数量，从而减少了对象分类的计算负载。有利地，所述用于执行所述面部识别的适配包括用于使用被训练用于面部识别的神经网络来执行对所述一个或多个面部的面部识别的适配。使用神经网络提供了用于面部识别的有效解决方案，该解决方案特别好地适合于本专利技术的设备，其中可以用大量不同的视角来捕获面部。此外，神经网络可以由所述用户标记的图像(例如，用户在收到警报通知时接收到的图像)进行连续训练。有利地，训练神经网络用于面部识别，并且使用由所述设备的用户标记的面部图像来构建面部的第一集合。使用来自所述设备的用户的标签来训练神经网络允许有效地训练所述神经网络以用于检测所述用户的亲属，并且因此减少不正确警本文档来自技高网...

【技术保护点】
1.一种设备(200a、200b、200c、200d)，包括：/n通向图像传感器(210a、210b、210c、210d)的通信链路；/n通向存储器(220a、220b、220c、220d)的通信链路，所述存储器存储用于面部的第一集合的面部识别数据；/n处理逻辑(230a、230b、230c、230d)，所述处理逻辑包括用于执行以下步骤的适配：/n从所述图像传感器接收图像(310)；/n在包括人类类别的一组对象类别中对所述图像中的一个或多个对象进行分类(320)；/n检测所述图像中的一个或多个面部(330)；/n对所述一个或多个面部执行面部识别(340)；/n验证所述一个或多个面部是否包括在所述面部的第一集合中(350)；/n如果所述一个或多个面部中的面部或属于所述人类类别的所述一个或多个对象中的对象与所述一个或多个面部中的任何一个面部都不对应，则触发警报事件(360、361)。/n

【技术特征摘要】
【国外来华专利技术】20170602 EP 17305658.11.一种设备(200a、200b、200c、200d)，包括：
通向图像传感器(210a、210b、210c、210d)的通信链路；
通向存储器(220a、220b、220c、220d)的通信链路，所述存储器存储用于面部的第一集合的面部识别数据；
处理逻辑(230a、230b、230c、230d)，所述处理逻辑包括用于执行以下步骤的适配：
从所述图像传感器接收图像(310)；
在包括人类类别的一组对象类别中对所述图像中的一个或多个对象进行分类(320)；
检测所述图像中的一个或多个面部(330)；
对所述一个或多个面部执行面部识别(340)；
验证所述一个或多个面部是否包括在所述面部的第一集合中(350)；
如果所述一个或多个面部中的面部或属于所述人类类别的所述一个或多个对象中的对象与所述一个或多个面部中的任何一个面部都不对应，则触发警报事件(360、361)。


2.根据权利要求1所述的设备，其中，所述用于触发警报事件的适配包括用于如果所述一个或多个面部中的面部未包括在所述面部的第一集合中，则触发(360)警报事件的适配。


3.根据权利要求1所述的设备，其中，所述用于触发警报事件的适配包括用于如果属于所述人类类别的所述一个或多个对象中的对象与所述一个或多个面部中的任何一个面部都不对应，则触发警报事件(361)的适配。


4.根据权利要求1所述的设备，其中，所述处理逻辑包括用于检测所述图像中的运动区域(311)的适配，并且其中：
所述用于对一个或多个对象进行分类(320)的适配包括用于仅在所述运动区域中对所述一个或多个对象进行分类的适配；
所述用于检测一个或多个面部(311)的适配包括用于仅在所述运动区域中检测所述一个或多个面部的适配。


5.根据权利要求2所述的设备，其中：
所述用于接收图像(310)的适配包括用于从所述图像传感器接收视场的一系列连续图像的适配，所述图像属于所述一系列连续图像；
所述用于对一个或多个对象进行分类(320)的适配包括用于执行以下步骤的适配：
计算所述图像与所述系列中紧邻的前一个图像之间的像素差；并且
基于所述像素差检测所述图像中的运动区域。


6.根据权利要求4或5中的一项所述的设备，其中，所述用于检测(330)所述图像中的一个或多个面部的适配包括用于基于所述运动区域的尺寸以及人类的面部与身高之间的预定义比率来定义面部检测区域的尺寸的适配。


7.根据权利要求1至6中的一项所述的设备，其中：
所述用于检测(330)所述图像中一个或多个面部的适配包括用于确定所述一个或多个面部的相应位置的适配；
所述用于对所述图像中的一个或多个对象进行分类(320)的适配包括用于确定属于所述人类类别的对象的相应位置的适配；
所述处理逻辑包括用于通过将所述一个或多个面部的相应位置与属于所述人类类别的对象的相应位置进行比较来检测(370)属于所述人类类别的所述一个或多个对象中的对象是否与面部集合中的所述一个或多个面部中的面部不对应的适配。


8.根据权利要求2至6中的一项所述的设备，其中，所述用于检测(330)所述图像中的一...

【专利技术属性】
技术研发人员：M·费尔希，A·勒布瓦，F·波特，F·德利留，
申请(专利权)人：尼特莫公司，
类型：发明
国别省市：法国;FR