一种下落物体的识别方法、装置、终端设备及存储介质制造方法及图纸

本发明专利技术实施例公开了一种下落物体的识别方法、装置、设备及存储介质，该方法包括：将监控视频的视频图像帧与背景图像帧进行背景差分，以获取多个二值化标记图像帧，并根据各二值化标记图像帧，获取运动区域的移动轨迹图像帧；将运动区域的移动轨迹图像帧输入至训练完成的图像分类模型，以通过图像分类模型判断运动区域的移动轨迹是否为下落物体轨迹；若确定运动区域的移动轨迹为下落物体轨迹，则确定监控视频中存在下落物体。本发明专利技术实施例提供的技术方案，实现了对监控视频中下落物体的有效监测，极大地提高了下落物体的监测效率以及监测时效性，同时，降低了监控视频中下落物体的误报检测率，识别方式具有较高的鲁棒性和普遍适用性。

【技术实现步骤摘要】
一种下落物体的识别方法、装置、终端设备及存储介质
本专利技术实施例涉及监控
，尤其涉及一种下落物体的识别方法、装置、终端设备及存储介质。
技术介绍
科技的不断进步使得视频监控技术被广泛应用于社会生活中，伴随着越来越多的高层建筑平地而起，对于高空抛坠物的有效监测，成为了保证社会生活安全的重要技术手段。现有的针对高空抛坠物的监测方案中，通过在楼体外部布设摄像头，对楼体外墙进行实时的视频录像，由工作人员通过人工的方式对监控画面前进行观察，以监测高空抛物行为的发生，而在抛物或坠物行为发生后，通常由物业或街道等相关单位对录像进行人工复看，查找高空抛物发生的录像片段。但这样的监测方式，不但需要消耗大量的人力成本，而且疲劳和环境噪声等负面因素极易导致人的注意力分散，存在较大的安全隐患，而在发生抛物或坠物后，人工复看则存在较大的被动性和滞后性，无法针对高空抛物行为迅速作出反应。
技术实现思路
本专利技术实施例提供了一种下落物体的识别方法、装置、设备及存储介质，以监测监控视频中是否存在下落物体。第一方面，本专利技术实施例提供了一种下落物体的识别方法，包括：获取监控视频的视频图像帧，并与背景图像帧进行背景差分，以获取多个二值化标记图像帧，并根据各所述二值化标记图像帧，获取运动区域的移动轨迹图像帧；将所述运动区域的移动轨迹图像帧输入至训练完成的图像分类模型，以通过所述图像分类模型判断所述运动区域的移动轨迹是否为下落物体轨迹；若确定所述运动区域的移动轨迹为下落物体轨迹，则确定所述监控视频中存在下落物体。第二方面，本专利技术实施例提供了一种下落物体的识别装置，包括：移动轨迹获取模块，用于获取监控视频的视频图像帧，并与背景图像帧进行背景差分，以获取多个二值化标记图像帧，并根据各所述二值化标记图像帧，获取运动区域的移动轨迹图像帧；轨迹分类执行模块，用于将所述运动区域的移动轨迹图像帧输入至训练完成的图像分类模型，以通过所述图像分类模型判断所述运动区域的移动轨迹是否为下落物体轨迹；下落物体确定模块，用于若确定所述运动区域的移动轨迹为下落物体轨迹，则确定所述监控视频中存在下落物体。第三方面，本专利技术实施例还提供了一种终端设备，所述终端设备包括：一个或多个处理器；存储装置，用于存储一个或多个程序；当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现本专利技术任意实施例所述的下落物体的识别方法。第四方面，本专利技术实施例还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现本专利技术任意实施例所述的下落物体的识别方法。本专利技术实施例提供的技术方案，将获取到的视频图像帧与背景图像帧进行背景差分，在获取到运动区域的移动轨迹后，通过图像分类模型判断该移动轨迹是否为下落物体轨迹，在确定为下落物体轨迹时，即确定监控视频中存在下落物体，实现了对监控视频中下落物体的有效监测，极大地提高了下落物体的监测效率以及监测时效性，同时，降低了监控视频中下落物体的误报检测率，识别方式具有较高的鲁棒性和普遍适用性。附图说明图1A是本专利技术实施例一提供的一种下落物体的识别方法的流程图；图1B是本专利技术实施例一提供的监控摄像组件与建筑物的位置示意图；图1C是本专利技术实施例一提供的背景差分的计算流程图；图1D是本专利技术实施例一提供的二值化标记图像帧的示意图；图1E是本专利技术实施例一提供的运动区域的移动轨迹图像帧的示意图；图1F是本专利技术实施例一提供的图像分类模型的结构框图；图2是本专利技术实施例二提供的一种下落物体的识别方法的流程图；图3是本专利技术实施例三提供的一种下落物体的识别装置的结构框图；图4是本专利技术实施例四提供的一种终端设备的结构框图。具体实施方式下面结合附图和实施例对本专利技术作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释本专利技术，而非对本专利技术的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本专利技术相关的部分而非全部结构。实施例一图1A为本专利技术实施例一提供的一种下落物体的识别方法的流程图，本实施例可适用于监测监控视频中是否存在高空抛坠物的情况，该方法可以由本专利技术实施例中的下落物体的识别装置来执行，该装置可以通过软件和/或硬件实现，并集成在监控摄像组件或与监控摄像组件连接的管理控制设备（例如，服务器、边缘计算设备）中，该方法具体包括如下步骤：S110、获取监控视频的视频图像帧，并与背景图像帧进行背景差分，以获取多个二值化标记图像帧，并根据各所述二值化标记图像帧，获取运动区域的移动轨迹图像帧。监控视频可以通过安装于建筑物前方的监控摄像组件获取，如图1B所示，监控摄像组件安装于地面位置，并以一定的倾斜角度向上拍摄该建筑物，以获取建筑物的全貌，进而对该建筑物附近的下落物体，例如，高空抛物、高空坠物等进行监测。背景差分是将获取到的当前视频图像帧与背景图像帧进行差分运算，以检测运动区域的过程；具体的，如图1C所示，在获取到监控视频后，将各视频图像帧分别与背景图像帧进行像素相减，以消除各视频图像帧中的背景图像，并将获取到的相减结果（即差分图像），与预设像素阈值进行比较，以对各差分图像进行二值化标记，获取二值化标记图像帧；其中，若相减结果大于等于预设像素阈值，则表明该视频图像帧中存在运动物体，将差分图像标记为1，并获取对应的运动区域，即差分图像中像素不为0的区域；若相减结果小于预设像素阈值，则表明该视频图像帧中不存在运动物体，将差分图像标记为0，即差分图像为空白图像，差分图像中任意区域的像素均为0；如图1D所示，为一个包括运动区域的二值化标记图像帧，除了运动区域外，其它区域的像素均为0。特别的，本专利技术实施例中的监控视频，可以是监控摄像组件中的实时监控视频，也可以是监控完成的完整视频（例如，时长为1小时的一段监控视频），在本专利技术实施例中，对监控视频的类型不作具体限定；对于背景图像帧的获取，可以将监控视频中的一个视频图像帧指定为背景图像帧，即以静态视频帧的方式，选取固定的视频图像帧作为背景图像帧。可选的，在本专利技术实施例中，在获取监控视频的视频图像帧后，还包括：根据所述视频图像帧的场景信息，从背景图像帧备选集合中，获取匹配的背景图像帧；其中，所述场景信息包括时间和/或天气。由于不同的场景时间，对应不同的光照变化以及窗户开合情况，例如，中午时分窗户的打开数量要多于晚上；不同的场景天气，不但会对光照变化和窗户开合情况产生影响，还包括雨水及冰雹等自然现象对图像的像素造成影响，因此，可以根据时间和/或天气，指定不同的视频图像帧分别作为不同场景下的背景图像帧，并组成背景图像帧备选集合；在获取到监控视频的视频图像帧后，根据当前的场景信息，在备选集合中选定匹配的背景图像帧，避免不同的场景信息对背景图像的影响。可选的，在本专利技术实施例中，在获取监控视频的视频图像帧后，还包括：根据所述视频图像帧，通本文档来自技高网...

【技术保护点】
1.一种下落物体的识别方法，其特征在于，包括：/n获取监控视频的视频图像帧，并与背景图像帧进行背景差分，以获取多个二值化标记图像帧，并根据各所述二值化标记图像帧，获取运动区域的移动轨迹图像帧；/n将所述运动区域的移动轨迹图像帧输入至训练完成的图像分类模型，以通过所述图像分类模型判断所述运动区域的移动轨迹是否为下落物体轨迹；/n若确定所述运动区域的移动轨迹为下落物体轨迹，则确定所述监控视频中存在下落物体。/n

【技术特征摘要】
1.一种下落物体的识别方法，其特征在于，包括：
获取监控视频的视频图像帧，并与背景图像帧进行背景差分，以获取多个二值化标记图像帧，并根据各所述二值化标记图像帧，获取运动区域的移动轨迹图像帧；
将所述运动区域的移动轨迹图像帧输入至训练完成的图像分类模型，以通过所述图像分类模型判断所述运动区域的移动轨迹是否为下落物体轨迹；
若确定所述运动区域的移动轨迹为下落物体轨迹，则确定所述监控视频中存在下落物体。


2.根据权利要求1所述的方法，其特征在于，所述根据各所述二值化标记图像帧，获取运动区域的移动轨迹图像帧，包括：
将各所述二值化标记图像帧，通过像素叠加，获取运动区域的移动轨迹图像帧。


3.根据权利要求1所述的方法，其特征在于，在获取监控视频的视频图像帧后，还包括：
根据所述视频图像帧的场景信息，从背景图像帧备选集合中，获取匹配的背景图像帧；其中，所述场景信息包括时间和/或天气。


4.根据权利要求1所述的方法，其特征在于，在获取监控视频的视频图像帧后，还包括：
根据所述视频图像帧，通过动态背景获取模型，获取匹配的背景图像帧；其中，所述动态背景获取模型包括中值法背景模型、均值法背景模型和/或卡尔曼滤波器模型。


5.根据权利要求1所述的方法，其特征在于，所述获取监控视频的视频图像帧，并与背景图像帧进行背景差分，以获取多个二值化标记图像帧，包括：
根据预设获取周期，获取当前周期内监控视频的视频图像帧，并将当前周期内的各视频图像帧分别与背景图像帧进行背景差分，以获取多个二值化标记图像帧。


6.根据权利要求1所述的方法，其特征在于，在获取监控视频的视频图像帧，并与背景图像帧进行背景差分，以获取多个二值化标记图像帧后，还包括：
若确定预设检测时间内的各所述二值化标记图...

【专利技术属性】
技术研发人员：李城，周晖，
申请(专利权)人：北京软通智慧城市科技有限公司，
类型：发明
国别省市：北京;11