异常判定方法、装置、设备、介质及产品制造方法及图纸

本发明专利技术提供一种异常判定方法、装置、设备、介质及产品，方法包括：确定通过摄像装置得到的视频数据的场景类别；判断场景类别对应的待检测目标是否需要移动，得到第一判断结果；将视频数据输入目标检测模型，通过目标检测模型输出视频数据中的待检测目标的目标检测值，其中，目标检测模型通过视频样本数据和待检测样本目标对应的目标检测样本值训练得到；基于目标检测值，判断待检测目标是否发生移动，得到第二判断结果；基于第一判断结果和第二判断结果，判定待检测目标是否存在异常。本发明专利技术用以解决现有技术中通过人工识别分析视频内容，导致无法及时发现乘客长时间无动作、重要物品移位等异常情况的缺陷。位等异常情况的缺陷。位等异常情况的缺陷。

【技术实现步骤摘要】
异常判定方法、装置、设备、介质及产品


[0001]本专利技术涉及轨道交通
，尤其涉及一种异常判定方法、装置、设备、介质及产品。

技术介绍

[0002]近年来我国轨道行业发展迅猛，由于其不占地面道路、运输量大、能耗低等优势，各城市积极投入轨道交通建设。随着巨量客流带来车站客运业务的巨大压力，对轨道交通的运营管理和公共安全保障等方面的压力与日俱增。现阶段主要是通过长期的运营经验结合传统视频监控进行配合来进行管理，其中，车站视频监控只提供视频的采集、预览、传输和存储等功能，而视频内容的分析识别主要依托人工实现。
[0003]而通过人工分析识别视频内容，存在诸多缺陷，例如，针对乘客长时间无动作、重要物品移位等特定场景的小尺寸目标分析的准确度不高，且无法准确判断物体所在位置。又例如，针对乘客长时间无动作、重要物品移位等异常情况不能及时发现，导致人员伤亡、应急处置不及时等诸多问题。

技术实现思路

[0004]本专利技术提供一种异常判定方法、装置、设备、介质及产品，用以解决现有技术中通过人工识别分析视频内容，导致无法及时发现乘客长时间无动作、重要物品移位等异常情况的缺陷，实现有效、及时的判定待检测目标是否发生异常的目的。
[0005]本专利技术提供一种异常判定方法，包括：
[0006]确定通过摄像装置得到的视频数据的场景类别；
[0007]判断所述场景类别对应的待检测目标是否需要移动，得到第一判断结果；
[0008]将所述视频数据输入目标检测模型，通过所述目标检测模型输出所述视频数据中的所述待检测目标的目标检测值，其中，所述目标检测模型通过视频样本数据和待检测样本目标对应的目标检测样本值训练得到；
[0009]基于所述目标检测值，判断所述待检测目标是否发生移动，得到第二判断结果；
[0010]基于所述第一判断结果和所述第二判断结果，判定所述待检测目标是否存在异常。
[0011]根据本专利技术提供的一种异常判定方法，所述将所述视频数据输入目标检测模型，通过所述目标检测模型输出所述视频数据中的所述待检测目标的目标检测值，包括：
[0012]将所述视频数据中的每帧数据进行切割，得到图像数据，并按照时间戳对所述图像数据进行排序，得到目标图像数据；
[0013]将所述目标图像数据依次输入所述目标检测模型，通过所述目标检测模型依次输出每帧所述目标图像数据中的所述待检测目标的目标检测值。
[0014]根据本专利技术提供的一种异常判定方法，所述将所述目标图像数据依次输入所述目标检测模型，通过所述目标检测模型依次输出每帧所述目标图像数据中的所述待检测目标
的目标检测值，包括：
[0015]将所述目标图像数据依次输入所述目标检测模型；
[0016]通过所述目标检测模型对每帧所述目标图像数据执行以下处理过程：提取所述目标图像数据中的所述待检测目标的目标特征；为所述目标特征生成候选框；将所述候选框映射到所述目标图像数据上；通过所述目标图像数据上的所述候选框，确定所述待检测目标的目标检测值；
[0017]从所述候选框中确定目标候选框，输出所述目标候选框对应的所述待检测目标的目标检测值。
[0018]根据本专利技术提供的一种异常判定方法，所述提取所述目标图像数据中的所述待检测目标的目标特征，包括：
[0019]对所述目标图像数据进行浅层特征提取，得到目标浅层特征；
[0020]对所述目标图像数据进行深层特征提取，得到目标深层特征；
[0021]融合所述目标浅层特征和所述目标深层特征，得到所述目标特征。
[0022]根据本专利技术提供的一种异常判定方法，所述基于所述目标检测值，判断所述待检测目标是否发生移动，得到第二判断结果，包括：
[0023]基于当前时间对应的目标图像数据中的所述待检测目标的目标检测值，执行以下计算过程：
[0024]确定当前时间的每帧目标图像数据中的所述待检测目标的目标检测值；计算当前时间的第一帧目标图像数据中的所述待检测目标的目标检测值，与当前时间的其他每帧目标图像数据中的所述待检测目标的目标检测值的第一位置交并值，其中，将当前时间的第一帧目标图像数据中的所述待检测目标的目标检测值记为当前目标检测值；确定第一预设时间后的时间点对应的每帧目标图像数据中的所述待检测目标的目标检测值；计算所述当前目标检测值，与所述第一预设时间后的时间点对应的每帧目标图像数据中的所述待检测目标的目标检测值的第二位置交并值；当确定所述第一位置交并值和所述第二位置交并值分别大于第一预设阈值时，确定至少一个第二预设时间后的时间点对应的最后一帧目标图像数据中的所述待检测目标的目标检测值；计算所述当前目标检测值，与所述至少一个第二预设时间后的时间点对应的最后一帧目标图像数据中的所述待检测目标的目标检测值的第三位置交并值；
[0025]当确定所述第三位置交并值大于第二预设阈值时，确定所述第二判断结果为所述待检测目标未发生移动；
[0026]当确定所述第三位置交并值小于或等于所述第二预设阈值时，确定所述第二判断结果为所述待检测目标发生移动。
[0027]根据本专利技术提供的一种异常判定方法，所述基于所述第一判断结果和所述第二判断结果，判定所述待检测目标是否存在异常，包括：
[0028]当所述第一判断结果为所述待检测目标需要移动，所述第二判断结果为所述待检测目标未发生移动时，判定所述待检测目标存在异常；
[0029]当所述第一判断结果为所述待检测目标需要移动，所述第二判断结果为所述待检测目标发生移动时，判定所述待检测目标不存在异常；
[0030]当所述第一判断结果为所述待检测目标不需要移动，所述第二判断结果为所述待
检测目标未发生移动时，判定所述待检测目标不存在异常；
[0031]当所述第一判断结果为所述待检测目标不需要移动，所述第二判断结果为所述待检测目标发生移动时，判定所述待检测目标存在异常。
[0032]本专利技术还提供一种异常判定装置，包括：
[0033]确定模块，用于确定通过摄像装置得到的视频数据的场景类别；
[0034]第一判断模块，用于判断所述场景类别对应的待检测目标是否需要移动，得到第一判断结果；
[0035]输出模块，用于将所述视频数据输入目标检测模型，通过所述目标检测模型输出所述视频数据中的所述待检测目标的目标检测值，其中，所述目标检测模型通过视频样本数据和待检测样本目标对应的目标检测样本值训练得到；
[0036]第二判断模块，用于基于所述目标检测值，判断所述待检测目标是否发生移动，得到第二判断结果；
[0037]判定模块，用于基于所述第一判断结果和所述第二判断结果，判定所述待检测目标是否存在异常。
[0038]本专利技术还提供一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现如上述任一种所述异常判定方法的步骤。
[0039]本专利技术还提供一种非暂态计本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种异常判定方法，其特征在于，包括：确定通过摄像装置得到的视频数据的场景类别；判断所述场景类别对应的待检测目标是否需要移动，得到第一判断结果；将所述视频数据输入目标检测模型，通过所述目标检测模型输出所述视频数据中的所述待检测目标的目标检测值，其中，所述目标检测模型通过视频样本数据和待检测样本目标对应的目标检测样本值训练得到；基于所述目标检测值，判断所述待检测目标是否发生移动，得到第二判断结果；基于所述第一判断结果和所述第二判断结果，判定所述待检测目标是否存在异常。2.根据权利要求1所述的异常判定方法，其特征在于，所述将所述视频数据输入目标检测模型，通过所述目标检测模型输出所述视频数据中的所述待检测目标的目标检测值，包括：将所述视频数据中的每帧数据进行切割，得到图像数据，并按照时间戳对所述图像数据进行排序，得到目标图像数据；将所述目标图像数据依次输入所述目标检测模型，通过所述目标检测模型依次输出每帧所述目标图像数据中的所述待检测目标的目标检测值。3.根据权利要求2所述的异常判定方法，其特征在于，所述将所述目标图像数据依次输入所述目标检测模型，通过所述目标检测模型依次输出每帧所述目标图像数据中的所述待检测目标的目标检测值，包括：将所述目标图像数据依次输入所述目标检测模型；通过所述目标检测模型对每帧所述目标图像数据执行以下处理过程：提取所述目标图像数据中的所述待检测目标的目标特征；为所述目标特征生成候选框；将所述候选框映射到所述目标图像数据上；通过所述目标图像数据上的所述候选框，确定所述待检测目标的目标检测值；从所述候选框中确定目标候选框，输出所述目标候选框对应的所述待检测目标的目标检测值。4.根据权利要求3所述的异常判定方法，其特征在于，所述提取所述目标图像数据中的所述待检测目标的目标特征，包括：对所述目标图像数据进行浅层特征提取，得到目标浅层特征；对所述目标图像数据进行深层特征提取，得到目标深层特征；融合所述目标浅层特征和所述目标深层特征，得到所述目标特征。5.根据权利要求2
‑
4任一项所述的异常判定方法，其特征在于，所述基于所述目标检测值，判断所述待检测目标是否发生移动，得到第二判断结果，包括：基于当前时间对应的目标图像数据中的所述待检测目标的目标检测值，执行以下计算过程：确定当前时间的每帧目标图像数据中的所述待检测目标的目标检测值；计算当前时间的第一帧目标图像数据中的所述待检测目标的目标检测值，与当前时间的其他每帧目标图像数据中的所述待检测目标的目标检测值的第一位置交并值，其中，将当前时间的第一帧目标图像数据中的所述待检测目标的目标检测值记为当前目标检测值；确定第一预设时间后的时间点对应的每帧目标图像数据中的所述待检测目标的目标检测值；计算...

【专利技术属性】
技术研发人员：周超，杜呈欣，韩佩瑶，李樊，孟宇坤，王志飞，吴跃，赵俊华，王越彤，吴卉，孙同庆，郭悦，蔡晓蕾，李高科，李帅，宫玉昕，高洪波，宗慧曦，
申请(专利权)人：北京经纬信息技术有限公司中国铁道科学研究院集团有限公司，
类型：发明
国别省市：