一种分布式数据融合处理的方法及装置制造方法及图纸

本发明专利技术涉及数据处理领域，尤其涉及一种分布式数据融合处理的方法及装置，用以解决目标对象关联的数据分布式的存储在不同采集节点处，需要重复查找且难以获取完整有效数据的问题，该方法为：获取采集节点上报的新增数据信息，将所述特征信息发送至关联的各个其他采集节点，并获取反馈的匹配结果，然后基于所述匹配结果，确定存在已保存的原档案数据与所述特征信息匹配成功的目标采集节点时，将所述新增数据信息发送至所述目标采集节点作为新的档案数据进行保存。这样，借助于中间管理节点，实现各个采集节点间数据的互通，将能够提取相同特征信息的档案数据存储在同一采集节点下，避免在不同采集节点下重复建立档案数据，提高了数据的查找效率。

【技术实现步骤摘要】
一种分布式数据融合处理的方法及装置
本专利技术涉及数据处理领域，尤其涉及一种分布式数据融合处理的方法及装置。
技术介绍
在安防系统中，各个网络视频录像机(NetworkVideoRecorder，NVR)可以通过摄像头采集多媒体数据，进而通过提取多媒体数据中的各个目标对象的特征信息，分别建立与各个目标对象对应的多媒体数据档案，所述目标对象为具有可识别的特征信息的人、宠物或者行动的车辆等等。然而，已有技术下，现有的安防系统中对于同一目标对象，在不同的管理节点下可能建立有不同的多媒体数据档案，造成不同安防管理节点存储的多媒体数据档案发生重叠，且对应的多媒体数据档案中记录的多媒体数据都是对应不同局部区域的，当希望获取目标对象在大范围的运行轨迹时，需要从分布式的不同管理节点处，分别获取相应的多媒体数据档案中零碎的多媒体数据进行整合，为数据信息的获取带来了极大的不便，在进行数据信息检索的时候需要重复检索，难以获取完整有效的多媒体数据。例如，NVR1和NVR2分别采集一定范围内采集的多媒体数据，所述NVR1采集的多媒体数据中记录了人物A，人物B，以及宠物A在一定范围内的活动行为，NVR2采集的多媒体数据中记录了人物B、宠物A在一定范围内的活动行为，则NVR1分别为人物A、人物B、宠物A建立多媒体数据档案，同理，NVR2再次为人物B与宠物A分别建立多媒体数据档案，显然会造成多媒体数据档案的重复建立，不同NVR中建立的多媒体档案数据出现重叠，在查找时会进行重复查找，难以获取完整有效的多媒体数据。有鉴于此，需要设计一种新的分布式数据融合处理的方法及装置。
技术实现思路
本专利技术实施例提供一种分布式数据融合处理的方法及装置，用以解决现有技术中存在目标对象关联的数据分布式的存储在不同采集节点处，需要重复查找且难以获取完整有效数据的问题。本专利技术实施例提供的具体技术方案如下：一种分布式数据融合处理的方法，包括：获取采集节点上报的新增数据信息，所述新增数据信息中携带有所述采集节点无法完成匹配的目标对象的特征信息，以及包含所述目标对象的多媒体数据；将所述特征信息发送至关联的各个其他采集节点，并获取所述各个其他采集节点基于所述特征信息反馈的匹配结果；基于所述匹配结果，确定存在已保存的原档案数据与所述特征信息匹配成功的目标采集节点时，将所述新增数据信息发送至所述目标采集节点作为新的档案数据进行保存。可选的，所述获取采集节点上报的新增数据信息之后，所述将所述特征信息发送至关联的各个其他采集节点之前，进一步包括：将与所述目标对象的特征信息对应的新增数据信息，保存为一个临时数据；确定满足以下任一条件或组合：已保存的临时数据的总数目达到预设的数目阈值；已保存的临时数据的总数据量达到预设的数据量门限值；已保存的临时数据中多媒体数据的总时长达到预设达到时长门限值。可选的，所述将与所述目标对象的特征信息对应的新增数据信息，保存为一个临时数据，包括：基于所述新增数据信息建立一个临时数据，并为所述一个临时数据配置一个临时标识信息。可选的，所述将所述特征信息发送至关联的各个其他采集节点，包括：获取预先设置的可交互范围，确定所述可交互范围内关联的同等级的各个中间管理节点；确定上报所述特征信息的采集节点，并将所述特征信息发送至管辖范围内的其他采集节点；分别将所述特征信息发送至所述各个中间管理节点，令所述各个中间管理节点将所述特征信息下发至各自管辖范围内的各个其他采集节点。可选的，所述将所述新增数据信息发送至所述目标采集节点作为新的档案数据进行保存，包括：将所述新增数据信息发送至所述目标采集节点，令所述目标采集节点确定与所述特征信息匹配成功的原档案数据的全局标识信息，以及对应所述全局标识信息，将所述新增数据信息作为新的档案数据进行保存。可选的，所述获取所述各个其他采集节点基于所述特征信息反馈的匹配结果后，进一步包括：基于所述匹配结果，确定不存在匹配成功的目标采集节点时，为所述新增数据信息配置一个新的全局标识信息；将所述全局标识信息以及所述新增数据信息，发送至上报所述新增数据信息的采集节点，令所述采集节点对应所述全局标识信息，将所述新增数据信息作为新的档案数据进行保存。一种分布式数据融合处理的装置，包括：获取单元，获取采集节点上报的新增数据信息，所述新增数据信息中携带有所述采集节点无法完成匹配的目标对象的特征信息，以及包含所述目标对象的多媒体数据；发送单元，将所述特征信息发送至关联的各个其他采集节点，并获取所述各个其他采集节点基于所述特征信息反馈的匹配结果；处理单元，基于所述匹配结果，确定存在已保存的原档案数据与所述特征信息匹配成功的目标采集节点时，将所述新增数据信息发送至所述目标采集节点作为新的档案数据进行保存。可选的，所述获取采集节点上报的新增数据信息之后，所述将所述特征信息发送至关联的各个其他采集节点之前，所述获取单元进一步用于：将与所述目标对象的特征信息对应的新增数据信息，保存为一个临时数据；确定满足以下任一条件或组合：已保存的临时数据的总数目达到预设的数目阈值；已保存的临时数据的总数据量达到预设的数据量门限值；已保存的临时数据中多媒体数据的总时长达到预设达到时长门限值。可选的，所述将与所述目标对象的特征信息对应的新增数据信息，保存为一个临时数据时，所述获取单元用于：基于所述新增数据信息建立一个临时数据，并为所述一个临时数据配置一个临时标识信息。可选的，所述将所述特征信息发送至关联的各个其他采集节点时，所述发送单元用于：获取预先设置的可交互范围，确定所述可交互范围内关联的同等级的各个中间管理节点；确定上报所述特征信息的采集节点，并将所述特征信息发送至管辖范围内的其他采集节点；分别将所述特征信息发送至所述各个中间管理节点，令所述各个中间管理节点将所述特征信息下发至各自管辖范围内的各个其他采集节点。可选的，所述将所述新增数据信息发送至所述目标采集节点作为新的档案数据进行保存时，所述处理单元用于：将所述新增数据信息发送至所述目标采集节点，令所述目标采集节点确定与所述特征信息匹配成功的原档案数据的全局标识信息，以及对应所述全局标识信息，将所述新增数据信息作为新的档案数据进行保存。可选的，所述获取所述各个其他采集节点基于所述特征信息反馈的匹配结果后，所述处理单元进一步用于：基于所述匹配结果，确定不存在匹配成功的目标采集节点时，为所述新增数据信息配置一个新的全局标识信息；将所述全局标识信息以及所述新增数据信息，发送至上报所述新增数据信息的采集节点，令所述采集节点对应所述全局标识信息，将所述新增数据信息作为新的档案数据进行保存。一种电子设备，包括：存储器，用于存储可执行指令；处理器，用于读取并执行存储器中存储的可执行本文档来自技高网...

【技术保护点】
1.一种分布式数据融合处理的方法，其特征在于，包括：/n获取采集节点上报的新增数据信息，所述新增数据信息中携带有所述采集节点无法完成匹配的目标对象的特征信息，以及包含所述目标对象的多媒体数据；/n将所述特征信息发送至关联的各个其他采集节点，并获取所述各个其他采集节点基于所述特征信息反馈的匹配结果；/n基于所述匹配结果，确定存在已保存的原档案数据与所述特征信息匹配成功的目标采集节点时，将所述新增数据信息发送至所述目标采集节点作为新的档案数据进行保存。/n

【技术特征摘要】
1.一种分布式数据融合处理的方法，其特征在于，包括：
获取采集节点上报的新增数据信息，所述新增数据信息中携带有所述采集节点无法完成匹配的目标对象的特征信息，以及包含所述目标对象的多媒体数据；
将所述特征信息发送至关联的各个其他采集节点，并获取所述各个其他采集节点基于所述特征信息反馈的匹配结果；
基于所述匹配结果，确定存在已保存的原档案数据与所述特征信息匹配成功的目标采集节点时，将所述新增数据信息发送至所述目标采集节点作为新的档案数据进行保存。


2.如权利要求1所述的方法，其特征在于，所述获取采集节点上报的新增数据信息之后，所述将所述特征信息发送至关联的各个其他采集节点之前，进一步包括：
将与所述目标对象的特征信息对应的新增数据信息，保存为一个临时数据；
确定满足以下任一条件或组合：
已保存的临时数据的总数目达到预设的数目阈值；
已保存的临时数据的总数据量达到预设的数据量门限值；
已保存的临时数据中多媒体数据的总时长达到预设达到时长门限值。


3.如权利要求2所述的方法，其特征在于，所述将与所述目标对象的特征信息对应的新增数据信息，保存为一个临时数据，包括：
基于所述新增数据信息建立一个临时数据，并为所述一个临时数据配置一个临时标识信息。


4.如权利要求1所述的方法，其特征在于，所述将所述特征信息发送至关联的各个其他采集节点，包括：
获取预先设置的可交互范围，确定所述可交互范围内关联的同等级的各个中间管理节点；
确定上报所述特征信息的采集节点，并将所述特征信息发送至管辖范围内的其他采集节点；
分别将所述特征信息发送至所述各个中间管理节点，令所述各个中间管理节点将所述特征信息下发至各自管辖范围内的各个其他采集节点。


5.如权利要求1-4任一项所述的方法，其特征在于，所述将所述新增数据信息发送至所述目标采集节点作为新的档案数据进行保存，包括：
将所述新增数据信息发送至所述目标采集节点，令所述目标采集节点确定与所述特征信息匹配成功的原档案数据的全局标识信息，以及...

【专利技术属性】
技术研发人员：杨俊，陶云峰，钱克俊，金彦，
申请(专利权)人：上海依图网络科技有限公司，
类型：发明
国别省市：上海;31