一种图像数据处理方法及系统技术方案

本发明专利技术提供了一种图像数据处理方法，其中，该方法包括：终端通过监控摄像头获取视频流，并利用边缘化计算的方式，从所述视频流中提取包含目标对象的目标图像帧，云端获取所述目标对象的属性信息，并根据获取的所述属性信息，确定所述目标图像帧的文本描述信息。本发明专利技术实施例采用边缘化计算和云计算相结合的图像数据处理方法，通过提取视频图像的文本描述信息，优化了视频图像不利于检索的问题。同时，结构化数据传输降低了对网络带宽的要求，提升了系统的计算分析能力。

A Method and System of Image Data Processing

The present invention provides an image data processing method, which includes: the terminal obtains video stream by monitoring camera, extracts target image frame including target object from the video stream by means of edge calculation, obtains attribute information of the target object by cloud end, and obtains attribute information of the target object according to the acquired video stream. Attribute information to determine the text description information of the target image frame. The embodiment of the present invention adopts image data processing method combining edge calculation and cloud computing, and optimizes the problem that video image is not conducive to retrieval by extracting text description information of video image. At the same time, structured data transmission reduces the requirement of network bandwidth and improves the computing and analysis ability of the system.

【技术实现步骤摘要】
一种图像数据处理方法及系统
本专利技术涉及图像处理
，具体而言，涉及一种图像数据处理方法及系统。
技术介绍
科技飞速发展的今天，监控设备无处不在，根据IHSMarkit的市场调查报告显示，中国2017年10月份中国公共场景的有1.76亿摄像头，2020年会增加到6.26亿，每秒钟产生的数据量是66TB。但是这些监控摄像头中带智能的摄像头很少，智能化程度非常低。这些传统安防设备产生的非结构化的数据，主要是威慑、侦查和事后取证的作用，很难做到事中分析以及事前预警。利用人工智能技术和计算机视觉技术将非结构化视频数据进行结构化处理，为大数据平台和数据挖掘系统提供数据基础，已经成为大势所趋。例如，安防行业技术升级成智能安防系统的最大问题是所有视频数据都往云服务平台汇聚，随着人工智能技术的持续发展和对算法持续不断的优化，传输带宽和视频解码能力成为云服务平台智慧视频分析的性能瓶颈。现有的视频数据分析一般是通过视频分析技术与云计算技术相结合，往往通过摄像头采集视频数据，对采集到的视频图像进行压缩，并将图像存储在硬盘录像机、网络视频录像机或者存储网络区域等视频存储设备中，通过云计算对视频进行分析。
技术实现思路
有鉴于此，本专利技术的目的在于提供一种图像数据处理方法及系统，采用云计算和边缘计算融合的方式，缓解云端智能分析的计算压力，从而降低云端功耗以及散热的需求。第一方面，本专利技术实施例提供了一种图像数据处理方法，其特征在于，包括：终端通过监控摄像头获取视频流；终端利用边缘化计算的方式，从所述视频流中提取包含目标对象的目标图像帧；云端获取所述目标对象的属性信息；云端根据获取的所述属性信息，确定所述目标图像帧的文本描述信息。结合第一方面，本专利技术实施例提供了第一方面的第一种可能的实施方式，其中，所述终端利用边缘化计算的方式，从所述视频流中提取包含目标对象的目标图像帧，包括：终端对所述视频流进行图像边缘识别；终端根据图像边缘识别的识别结果，获取包含所述目标对象的候选图像帧；终端根据所述候选图像帧的量化指标，选择指定的候选图像帧作为目标图像帧；所述量化指标至少包括目标对象的尺寸、目标对象被遮挡的程度和目标对象的清晰度。结合第一方面的第一种可能的实施方式，本专利技术实施例提供了第一方面的第二种可能的实施方式，其中，步骤云端获取所述目标对象的属性信息，包括：云端对所述目标图像帧进行预处理；所述预处理至少包括以下的一种或多种：图像二次取样、平滑去噪、提高图像对比度和调整尺度空间；云端从经过预处理的所述目标图像帧中，确定目标对象的属性信息；所述目标对象的属性信息至少包括车辆属性信息、人物身份属性信息和人脸属性信息；所述车辆属性信息包括以下信息中的一种或多种：至少包括车辆固有属性信息和车辆个性化信息；所述车辆固有属性信息至少包括车辆类型信息、车身颜色信息、车辆号码信息和车辆品牌型号信息；所述车辆个性化信息至少包括车内信息和驾驶员信息；所述人物身份属性信息至少包括性别信息、着装信息、佩戴信息以及随身信息；所述人脸属性信息至少包括表情信息、发型信息、年龄段信息、发色信息以及样貌信息。结合第一方面的第一种可能的实施方式或第二种可能的实施方式，本专利技术实施例提供了第一方面的第三种可能的实施方式，其中，步骤获取所述目标对象的属性信息还包括：云端将获取到的目标对象的车辆号码信息作为目标对象的属性信息；所述目标对象是车辆。结合第一方面，本专利技术实施例提供了第一方面的第四种可能的实施方式，其中，所述方法还包括：云端根据所述目标对象的属性信息生成重认证特征码；所述重认证特征码用于表示目标对象在视频流的至少两个图像帧中出现；云端为目标图像帧关联设置对应的重认证特征码；在接收到用户所发出的第一搜索关键字后，根据第一搜索关键字与重认证特征码的关联关系，检索对应的目标图像帧。云端根据重认证特征码，检索存储后的文本描述信息，以确定与重认证特征码相对应的目标图像帧。结合第一方面，本专利技术实施例提供了第一方面的第五种可能的实施方式，其中，所述方法还包括：在接收到用户所发出的第二搜索关键字，云端根据第二搜索关键字与文本描述信息的关联信息，检索对应的目标图像帧。结合第一方面，本专利技术实施例提供了第一方面的第六种可能的实施方式，其中，所述方法还包括：云端根据目标对象的属性信息，进行数据挖掘，以获取不同目标对象的关联信息；根据所述关联信息，生成关联信息的统计报表。第二方面，本专利技术实施例还提供了一种图像数据处理系统，其特征在于，包括：数据采集模块、第一数据处理模块、第二数据处理模块和数据分析模块；所述数据采集模块用于采集视频流；所述第一数据处理模块用于通过边缘化计算分析所述视频流，以提取包含目标对象的目标图像帧；所述第二数据处理模块用于对目标图像帧进行云计算处理，以获取目标对象的属性信息；所述数据分析模块用于分析所述属性信息，以确定所述目标图像帧的文本描述信息。结合第二方面，本专利技术实施例提供了第二方面的第一种可能的实施方式，其中，所述第一数据处理模块至少包括图像识别模块、图像择优模块；所述图像识别模块用于对视频流进行图像边缘识别和分割，以提取目标对象的候选图像帧；所述图像择优模块用于根据所述候选图像帧的量化指标，选择指定的候选图像作为目标图像帧；所述第二数据处理模块至少包括图像预处理模块、图像信息提取模块；所述图像预处理模块用于对目标图像帧进行预处理；所述图像信息提取模块用于从经过预处理的所述目标图像帧中，确定目标对象的属性信息。结合第二方面的第一种可能的实施方式，本专利技术实施例提供了第二方面的第二种可能的实施方式，其中，所述系统还包括数据存储模块、数据检索模块和数据挖掘模块；所述数据存储模块用于存储文本描述信息；所述数据检索模块用于通过获取的搜索关键字，以检索对应的目标图像帧；数据挖掘模块用于通过对目标对象的属性信息进行数据挖掘，获取不同目标信息的关联信息，以生成关联信息的统计报表。本专利技术实施例提供的一种图像数据处理的方法及系统，终端通过监控摄像头获取视频流，终端利用边缘化计算的方式，从所述视频流中提取包含目标对象的目标图像帧，云端获取所述目标对象的属性信息，云端根据获取的所述属性信息，确定所述目标图像帧的文本描述信息。本申请采用边缘计算和云计算相结合的方式，对视频流进行处理。通过将采集视频流和提取目标图像帧在终端通过边缘计算完成，同时，将获取目标图像帧中的目标对象的属性信息，以及对属性信息进行分析确定对应目标图像帧的文本描述信息通过云端完成。终端与云端之间传输结构化数据，以降低系统对网络带宽的需求(网络带宽受限时仅需传输结构化数据，原始视频图像数据按需调取)，降低云端计算视频解码的压力，降低云端智能分析的计算压力，从而降低云端功耗以及散热的需求。同时，提取视频图像的文本描述信息，并存储相应文本描述信息，优化了视频图像不利于检索的问题。为使本专利技术的上述目的、特征和优点能更明显易懂，下文特举较佳实施例，并配合所附附图，作详细说明如下。附图说明为了更清楚地说明本专利技术实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，应当理解，以下附图仅示出了本专利技术的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他相关本文档来自技高网...

【技术保护点】
1.一种图像数据处理方法，其特征在于，包括：终端通过监控摄像头获取视频流；终端利用边缘化计算的方式，从所述视频流中提取包含目标对象的目标图像帧；云端获取所述目标对象的属性信息；云端根据获取的所述属性信息，确定所述目标图像帧的文本描述信息。

【技术特征摘要】
1.一种图像数据处理方法，其特征在于，包括：终端通过监控摄像头获取视频流；终端利用边缘化计算的方式，从所述视频流中提取包含目标对象的目标图像帧；云端获取所述目标对象的属性信息；云端根据获取的所述属性信息，确定所述目标图像帧的文本描述信息。2.根据权利要求1所述的一种图像数据处理方法，其特征在于，所述终端利用边缘化计算的方式，从所述视频流中提取包含目标对象的目标图像帧，包括：终端对所述视频流进行图像边缘识别；终端根据图像边缘识别的识别结果，获取包含所述目标对象的候选图像帧；终端根据所述候选图像帧的量化指标，选择指定的候选图像帧作为目标图像帧；所述量化指标至少包括目标对象的尺寸、目标对象被遮挡的程度和目标对象的清晰度。3.根据权利要求1所述的一种图像数据处理方法，其特征在于，步骤云端获取所述目标对象的属性信息，包括：云端对所述目标图像帧进行预处理；所述预处理至少包括以下的一种或多种：图像二次取样、平滑去噪、提高图像对比度和调整尺度空间；云端从经过预处理的所述目标图像帧中，确定目标对象的属性信息；所述目标对象的属性信息至少包括车辆属性信息、人物身份属性信息和人脸属性信息；所述车辆属性信息包括以下信息中的一种或多种：至少包括车辆固有属性信息和车辆个性化信息；所述车辆固有属性信息至少包括车辆类型信息、车身颜色信息、车辆号码信息和车辆品牌型号信息；所述车辆个性化信息至少包括车内信息和驾驶员信息；所述人物身份属性信息至少包括性别信息、着装信息、佩戴信息以及随身信息；所述人脸属性信息至少包括表情信息、发型信息、年龄段信息、发色信息以及样貌信息。4.根据权利要求3所述的一种图像数据处理方法，其特征在于，步骤云端获取所述目标对象的属性信息还包括：云端将获取到的目标对象的车辆号码信息作为目标对象的属性信息；所述目标对象是车辆。5.根据权利要求1所述的一种图像数据处理方法，其特征在于，所述方法还包括：云端根据所述目标对象的属性信息生成重认证特征码；所述重认证特征码用于表示目标对象在视频流的至少两个图像帧中出现；云端为目标图像帧关联设置对应的重...

【专利技术属性】
技术研发人员：王建辉，徐延迟，王旭东，陈瑞军，李田生，
申请(专利权)人：北京深瞐科技有限公司，
类型：发明
国别省市：北京,11