【技术实现步骤摘要】
一种基于Flink框架的数据分析方法及装置
本申请涉及智慧交通
，尤其是涉及一种基于Flink框架的数据分析方法及装置。
技术介绍
随着技术的进步和发展，为了防止违法的事件发生，会在各个区域设置抓拍设备，包括在各个道路、各个小区、各个路口等位置设置前端摄像头，以使得抓拍设备能够采集各个区域的信息，从而根据各个抓拍设备采集到的信息得到违法的数据，但由于抓拍设备的数量较多，导致得到的数据量数以亿计，在对数据进行分析和处理时，例如获取违法车辆的信息时，需要人工来对数据进行分析和处理，而数据量过大导致分析效率较低，且由于人为的疏忽会导致无法准确的获取到违法数据。所以，现有数据分析方法存在需要人工处理，导致分析效率较低的技术问题。
技术实现思路
本申请实施例提供一种基于Flink框架的数据分析方法及装置，用以缓解现有数据分析方法存在需要人工处理，导致分析效率较低的技术问题。本申请实施例提供一种基于Flink框架的数据分析方法，该基于Flink框架的数据分析方法包括：获取携带数据执行标识的数据执...
【技术保护点】
1.一种基于Flink框架的数据分析方法，其特征在于，包括：/n获取携带数据执行标识的数据执行请求；/n根据所述数据执行标识，获取所述Flink框架中与所述数据执行标识对应的数据分析模型；/n根据所述数据分析模型以及所述数据执行请求携带的视频数据，判断出现在所述视频数据的目标时间段的车辆是否出现在其他时间段，并在出现在所述视频数据的目标时间段的车辆未出现在其他时间段时，得到嫌疑车辆数据；嫌疑车辆包括出现在目标时间段且未出现在其他时间段的车辆；/n根据所述嫌疑车辆数据，对所述嫌疑车辆数据赋予索引标识以及与所述索引标识对应的数据标识；/n根据所述索引标识和数据标识，将所述嫌疑车...
【技术特征摘要】
1.一种基于Flink框架的数据分析方法，其特征在于，包括：
获取携带数据执行标识的数据执行请求；
根据所述数据执行标识，获取所述Flink框架中与所述数据执行标识对应的数据分析模型；
根据所述数据分析模型以及所述数据执行请求携带的视频数据，判断出现在所述视频数据的目标时间段的车辆是否出现在其他时间段，并在出现在所述视频数据的目标时间段的车辆未出现在其他时间段时，得到嫌疑车辆数据；嫌疑车辆包括出现在目标时间段且未出现在其他时间段的车辆；
根据所述嫌疑车辆数据，对所述嫌疑车辆数据赋予索引标识以及与所述索引标识对应的数据标识；
根据所述索引标识和数据标识，将所述嫌疑车辆数据分别存储在ES系统和Hbase系统。
2.如权利要求1所述的基于Flink框架的数据分析方法，其特征在于，所述根据所述数据分析模型以及所述数据执行请求携带的视频数据，判断出现在所述视频数据的目标时间段的车辆是否出现在其他时间段，并在出现在所述视频数据的目标时间段的车辆未出现在其他时间段时，得到嫌疑车辆数据的步骤，包括：
根据预设时间，将所述视频数据划分为第一视频数据和第二视频数据；
根据所述第一视频数据和第二视频数据，判断存在于第二视频数据中的各个车辆是否存在于所述第一视频数据；
在所述车辆不存在于所述第一视频数据时，记录所述车辆的车辆数据信息，并将所述车辆数据信息作为嫌疑车辆数据。
3.如权利要求2所述的基于Flink框架的数据分析方法，其特征在于，所述根据预设时间，将所述视频数据划分为第一视频数据和第二视频数据的步骤，包括：
根据预设时间，判断所述视频数据中的视频片段的时间是否大于预设时间；
在所述视频数据中的视频片段的时间小于或者等于预设时间时，将所述视频片段作为第一视频数据；
在所述视频数据中的视频片段的时间大于预设时间时，将所述视频片段作为第二视频数据。
4.如权利要求2所述的基于Flink框架的数据分析方法，其特征在于，所述在所述车辆不存在于所述第一视频数据时，记录所述车辆的车辆数据信息，并将所述车辆数据信息作为嫌疑车辆数据的步骤，包括：
在所述车辆不存在于所述第一视频数据时，获取所述车辆的车辆关键信息；
根据所述车辆的车辆关键信息，对所述车辆进行分组，并获取到各个车辆的数据信息；
根据所述车辆关键信息、所述数据信息，得到各个车辆的车辆数据信息，并将所述车辆数据信息作为嫌疑车辆数据。
5.如权利要求4所述的基于Flink框架的数据分析方法，其特征在于，所述根据所述车辆的车辆关键信息，对所述车辆进行分组，并获取到各个车辆的数据信息的步骤，包括：
根据所述车辆关键信息，获取到所述车辆的各个时间的数据信息；
根据所述车辆的各...
【专利技术属性】
技术研发人员：吕泽，
申请(专利权)人：武汉中科通达高新技术股份有限公司，
类型：发明
国别省市：湖北;42
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。