[发明专利]一种基于Flink框架的数据分析方法及装置

说明书

本申请提供一种基于Flink框架的数据分析方法及装置，该基于Flink框架的数据分析方法通过采用数据分析模型分析视频数据，在出现在目标时间段的车辆未出现在其他时间段时，判断该车辆是嫌疑车辆，并记录该嫌疑车辆的嫌疑车辆数据，使得车辆仅在夜间出行时，可以记录该车辆作为嫌疑车辆，便于后续对嫌疑车辆进行判断，使得能够快速分析出嫌疑车辆，分析效率较高，且在存储嫌疑车辆数据时，将嫌疑车辆数据赋予索引标识和与索引标识对应的数据标识，使得后续在查询嫌疑车辆数据时，可以先根据索引标识快速查找到嫌疑车辆数据的位置，然后根据数据标识准确查找到嫌疑车辆数据的内容，从而能够快速查找到嫌疑车辆数据，加快了数据查询效率。

技术领域

本申请涉及智慧交通技术领域，尤其是涉及一种基于Flink框架的数据分析方法及装置。

背景技术

随着技术的进步和发展，为了防止违法的事件发生，会在各个区域设置抓拍设备，包括在各个道路、各个小区、各个路口等位置设置前端摄像头，以使得抓拍设备能够采集各个区域的信息，从而根据各个抓拍设备采集到的信息得到违法的数据，但由于抓拍设备的数量较多，导致得到的数据量数以亿计，在对数据进行分析和处理时，例如获取违法车辆的信息时，需要人工来对数据进行分析和处理，而数据量过大导致分析效率较低，且由于人为的疏忽会导致无法准确的获取到违法数据。

所以，现有数据分析方法存在需要人工处理，导致分析效率较低的技术问题。

发明内容

本申请实施例提供一种基于Flink框架的数据分析方法及装置，用以缓解现有数据分析方法存在需要人工处理，导致分析效率较低的技术问题。

本申请实施例提供一种基于Flink框架的数据分析方法，该基于Flink框架的数据分析方法包括：

获取携带数据执行标识的数据执行请求；

根据所述数据执行请求，获取所述Flink框架中于所述数据执行标识对应的数据分析模型；

根据所述数据分析模型以及所述数据执行请求携带的视频数据，判断出现在所述视频数据的目标时间段的车辆是否出现在其他时间段，并在出现在所述视频数据的目标时间段的车辆未出现在其他时间段时，得到嫌疑车辆数据；嫌疑车辆包括出现在目标时间段且未出现在其他时间段的车辆；

根据所述嫌疑车辆数据，对所述嫌疑车辆数据赋予索引标识以及与所述索引标识对应的数据标识；

根据所述索引标识和数据标识，将所述嫌疑车辆数据分别存储在ES系统的和Hbase系统。

同时，本申请实施例提供一种基于Flink框架的数据分析装置，该基于Flink框架的数据分析装置包括：

第一获取模块，用于获取携带数据执行标识的数据执行请求；

第二获取模块，用于根据所述数据执行标识，获取所述Flink框架中与所述数据执行标识对应的数据分析模型；

分析模块，用于根据所述数据分析模型以及所述数据执行请求携带的视频数据，判断出现在所述视频数据的目标时间段的车辆是否出现在其他时间段，并在出现在所述视频数据的目标时间段的车辆未出现在其他时间段时，得到嫌疑车辆数据；嫌疑车辆包括出现在目标时间段且未出现在其他时间段的车辆；

赋予模块，用于根据所述嫌疑车辆数据，对所述嫌疑车辆数据赋予索引标识以及与所述索引标识对应的数据标识；

存储模块，用于根据所述索引标识和数据标识，将所述嫌疑车辆数据分别存储在ES系统和Hbase系统。

同时，本申请实施例提供一种服务器，所述服务器包括存储器，处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，其中，所述处理器执行程序时实现上述基于Flink框架的数据分析方法中的步骤。