[发明专利]数据接入系统及数据接入方法

权利要求书

1.一种数据接入系统，其特征在于，包括：

驱动配置模块、接收模块以及格式转换模块；

所述驱动配置模块设置有不同种类数据对应的适配器，用于基于各适配器采集对应种类的数据，并将采集的数据发送至所述接收模块；

所述接收模块用于接收所述驱动配置模块中采集的数据，并将各数据发送至所述格式转换模块；

所述格式转换模块用于将各数据的格式转换为预设格式。

2.根据权利要求1所述的数据接入系统，其特征在于，所述适配器还用于解析对应种类的数据，并确定对应数据的事件类型。

3.根据权利要求2所述的数据接入系统，其特征在于，所述接收模块包括接口、第一传输模块以及第二传输模块；

所述接口用于接收所述驱动配置模块中采集的数据，并基于数据的事件类型，将数据分配至所述第一传输模块或所述第二传输模块中进行存储；所述第一传输模块用于存储事件类型为批量型事件的数据，所述第二传输模块用于存储事件类型为随机型事件的数据。

4.根据权利要求3所述的数据接入系统，其特征在于，所述第一传输模块是基于Redis缓存方式进行数据存储的，所述第二传输模块是基于Kafka消息队列或MQ集群进行数据存储的。

5.根据权利要求1至4任一项所述的数据接入系统，其特征在于，所述不同种类数据包括结构化数据、流式数据以及混合类数据，所述混合类数据指除结构化数据和流式数据以外的数据；所述格式转换模块包括第一转换模块、第二转换模块以及第三转换模块；

所述第一转换模块用于基于数据流系统Apache Nifi将所述结构化数据的格式转化为预设格式，所述第二转换模块用于基于开源流处理框架Apache Flink将所述流式数据的格式转化为预设格式，所述第三转换模块用于定时将所述混合类数据的格式转化为预设格式。

6.根据权利要求1至4任一项所述的数据接入系统，其特征在于，所述预设格式为AVRO格式或JSON格式。

7.根据权利要求1至4任一项所述的数据接入系统，其特征在于，所述数据包括传感器数据、摄像头数据、门闸类数据以及监控数据中的至少一种；各种类数据对应的适配器数量是基于对应种类数据的数量确定的。

8.一种基于如权利要求1至7任一项所述的数据接入系统的数据接入方法，其特征在于，包括：

通过所述驱动配置模块中不同种类数据对应的适配器采集对应种类的数据，并通过所述适配器将采集的数据发送至所述接收模块，以使所述接收模块将各数据发送至所述格式转换模块；

通过所述格式转换模块将各数据的格式转换为预设格式。

9.一种电子设备，包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现如权利要求8所述数据接入方法的步骤。

10.一种非暂态计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求8所述数据接入方法的步骤。