[发明专利]基于动力车间大数据的海量数据采集系统

权利要求书

1.一种基于动力车间大数据的海量数据采集系统，其特征在于，包括：

至少一数据采集端，每一数据采集端对应至少一工业设备，用于采集至少一实时能源消耗参数；

至少一数据处理器，每一数据处理器对应至少一所述数据采集端，用于接收所述实时能源消耗参数并对其转换为统一的数据格式；以及

至少一数据存储端，每一数据存储端对应至少一所述数据处理器，用于接收并储存统一数据格式的实时能源消耗参数。

2.如权利要求1所述的基于动力车间大数据的海量数据采集系统，其特征在于，所述数据采集端包括：

数据采集模块，连接至一工业设备的数控单元，用于采集至少一工业设备的至少一实时能源消耗参数；以及

终端数据传输模块，连接至所述数据采集模块，用于传送所述实时能源消耗参数至一数据处理器。

3.如权利要求1所述的基于动力车间大数据的海量数据采集系统，其特征在于，所述数据处理器包括：

一数据处理器数据传输模块，通过以太网连接至所述终端数据传输模块，用于从所述数据采集端至少一次获取至少一实时实时能源消耗参数；以及

一数据处理及分析模块，连接至所述数据处理器数据传输模块，用于根据每次获取的所述实时能源消耗参数转换为统一的数据格式。

4.如权利要求1所述的基于动力车间大数据的海量数据采集系统，其特征在于，所述数据存储端包括：

一数据存储模块，连接至所述数据处理器数据传输模块，用于接收并储存统一数据格式的实时能源消耗参数。

5.如权利要求3所述的基于动力车间大数据的海量数据采集系统，其特征在于，所述数据存储端还包括：

数据判断模块，连接至所述数据处理器数据传输模块，用于判断数据是否需要存储。

6.如权利要求4所述的基于动力车间大数据的海量数据采集系统，其特征在于，所述数据判断模块判断数据是否需要存储的判断依据是所述实时能源消耗参数数据是否需要先进行处理后再存储在所述数据存储模块中。

7.如权利要求1所述的基于动力车间大数据的海量数据采集系统，其特征在于，所述实时能源消耗参数为所述工业设备在正常运行中实时监测的能源消耗参数。

8.如权利要求1所述的基于动力车间大数据的海量数据采集系统，其特征在于，所述数据处理及分析模块根据每次获取的所述实时能源消耗参数转换为统一的数据格式的步骤包括：

通过Kafka分布式消息队列进行数据缓存，将部署Storm的实时大数据计算平台作为Kafka的数据消费端，采用Kafka与Storm的集成KafkaSpout作为消息队列和大数据平台衔接的数据源，并以数据载体的形式传递至下一级Bolt进行分析处理；

当数据源Kafkaspout接收到运行数据后，首先通过数据拆分Bolt，获取不同运行数据在不同采集通道上的数据；

数据清洗处理，从采集的所述实时能源消耗参数中删除具有空值、离群值和明显错误信息的数据；以及

数据格式化处理，将所述实时能源消耗参数转换为统一的数据格式。

9.如权利要求8所述的基于动力车间大数据的海量数据采集系统，其特征在于，所述数据清洗处理的具体方式为：首先检查数据是否合格，如果合格，继续进行后续数据处理，如果数据不合格，则执行数据清理和过滤操作，从采集的所述实时能源消耗参数中删除具有空值、离群值和明显错误信息的数据。

10.如权利要求8所述的基于动力车间大数据的海量数据采集系统，其特征在于，所述数据格式化包括数据标定和删除冗余值，具体方式为：对数据进行校准和格式化，将模拟值转换为真实值，同时删除传感器和采集系统存储的数据中的冗余信息，如数据标题、标头和其它字段。