[发明专利]车辆数据处理平台

说明书

本发明涉及数据处理技术领域，具体提供了一种车辆数据处理平台，旨在解决如何存储与分析海量级别的车辆数据的技术问题。为此目的，本发明提供的车辆数据处理平台中第一分布式消息队列系统包括多个消息队列，分布式数据处理系统包括多个数据处理节点，消息队列可以接收第一外部系统发送的车辆数据，数据处理节点可以获取预先与其绑定的消息队列接收到的车辆数据，对车辆数据进行数据分析并将数据分析结果发送至分布式存储系统。基于上述结构，本发明能够根据实际需求对消息队列和数据处理节点的数量进行扩展，对分布式存储系统的存储空间进行扩展，不仅实现了对海量级别的车辆数据的存储与处理，还避免了车辆数据处理平台存在性能热点系统。

技术领域

本发明涉及数据处理技术领域，具体涉及车辆数据处理平台。

背景技术

动力电池作为电动汽车的核心部件，需要及时监控其工作状态来保障电动汽车的安全运行，为此，需要向远端服务器定时发送动力电池的状态数据，以及车辆中动力电池相关设备(如电池管理系统、电力驱动系统和使用动力电池供电的车载设备等)的状态数据，从而根据这些数据准确分析出动力电池的工作状态。

但是，由于动力电池的数量较多，以及每个动力电池的状态数据来源也很多(如车辆、充电设备和电池存储站等)，同时这些数据源向远端服务器定时发送数据的周期往往也很小(如几秒)，因此，需要存储与分析海量级别的车辆数据。然而，目前通常是采用基于单机存储的关系型数据库来存储车辆数据，这无法满足对海量级别数据的快速读取与写入，进而无法实现实时地数据分析与处理。

发明内容

为了解决现有技术中的上述问题，即为了解决如何存储与分析海量级别的车辆数据的技术问题。为此目的，本发明提供了一种车辆数据处理平台，所述车辆数据处理平台包括第一分布式消息队列系统、分布式数据处理系统和分布式存储系统，所述第一分布式消息队列系统包括多个消息队列，所述分布式数据处理系统包括多个数据处理节点；所述消息队列配置为接收第一外部系统发送的车辆数据；所述数据处理节点配置为获取预先与其绑定的消息队列接收到的车辆数据，对所述车辆数据进行数据分析并将数据分析结果发送至所述分布式存储系统进行存储，通过该车辆数据处理平台能够存储与分析海量级别的车辆数据。

进一步地，本发明提供的一个可选技术方案是：

所述数据处理节点包括数据解析模块、数据缓存模块和数据聚合分析模块，所述数据聚合分析模块包括数据统计子模块和数据报警子模块；

所述数据解析模块配置为解析所述车辆数据并将解析结果发送至所述数据缓存模块；

所述数据统计子模块配置为获取所述数据缓存模块中的缓存数据，对所述缓存数据进行数据统计并将数据统计结果发送至所述分布式存储系统进行存储；

所述数据报警子模块配置为获取所述数据缓存模块中的缓存数据，对所述缓存数据进行报警分析并将报警分析结果发送至所述分布式存储系统进行存储。

进一步地，本发明提供的一个可选技术方案是：所述数据缓存模块包括多个数据池以及与每个数据池对应的缓存队列和读写线程，所述数据池配置为通过哈希表缓存所述车辆数据的解析结果。

进一步地，本发明提供的一个可选技术方案是：当所述车辆数据是动力电池相关数据时，所述数据缓存模块配置为通过以下方式为所述车辆数据的解析结果分配数据池：

Data_pool_ID＝Hash(Battery_ID)％M

其中，所述Data_pool_ID是数据池的编号，所述Battery_ID是动力电池的编号，所述M是所述数据缓存模块中数据池的总数，所述Hash表示散列函数，所述％表示取余运算。

进一步地，本发明提供的一个可选技术方案是：所述分布式存储系统包括分布式键值存储子系统，所述数据处理节点还包括第一数据异步发送模块；