[发明专利]车辆数据处理平台在审
申请号: | 201910323527.0 | 申请日: | 2019-04-22 |
公开(公告)号: | CN110196850A | 公开(公告)日: | 2019-09-03 |
发明(设计)人: | 张旭东;周洪伟;唐怀东 | 申请(专利权)人: | 上海蔚来汽车有限公司 |
主分类号: | G06F16/22 | 分类号: | G06F16/22;G06F16/2455;G06F16/2458;G06F16/248;G06F16/25 |
代理公司: | 北京瀚仁知识产权代理事务所(普通合伙) 11482 | 代理人: | 屠晓旭;宋宝库 |
地址: | 201804 上海市*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 车辆数据 车辆数据处理 消息队列 数据处理节点 分布式存储系统 存储 分布式数据处理系统 发送 数据处理技术 数据分析结果 分布式消息 存储空间 队列系统 热点系统 实际需求 数据分析 外部系统 绑定 分析 | ||
1.一种车辆数据处理平台,其特征在于,所述车辆数据处理平台包括第一分布式消息队列系统、分布式数据处理系统和分布式存储系统,所述第一分布式消息队列系统包括多个消息队列,所述分布式数据处理系统包括多个数据处理节点;
所述消息队列配置为接收第一外部系统发送的车辆数据;
所述数据处理节点配置为获取预先与其绑定的消息队列接收到的车辆数据,对所述车辆数据进行数据分析并将数据分析结果发送至所述分布式存储系统进行存储。
2.根据权利要求1所述的车辆数据处理平台,其特征在于,所述数据处理节点包括数据解析模块、数据缓存模块和数据聚合分析模块,所述数据聚合分析模块包括数据统计子模块和数据报警子模块;
所述数据解析模块配置为解析所述车辆数据并将解析结果发送至所述数据缓存模块;
所述数据统计子模块配置为获取所述数据缓存模块中的缓存数据,对所述缓存数据进行数据统计并将数据统计结果发送至所述分布式存储系统进行存储;
所述数据报警子模块配置为获取所述数据缓存模块中的缓存数据,对所述缓存数据进行报警分析并将报警分析结果发送至所述分布式存储系统进行存储。
3.根据权利要求2所述的车辆数据处理平台,其特征在于,所述数据缓存模块包括多个数据池以及与每个数据池对应的缓存队列和读写线程,所述数据池配置为通过哈希表缓存所述车辆数据的解析结果。
4.根据权利要求3所述的车辆数据处理平台,其特征在于,当所述车辆数据是动力电池相关数据时,所述数据缓存模块配置为通过以下方式为所述车辆数据的解析结果分配数据池:
Data_poolID=Hash(BatteryID)%M
其中,所述Data_poolID是数据池的编号,所述BatteryID是动力电池的编号,所述M是所述数据缓存模块中数据池的总数,所述Hash表示散列函数,所述%表示取余运算。
5.根据权利要求2所述的车辆数据处理平台,其特征在于,所述分布式存储系统包括分布式键值存储子系统,所述数据处理节点还包括第一数据异步发送模块;
所述第一数据异步发送模块配置为接收所述数据解析模块输出的解析结果、接收所述数据融合分析模块输出的数据统计结果和报警分析结果,并通过异步传输方式将所述解析结果、数据统计结果和报警分析结果发送至所述分布式键值存储子系统进行存储;
其中,所述分布式键值存储子系统是基于Key-Value键值对存储结构构建的存储子系统。
6.根据权利要求2所述的车辆数据处理平台,其特征在于,所述分布式存储系统还包括分布式对象存储子系统,所述车辆数据处理平台还包括第二分布式消息队列系统和周期性持久化服务系统;
所述数据处理节点还包括第二数据异步发送模块,所述第二数据异步发送模块配置为接收所述数据解析模块输出的解析结果、接收所述数据融合分析模块输出的数据统计结果和报警分析结果,并通过异步传输方式将所述解析结果、数据统计结果和报警分析结果发送至所述第二分布式消息队列系统;
所述周期性持久化服务系统配置为将所述第二分布式消息队列系统接收到的解析结果、数据统计结果和报警分析结果定时发送至所述分布式对象存储子系统进行存储;
其中,所述分布式对象存储子系统是基于对象存储结构构建的存储子系统。
7.根据权利要求6所述的车辆数据处理平台,其特征在于,所述车辆数据处理平台还包括数据仓库,所述分布式对象存储子系统还配置为对其存储的数据添加相应的元数据,并将添加元数据后的数据发送至所述数据仓库进行存储;
其中,所述元数据包括所述数据在所述分布式对象存储子系统中对应的数据表的名称、所述数据表所属数据库的名称、所述数据表的分区信息和所述数据的存储路径。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海蔚来汽车有限公司,未经上海蔚来汽车有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910323527.0/1.html,转载请声明来源钻瓜专利网。