[发明专利]物联网快速统一存储系统

说明书

技术领域

本发明涉及一种存储系统，尤其是一种物联网快速统一存储系统，属于物联网存储的技术领域。

背景技术

目前，随着物联网技术在实践领域的广泛应用，物联网技术的发展对数据的要求越来越高，这主要体现在一下几个方面：

首先，物联网系统所产生的数据增长越来越快，而且以非结构化数据为主。以车联网为例，一个中等发达城市（拥有百万辆汽车）的所有汽车一年采集的车身信息就达到几百TB级，如果把这些汽车行驶记录以及由行驶相关业务所产生的信息记录下来，数据量将达到ZB级别。如此规模的数据量必须有一个易于扩展、容错能力强并且具备良好的用户友好性，否则将无法满足不断增加的物联网应用的需求。

其次，数据处理和分析的实时性要求越来越高，传统的关系型数据模型已经远远无法满足需求。而在车联网中，对数据处理和分析的实时性要求更高，为了达到防撞的目的，整个车联网系统必须在数毫秒的时间内对汽车周围的环境做出预判并提醒司机要注意安全防止事故的发生，所以拥有一个安全可靠高实时性的数据存储系统对于车联网是非常必要的。

最后，随着物联网应用的越来越复杂，为了方便用户，必须消除物联网异构数据的对用户的影响，即必须实现物联网异构数据的统一存储。

发明内容

本发明的目的是克服现有技术中存在的不足，提供一种物联网快速统一存储系统，其能够实现物联网海量异构数据统一存储，满足存储数据的快速访问，成本低廉，可靠性强，易于扩展。

按照本发明提供的技术方案，所述物联网快速统一存储系统，包括能采集并上传物联网的数据文件并能读取已存储物联网数据文件的客户端；所述客户端分别与快速协同管理子系统以及海云分布式文件存储系统连接，快速协同管理子系统与海云分布式存储系统连接；海云分布式存储系统，将客户端上传的数据文件存储，并通过快速协同管理子系统提供客户端所需的实时访问数据。

所述海云分布式文件存储系统包括追踪服务器、用于数据存储的存储服务器集群以及用于提供客户端及快速系统管理子系统的连接接口访问控制模块。

所述访问接口控制模块包括共用接口库、大文件管理子模块及小文件管理子模块；通过大文件管理子模块能进行大文件上传、下载的接口，以进行文件分割、验证信息文件的生成及维护、文件搜索、定位及文件合并、验证；小文件管理子模块通过调用共用接口库进行小文件的上传及下载；通过共用接口库进行访问追踪服务器以及存储服务器集群。

所述追踪服务器包括追踪代理服务器集群以及追踪服务器集群，追踪代理服务器集群记录追踪服务器集群的运行信息，并根据追踪服务器集群的运行信息确定追踪服务器集群内响应的追踪服务机；所述追踪代理服务器集群采用双机镜像模式或多机集群模式。

所述快速协同管理子系统包括协同管理模块以及与所述协同管理模块连接的高速缓存子系统；所述协同管理模块包括集群管理模块、数据交换模块以及控制模块。

所述高速缓存子系统包括支持Nosql的内存数据库。所述海云分布式存储系统内以JSON格式存储结构化数据。

本发明的优点：客户端与快速协同管理子系统及海云分布式文件存储系统连接，快速协同管理子系统与海云分布式文件存储系统3连接，并支持Nosql技术，这样既实现物联网海量异构数据的统一存储，又满足了物联网应用系统对数据访问的实时性需求。

附图说明

图1为本发明的结构示意图。

图2为本发明海云分布式文件存储系统的结构框图。

图3为本发明快速协同管理子系统的结构框图。

附图标记说明：1-客户端、2-快速协同管理子系统、3-海云分布式文件存储系统、4-访问控制模块、5-共用接口库、6-大文件管理子模块、7-小文件管理子模块、8-追踪服务器、9-追踪代理服务器集群、10-追踪服务器集群、11-存储服务器集群、12-存储服务器群组、13-协同管理模块、14-集群管理模块、15-数据交互模块、16-控制模块、17-高速缓存子系统及18-缓存服务器群组。

具体实施方式

下面结合具体附图和实施例对本发明作进一步说明。