[发明专利]物联网异构数据存储方法及系统

摘要

本发明公开一种物联网异构数据存储方法及系统，所述方法通过HBase分布式存储系统对各种类型的数据进行基于列的存储，并通过MySQL元数据库对存储的数据进行登记管理，最后对数据访问层进行统一配置，使得基于该数据库的应用都能使用统一的数据接口。本发明在数据接口采用统一的存储方式，有效的支持不同来源、不同类型数据的存储；利用HBase技术，扩大列导向的存储机制，使得存储容量可水平扩展；采用内存映射文件机制，有效的解决了大文件存储和管理的效率；采用数据冗余存放技术，大大提高系统的可靠性和访问性能。本发明能很好的解决不同类型数据的存储问题，对大文件具有高效的存储和利用能力，另外还有低成本和高鲁棒性。

主权项

一种物联网异构数据存储方法，其特征在于该方法通过HBase分布式存储系统对各种类型的数据进行基于列的存储，并通过MySQL元数据库对存储的数据进行登记管理，最后对数据访问层进行统一配置，使得基于该数据库的应用都能使用统一的数据接口；所述方法包括如下步骤：(1)系统前端将需要存储的数据送入数据存储系统；(2)在步骤(1)所述数据存储系统采用HBase技术搭建的异构存储集群中，为不同类型的数据指定存储列簇；(3)MySQL元数据库对不同类型的存储数据进行进行登记，通过注册服务器向MySQL元数据库中登记数据信息，在将数据存储在步骤(2)中所述数据存储系统前，会对接收的数据标识信息和元数据库中的信息进行验证，没有登记过的实体所发送的数据将直接丢弃；(4)在数据访问层，对不同格式的数据进行统一解析，不同的数据访问请求会路由到不同的数据库中；(5)所有的物联网应用均通过步骤(4)所述的统一的数据接口对存储的数据进行访问。