[发明专利]一种面向云平台的混合结构数据高性能存储、查询方法

摘要

本发明公开了一种面向云平台的混合结构数据高性能存储、查询方法。本方法为：1)将云平台的数据集根据时间分段划分为一系列的存储页；然后分别将每一存储页存储到云平台中的一存储节点；2)云平台对当前收到的增量数据封装后发送给对应的存储节点，该存储节点根据该增量数据的时间戳确定是否需要建立新的存储页，如果需要，则根据当前时间戳创建新的存储页并建立页索引和属性索引存储结构；否则根据采样时间确定所属的时间分段位置，从该存储节点的数据集中获取对应的存储页；3)该存储节点将该封装数据存储到该存储页中并更新页索引；并且根据该数据属性集从该增量数据中提取对应属性值，然后根据属性值的规约区间更新属性索引存储结构。

主权项

1.一种面向云平台的混合结构数据高性能存储方法，其步骤为：1)将云平台的数据集dataStore根据时间分段划分为一系列的存储页dataPage；然后分别将每一存储页dataPage存储到云平台中的一存储节点；2)云平台对当前收到的增量数据data，将其封装为D＝{data,propertySet,timeStamp},data＝{content,time}；其中，增量数据data包括数据内容content以及采样时间time；timestamp为收到该增量数据的时间戳；propertySet为数据属性集，定义在数据内容content中获取对应属性的映射位置；所述数据属性集propertySet＝{(tagName,path)_i|i＝1,2,...n}；其中tagName为属性名称，path为该属性在数据content中映射的路径位置，n为属性总数；3)云平台根据增量数据的时间戳将该封装数据D发送给对应的存储节点，该存储节点根据该增量数据的时间戳确定是否需要建立新的存储页，如果需要，则根据当前时间戳创建新的存储页，并为该新存储页建立页索引和属性索引存储结构；如果不需要，则该存储节点根据该增量数据data的采样时间确定该增量数据data所属的时间分段位置，并根据该时间分段位置从该存储节点的数据集dataStore中获取对应的存储页；4)该存储节点将该封装数据D存储到该存储页中并更新页索引；并且根据该数据属性集从该增量数据中提取对应属性的属性值，然后根据属性值的规约区间更新属性索引存储结构。