[发明专利]一种基于HDF5的分块式数据存储及读取方法

摘要

本发明公开了一种基于HDF5的分块式数据存储及读取方法，运行于Linux操作系统，使用HDF5分层数据格式，设计复合数据类型的分块属性数据集，对一次放电时间按照1s的长度进行分割，进行分块式存储与读取，以实现实时数据存储与数据读取；使用HDF5的可视化工具Hdfview查看存储的数据及属性，Qt读取HDF5文件，并进行波形显示与分析。本发明将分层数据格式HDF5应用于存储和管理数据的模型中，其数据存储规模可以无限大，具有可移植性。

主权项

1.一种基于HDF5的分块式数据存储及读取方法，其特征在于包括以下步骤：（1）当放电开始时，创建HDF5文件，创建数据空间，设置分块属性，创建复合数据类型，使用所述分块属性和复合数据类型创建数据集；（2）将一次放电时长按照1s的长度进行分割，循环存储数据，存储线程记当前存储的数据为第N块，接收数据线程根据TCP协议接收数据并存储到缓存中，当1s数据搜集完成时，存储线程将第N块数据写入到HDF5文件，接收数据线程则开始搜集第N+1块的数据，读取线程打开HDF5文件，打开数据集，获取数据空间，获取数据集维度，获取数据类型，然后等待存储线程发送的标志位；（3）当第N块数据写完成后，存储线程发送标志位以及块索引号到读取线程，读取线程获取第N块数据集属性，并根据块索引号选择第N块，实现实时数据读取；（4）通过HDF5的可视化工具Hdfview查看存储的数据，通过Qt读取HDF5文件，并绘制和分析波形。