[发明专利]一种大数据量信息存储与访问方法

权利要求书

1.一种大数据量信息存储与访问方法，其特征在于：包括，

S1，数据存储：

对路测数据进行解码，将解码所述路测数据得到的信息进行分类组织并存储到索引文件和数据文件；

所述索引文件由不同存储类型的索引块组成，所述索引块包括所述数据文件中的偏移位置、数据块长度、起始索引序号和结束索引序号；

所述数据文件由数据块组成，一个所述数据块记录的条数为：所述索引块的结束索引序号一起始索引序号+1条；

所述索引文件和所述数据文件一一对应；

S2，数据访问：

查找数据块缓存列表，若查找到所需数据位置，则确定待访问的数据块；

若不能查找到所述数据块位置，则通过查找所述索引块对应的数据块确定所述数据块位置，若不能成功查找到所述索引块对应的所述数据块，则结束访问；若成功查找到所述索引块对应的所述数据块位置，则加载所述索引块对应的所述数据块，并将所述数据块添加到数据块缓存列表，确定待访问的数据块；

从确定的待访问的数据块中读出要访问的数据。

2.根据权利要求1所述的大数据量信息存储与访问方法，其特征在于：所述索引文件和所述数据文件均为二进制文件。

3.根据权利要求1所述的大数据量信息存储与访问方法，其特征在于：所述路测数据的存储格式版本能够向前兼容访问，具体包括三种兼容访问模式：

a、在程序中针对修改过的数据块兼容访问；

b、通过数据块中版本信息区分兼容访问；

c、通过新建存储类型区分，包括新添加数据块与索引块，通过索引文件中存在的存储类型ID兼容访问。

4.根据权利要求1所述的大数据量信息存储与访问方法，其特征在于：所述数据访问还包括：先在索引文件中查找要访问的采样点所处的索引块，然后通过索引块中的所述数据文件中的偏移位置在数据文件中读取数据块的长度，再按照所述数据块的格式还原成要访问的数据流。

5.根据权利要求1所述的大数据量信息存储与访问方法，其特征在于：所述数据块缓存在内存，并在内存中设置缓存存储所述数据块的数量。

6.根据权利要求5所述的大数据量信息存储与访问方法，其特征在于：所述设置缓存存储所述数据块的数量，具体为，能够存储的所述数据块的数量设定为3，包括上一个数据块、当前数据块和下一个数据块，当所述数据块的数量超过3时，对访问频率低的数据块进行清理。

7.根据权利要求1所述的大数据量信息存储与访问方法，其特征在于：所述数据文件为数据存储文件，当路测数据存满一个数据块时向所述数据文件写入一次，每向所述数据文件中写入一个所述数据块，同时向索引文件写入一个对应的索引块。

8.根据权利要求1所述的大数据量信息存储与访问方法，其特征在于：所述索引文件内容全部缓存在内存。