一种大数据量信息存储与访问方法

摘要

本发明提供了一种大数据量信息存储与访问方法，包括S1，数据存储：对路测数据进行解码并进行分类组织并存储到索引文件和数据文件；S2，数据访问：查找数据块缓存列表，若查找到所需数据位置，则确定待访问的数据块；若不能查找到所述数据块位置，则通过查找所述索引块对应的数据块确定所述数据块位置，若不能成功查找到所述索引块对应的所述数据块，则结束访问；若成功查找到所述索引块对应的所述数据块位置，则加载所述索引块对应的所述数据块，并将所述数据块添加到数据块缓存列表，确定待访问的数据块。本发明的方法通过自定义组织数据块与索引块，能够很快地通过索引块对应数据块的长度、精确进行统计，统计出某类信息所有数据块的大小。

主权项

一种大数据量信息存储与访问方法，其特征在于：包括，S1，数据存储：对路测数据进行解码，将解码所述路测数据得到的信息进行分类组织并存储到索引文件和数据文件；所述索引文件由不同存储类型的索引块组成，所述索引块包括所述数据文件中的偏移位置、数据块长度、起始索引序号和结束索引序号；所述数据文件由数据块组成，一个所述数据块记录的条数为：所述索引块的结束索引序号一起始索引序号+1条；所述索引文件和所述数据文件一一对应；S2，数据访问：查找数据块缓存列表，若查找到所需数据位置，则确定待访问的数据块；若不能查找到所述数据块位置，则通过查找所述索引块对应的数据块确定所述数据块位置，若不能成功查找到所述索引块对应的所述数据块，则结束访问；若成功查找到所述索引块对应的所述数据块位置，则加载所述索引块对应的所述数据块，并将所述数据块添加到数据块缓存列表，确定待访问的数据块；从确定的待访问的数据块中读出要访问的数据。