发明名称 一种内存数据存储方法
摘要 本发明提供一种内存数据存储方法,包括:将数据表分解成若干数据块;将每个数据块以行的形式分解成若干大小相同的行数据分组集合;将待存储的数据以列的形式存储在行数据分组集合的数据区;将行数据分组集合中的数据行数、每列数据的字节数写入元数据表头区;对数据区的数据建立索引,写入索引区;将同步标记写入同步标记区,以区分连续的行数据分组集合;分别对行数据分组集合的各个区域进行数据压缩;对数据块进行数据压缩。本发明采用行、列混合存储模式,具备了相当于行存储的数据加载速度和负载适应能力,避免了数据查询时不必要的列读取,混合了多种数据压缩方式,对列维度进行压缩,有效提升了内存空间的利用率。
申请公布号 CN105824574A 申请公布日期 2016.08.03
申请号 CN201510882588.2 申请日期 2015.12.07
申请人 国家电网公司;南京南瑞集团公司;国网江苏省电力公司信息通信分公司;安徽继远软件有限公司;国网信息通信产业集团有限公司 发明人 夏同飞;杨栋枢;陈峰;李志;徐海青;范叶平;孙飞;刘才华;石磊;魏建国;袁东;王维佳;王超;郭振;胡传胜;乔雄
分类号 G06F3/06(2006.01)I 主分类号 G06F3/06(2006.01)I
代理机构 合肥天明专利事务所 34115 代理人 金凯;宋倩
主权项 一种内存数据存储方法,其特征在于,包括以下步骤:(1)将数据表分解成若干数据块;(2)将每个数据块以行的形式分解成若干大小相同的行数据分组集合,所述行数据分组集合分为四个区域,分别是同步标记区、元数据表头区、数据区和索引区;(3)将待存储的数据以列的形式存储在行数据分组集合的数据区;(4)将行数据分组集合中的数据行数、每列数据的字节数写入元数据表头区;(5)对数据区的数据建立索引,写入索引区;(6)将同步标记写入同步标记区,以区分连续的行数据分组集合;(7)分别对行数据分组集合的各个区域进行数据压缩;(8)对数据块进行数据压缩。
地址 100031 北京市西城区西长安街86号