发明名称 一种基于分布式列存储的时间序列数据存储方法
摘要 本发明公开了一种基于分布式列存储的时间序列数据存储方法,属于数据库技术领域。本发明使用由行键和列组成的稀疏表存储测点记录数据,行键包含了尽可能多的检索信息,每一行记录把某个时间段的分散采集的数据合并在一起,同时设置了名称映射表存储名称信息。本发明能够充分利用分布式列存储技术的各项优势,保证时间序列数据在分布式列存储上的存储和检索的效率,并且利用分布式存储增强数据存储的安全性。
申请公布号 CN104035956A 申请公布日期 2014.09.10
申请号 CN201410143604.1 申请日期 2014.04.11
申请人 江苏瑞中数据股份有限公司 发明人 范振华;赵京虎;季胜鹏;王春毅;袁军
分类号 G06F17/30(2006.01)I 主分类号 G06F17/30(2006.01)I
代理机构 南京知识律师事务所 32207 代理人 汪旭东
主权项 一种基于分布式列存储的时间序列数据存储方法,其特征在于,包括如下步骤:1)使用测点数据表存储测点记录数据,所述测点数据表由行键和列组成的稀疏表构成,其中,行键由特征点、时间戳、标签三个部分组成,特征点用于标识测点的名称,时间戳用于标识基准时间值,标签用于表示特征点的属性,每个行键中的标签数量为一个或多个,每个标签由一个或多个键值对组成,键值对中的键用于标识测点的属性,键值对中的值用于标识测点的属性值;列由子列组成,每个子列用于存储相应于行键中所记载的基准时间的偏移量的记录值,子列的数量由预先设置的最大偏移量决定;使用名称映射表存储特征点的名称和标签键值对的名称,在名称映射表使用固定长度的名称映射值对应相应的特征点的名称和标签键值对的名称;使用测点信息表存储各测点的信息,存储方式采用标准的分布式数据存储方式;2)写入数据时,在分布式列存储数据库环境中,先根据各条测点记录数据获得相应的特征点的名称和标签键值对的名称,并将特征点的名称和标签键值对的名称存储在名称映射表中; 然后,根据各条测点记录数据的特征点名称的名称映射值、基准时间、标签键值对名称的名称映射值和相应值生成相应的行键值,并根据各条测点记录数据的偏移量将各条测点记录数据的行键值和记录值分别存储在测点数据表中相应的行键和与该行键相应偏移量相对的子列中。
地址 210003 江苏省南京市鼓楼区新模范马路5号