数据加载及存储设备、方法、以及系统

摘要

本发明涉及数据接收、存储及查询领域，公开了一种数据加载及存储设备、方法、以及数据加载、存储及查询系统，其可显著提高数据的存储性能和查询性能。所述数据加载及存储设备，该设备包括：存储单元，用于存储RCfile格式文件；读取单元，用于读取数据；以及数据加载单元，用于：根据元数据定义，从所述数据内读取索引字段数据；根据该索引字段数据、所述RCfile格式文件的路径、以及该RCfile格式文件内将用于存储所述数据的行的ID，生成索引文件；以及将所述数据及索引文件作为行记录存入所述RCfile格式文件内。

主权项

一种数据加载及存储设备，其特征在于，该设备包括：存储单元，用于存储RCfile格式文件；读取单元，用于读取数据；以及数据加载单元，用于：根据元数据定义，从所述数据内读取索引字段数据；根据该索引字段数据、所述RCfile格式文件的路径、以及该RCfile格式文件内将用于存储所述数据的行的ID，生成索引文件；以及将所述数据及索引文件作为行记录存入所述RCfile格式文件内。