一种面向防洪减灾领域的水利大数据存取系统及方法

摘要

本发明公开了一种面向防洪减灾领域的水利大数据存取系统与方法，所述存取系统包括对象索引库、对象编码标识、数据存储HDFS、对象信息库、对象分类器五个部分，使用自定义的编码规则对水利系统中的各个部门、水利单元进行编码，根据编码将各个水利单元对象化，将关系型数据库与Hadoop分布式文件系统紧密联系起来，使用Hadoop分布式文件系统存储水利大数据中的非结构化数据，建立非结构化数据与对象的映射。

主权项

一种面向防洪减灾领域的水利大数据存取系统，其特征在于：包括对象索引库、对象编码标识模块、数据存储HDFS、对象信息库和对象分类器：所述的对象编码标识模块，通过制定的编码规则，为每个水利单元进行标记编码，其编码对所有水利单元具有唯一性；所述的对象索引库，为水利编码与水利单元提供一种映射关系；所述的数据存储HDFS，主要使用Hadoop分布式文件系统，对水利数据中的非结构化数据进行规律存储；所述的对象信息库，包括各个水利对象及其属性内容，其对应于非结构化数据的路径与接口；所述的对象分类器，通过提取对象信息库的特征值，使用数据挖掘中分类算法将其进行自动分类。