发明名称 基于抽象模板的海量栅格数据处理及管理方法
摘要 本发明公开了一种基于抽象模板的海量栅格数据的分类处理和管理方法。具体内容包括:(1)栅格数据特征提取:确定栅格数据主要特征信息;(2)栅格数据模板匹配:依据特征的匹配度判断最适合数据模板;(3)基于抽象模板的数据自动化处理:自动调用对应的数据处理工具,完成栅格数据的自动化、流程化处理;(4)基于抽象模板的数据自动存储:自动创建数据存储空间,分配集群存储位置,实现数据导入;(5)基于抽象模板的数据查询检索:自动构建与更新对应数据集检索条件,实现对海量栅格数据的管理。本发明利用抽象数据模板建立栅格数据与数据处理工具和存储模型间的管理,解决了海量栅格数据的快速、自动化处理和管理问题。
申请公布号 CN103678682A 申请公布日期 2014.03.26
申请号 CN201310729321.0 申请日期 2013.12.26
申请人 中国科学院遥感与数字地球研究所 发明人 董文;胡晓东;沈占锋;骆剑承
分类号 G06F17/30(2006.01)I 主分类号 G06F17/30(2006.01)I
代理机构 代理人
主权项 一种基于抽象模板的海量栅格数据处理和管理方法,具体内容为:(1)栅格数据特征提取:读取栅格数据及相关元数据信息,提取数据主要特征信息,包括数据文件格式、数据文件命名规则、数据文件存储方式、数据文件内容、数据来源、数据分辨率信息,用于进行数据模板匹配;(2)栅格数据模板匹配:将栅格数据提取的特征与抽象模板特征进行匹配,依据特征的匹配度判断最适合的数据模板;(3)基于抽象模板的栅格数据自动化处理:每类抽象数据模板对应一系列的栅格数据处理工具,依据数据匹配的数据模板,自动调用对应的数据处理工具,完成栅格数据的自动化、流程化处理;(4)基于抽象模板的栅格数据自动存储:依据数据匹配的数据模板,自动创建数据存储空间,分配集群存储位置,并将数据处理工具提取的栅格数据元数据存入创建的数据存储空间之中;(5)基于抽象模板的栅格数据查询检索:依据数据模板,自动构建对应数据集的栅格数据检索默认条件,依据用户输入查询条件进行检索条件的部分更新,形成最终的查询条件,通过对元数据检索实现对海量栅格数据的查询检索;当用户需要添加一个新的栅格数据时,需要顺序执行(1)‑(4)的步骤;当用户需要对已有的数据进行查询检索时,需执行步骤(5);当用户需要对已有栅格数据进行更新时,需在执行步骤(5)获取对应元数据记录及数据文件位置后,对更新的栅格数据顺序执行(1)‑(4)的步骤,替换原有记录及文件;当用户需要删除已有数据时,在执行步骤(5)获取对应元数据记录及数据文件位置后,删除对应记录及数据文件。
地址 100101 北京市朝阳区大屯路甲20号北中科院遥感与数字地球研究所