发明名称 一种数据关联、加载、查询方法及装置
摘要 本发明提供了一种数据关联、加载、查询方法及装置,方法包括如下步骤确定需要关联的两个数据对象,将两个数据对象中数据量较小的数据对象以(key,value)方式放入内存的类Hashtable结构中,对另一数据对象中的每条记录生成对应的key值,通过对key值进行哈希Hash确定每条记录是否与内存中的key值关联;当存在关联时,将所有存在关联的记录作为新数据对象输出;将关联后的新数据对象加载到Hadoop平台的指定组件上;当接收到查询请求时,根据查询字段在关联后的新数据对象中进行查找并返回查询结果;本发明所提供的技术方案,优化了数据对象关联机制,进而提高了系统的关联查询效率。
申请公布号 CN104408159A 申请公布日期 2015.03.11
申请号 CN201410734165.1 申请日期 2014.12.04
申请人 曙光信息产业(北京)有限公司 发明人 黄小川;惠润海;宋怀明
分类号 G06F17/30(2006.01)I 主分类号 G06F17/30(2006.01)I
代理机构 北京新知远方知识产权代理事务所(普通合伙) 11397 代理人 郭玉梅
主权项 一种数据关联方法,其特征在于,包括如下步骤:确定需要关联的两个数据对象;将两个数据对象中数据量较小的数据对象以(key,value)方式放入内存的类Hashtable结构中,对另一数据对象中的每条记录生成对应的key值,通过对key值进行哈希Hash确定每条记录是否与内存中的key值关联;当存在关联时,将所有存在关联的记录作为关联后的新数据对象输出。
地址 100193 北京市海淀区东北旺西路8号院36号楼