数据存储和读取方法、装置及系统

摘要

本发明公开了一种数据存储和读取方法、装置及系统。该数据读取方法包括：获取数据库中第一级关键词key对应的数据值value，获取第二级key；根据获取的参数N将第二级key分为N份，其中，每份第二级key对应一个计算单元的输入，N大于等于1且小于等于第二级key的个数；通过计算单元并发读取相应的第二级key所对应的value。借助于本发明的技术方案，扩展了hadoop MR的数据访问范围，将设置为二级模式的数据库也纳入了大数据处理范围中，使得hadoop MR能够直接大批量从数据库读取数据，提升了hadoopMR的运行效率。

主权项

一种数据存储方法，其特征在于，包括：将数据库中的关键词key按照粒度大小分为两级，其中，粒度较大的第一级key对应的数据值value为粒度较小的第二级key；将需要存储的数据作为第二级key的value保存。