一种基于Hadoop的教育资源共享系统及实现方法

摘要

本发明实施例公开了一种基于Hadoop的教育资源共享系统及实现方法，其中，该系统包括：Web服务器，用于接收发自客户端的用户请求，并将用户请求发送给Master主节点，及将从Master主节点获得的检索信息返回给客户端；客户端，用于发送用户请求给Web服务器，并接收返回的检索信息；Master主节点，用于接收和处理用户请求，返回检索信息；MapReduce模块，用于根据Master主节点接收到的用户请求选择不同的算法策略，对互连的Slave节点里的数据进行搜索，汇总检索信息返回给Master主节点；Slave节点，用于根据MapReduce模块提供的算法策略进行数据搜索。实施本发明，可以在提高传输效率的同时提高I/O吞吐量，加快搜索速度及提高搜索效率，提高负载能力，并提高各个节点的吞吐量利用率。

主权项

一种基于Hadoop的教育资源共享系统，其特征在于，所述系统包括：Web服务器，用于接收发自客户端的用户请求，并将用户请求发送给Master主节点，及将从Master主节点获得的检索信息返回给客户端；客户端，用于发送用户请求给Web服务器，并接收返回的检索信息；Master主节点，用于接收和处理用户请求，返回检索信息；并与互连的Slave节点进行信息交互；MapReduce模块，用于监视各Slave节点的吞吐量以及剩余存储容量，并根据Master主节点接收到的用户请求选择不同的算法策略，对互连的Slave节点里的数据进行搜索，汇总检索信息返回给Master主节点；Slave节点，用于存储经过分块后的文件数据信息，并根据MapReduce模块提供的算法策略进行数据搜索。