Übertragung von Map/Reduce-Daten auf der Grundlage eines Speichernetzwerkes oder eines Speichernetzwerk-Dateisystems

摘要

Ein Verfahren zur Übertragung von MapReduce-Daten in einem Rechenzentrum mit einem Speichernetzwerk (SAN), wobei das Rechenzentrum mehrere mit einem Job-Verfolger, Map-Aufgaben-Verfolgern und Reduce-Aufgaben-Verfolgern -versehene Server enthält, wobei das Verfahren Folgendes aufweist: als Reaktion auf ein Empfangen einer durch den Job-Verfolger zugewiesenen Map-Aufgabe Durchführen der Map-Aufgabe und Erzeugen von Ausgaben der Map-Aufgabe durch einen Map-Aufgaben-Verfolger; Schreiben der Ausgaben der Map-Aufgabe auf das Speichernetzwerk durch den Map-Aufgaben-Verfolger; und als Reaktion auf ein Empfangen einer durch den Job-Verfolger zugewiesenen Reduce-Aufgabe Lesen der Ausgaben der Map-Aufgabe vom Speichernetzwerk durch einen Reduce-Aufgaben-Verfolger.