Suchergebnisse für Anfrage "mapreduce"

4 die antwort

(Hadoop) MapReduce - Kettenjobs - JobControl hört nicht auf

Ich muss zwei MapReduce-Jobs verketten. Ich habe JobControl verwendet, um job2 als abhängig von job1 festzulegen. Es funktioniert, Ausgabedateien werden erst...

4 die antwort

Gute MapReduce-Beispiele [geschlossen]

Ich konnte mir keine anderen guten Beispiele vorstellen als die Aufgabe "Wörter in einem langen Text mit MapReduce zählen". Ich fand, dass dies nic...

3 die antwort

Wie greife ich in einem Reduzierer auf den Wert des Mapper-Zählers zu?

Ich möchte auf den myCounter.my-Wert im Reduzierer zugreifen:

TOP-Veröffentlichungen

1 die antwort

Map-Reduce-Leistung in MongoDb 2.2, 2.4 und 2.6

4 die antwort

Wie kann ich das Debuggen von Hadoop Map reduzieren

Ich versuche eine Karte zu bauen und den Job zu reduzieren.es läuft bis zum Ende, präsentiert aber am Ende seltsame Daten.Wenn ich versuche, es mit system.ou...

12 die antwort

Zeilen in großen Dateien zählen

Normalerweise arbeite ich mit Textdateien mit einer Größe von ca. 20 GB und zähle sehr oft die Anzahl der Zeilen in einer bestimmten Datei.So wie ich es jetz...

1 die antwort

Jobtracker-API-Fehler - Aufruf von localhost / 127.0.0.1: 50030 aufgrund einer lokalen Ausnahme fehlgeschlagen: java.io.EOFException

Ich versuche, meinen Jobtracker mit Java zu verbinden.Die folgende Abbildung zeigt das Programm, das ich ausführen möchte

4 die antwort

Zu viele offene Dateien in EMR

2 die antwort

Hadoop ChainMapper, ChainReducer

Ich bin relativ neu in Hadoop und versuche herauszufinden, wie man Jobs (mehrere Mapper, Reduzierer) mit ChainMapper, ChainReducer programmatisch verkettet. ...

1 die antwort

Hadoop: Die Anzahl der Reduzierungen entspricht nicht dem, was ich im Programm eingestellt habe

Ich habe mapred.tasktracker.reduce.tasks.maximum auf 10 in gesetzt