Suchergebnisse für Anfrage "mapreduce"
(Hadoop) MapReduce - Kettenjobs - JobControl hört nicht auf
Ich muss zwei MapReduce-Jobs verketten. Ich habe JobControl verwendet, um job2 als abhängig von job1 festzulegen. Es funktioniert, Ausgabedateien werden erst...
Gute MapReduce-Beispiele [geschlossen]
Ich konnte mir keine anderen guten Beispiele vorstellen als die Aufgabe "Wörter in einem langen Text mit MapReduce zählen". Ich fand, dass dies nic...
Wie greife ich in einem Reduzierer auf den Wert des Mapper-Zählers zu?
Ich möchte auf den myCounter.my-Wert im Reduzierer zugreifen:
Wie kann ich das Debuggen von Hadoop Map reduzieren
Ich versuche eine Karte zu bauen und den Job zu reduzieren.es läuft bis zum Ende, präsentiert aber am Ende seltsame Daten.Wenn ich versuche, es mit system.ou...
Zeilen in großen Dateien zählen
Normalerweise arbeite ich mit Textdateien mit einer Größe von ca. 20 GB und zähle sehr oft die Anzahl der Zeilen in einer bestimmten Datei.So wie ich es jetz...
Jobtracker-API-Fehler - Aufruf von localhost / 127.0.0.1: 50030 aufgrund einer lokalen Ausnahme fehlgeschlagen: java.io.EOFException
Ich versuche, meinen Jobtracker mit Java zu verbinden.Die folgende Abbildung zeigt das Programm, das ich ausführen möchte
Hadoop ChainMapper, ChainReducer
Ich bin relativ neu in Hadoop und versuche herauszufinden, wie man Jobs (mehrere Mapper, Reduzierer) mit ChainMapper, ChainReducer programmatisch verkettet. ...
Hadoop: Die Anzahl der Reduzierungen entspricht nicht dem, was ich im Programm eingestellt habe
Ich habe mapred.tasktracker.reduce.tasks.maximum auf 10 in gesetzt