Suchergebnisse für Anfrage "hadoop2"
Anwendungen, die nicht in der Garn-Benutzeroberfläche angezeigt werden, wenn Mapreduce Hadoop Job ausgeführt wird?
ich benutzeHadoop2.2. Ich sehe, dass meine Jobs mit Erfolg abgeschlossen sind. Ich kann das Dateisystem durchsuchen, um die Ausgabe zu finden. Wenn ich jedoch stöberehttp://NNode:8088/cluster/appsIch kann noch keine abgeschlossenen Bewerbungen ...
Ist die Ausgabe der Kartenphase des Mapreduce-Jobs immer sortiert?
Ich bin ein bisschen verwirrt mit der Ausgabe, die ich von Mapper bekomme. Wenn ich zum Beispiel ein einfaches Wordcount-Programm mit folgendem Eingabetext ausführe: hello world Hadoop programming mapreduce wordcount lets see if this ...
Festlegen der genauen maximalen Anzahl gleichzeitig ausgeführter Aufgaben pro Knoten in Hadoop 2.4.0 in Elastic MapReduce
Gemäß http://blog.cloudera.com/blog/2014/04/apache-hadoop-yarn-avoiding-6-time-consuming-gotchas/ [http://blog.cloudera.com/blog/2014/04/apache-hadoop-yarn-avoiding-6-time-consuming-gotchas/] lautet die Formel zum Ermitteln der Anzahl ...
Spark Indefinite Waiting mit der Aufforderung, Kartenausgabeorte für die Zufallswiedergabe zu senden.
Meine Jobs hängen oft mit dieser Art von Nachricht: 14/09/01 00:32:18 INFO spark.MapOutputTrackerMasterActor: Asked to send map output locations for shuffle 0 to spark@*:37619Wäre toll, wenn jemand erklären könnte, was Spark macht, wenn er diese ...
Es werden 0 Datenknoten ausgeführt, und in dieser Operation werden keine Knoten ausgeschlossen.
Ich habe einen Hadoop-Cluster mit mehreren Knoten eingerichtet. Der NameNode und der Secondary-NameNode werden auf demselben Computer ausgeführt, und der Cluster verfügt nur über einen Datenknoten. Alle Knoten sind auf Amazon ...
namespace image und edit log
Von dem Buch " Hadoop Der endgültige Leitfaden ", unter dem ThemaNamenodes und Datanodes es wird erwähnt, dass: Der namenode verwaltet den Namespace des Dateisystems. Es verwaltet den Dateisystembaum und die Metadaten für alle Dateien und ...
Wie kann ich von einer lokalen Hadoop 2.6-Installation auf S3 / S3n zugreifen?
Ich versuche, einen Amazon EMR-Cluster auf meinem lokalen Computer zu reproduzieren. Zu diesem Zweck habe ich das @ installie neueste stabile Version von Hadoop ab sofort - 2.6.0 [http://ftp.cixug.es/apache/hadoop/common/hadoop-2.6.0/]. Jetzt ...
Standardverfahren für die Anmeldung bei MapReduce-Jobs
Ich versuche, die beste Methode zum Anmelden von MapReduce-Jobs zu finden. Ich verwende slf4j mit log4j appender wie in meinen anderen Java-Anwendungen, aber da der MapReduce-Job im Cluster verteilt ausgeführt wird, weiß ich nicht, wo ich den ...
Was ist Speicher auf Garn reserviert
Ich habe es geschafft, eine Funkenanwendung auf Yarn zu starten. Allerdings ist die Verwendung von Emory etwas seltsam, wie Sie unten sehen können: http: //imgur.com/1k6VvS [http://imgur.com/1k6VvSI] Was bedeutet reservierter Speicher? Wie kann ...
Seite 1 von 2