Suchergebnisse für Anfrage "hadoop"
Stellen Sie mithilfe von JDBC eine Verbindung von Java zu Hive her
Ich versuche, eine Verbindung von Java zum Hive-Server 1 herzustellen. Ich habe vor einiger Zeit in diesem Forum eine Frage gefunden, aber sie funktioniert bei mir nicht. Ich benutze diesen Code: import java.sql.SQLException; import ...
Analysieren Sie CSV als DataFrame / DataSet mit Apache Spark und Java
Ich bin neu in der Funkenbildung und möchte Group-by & Reduce verwenden, um Folgendes aus CSV zu ermitteln (eine Zeile pro Angestelltem): Department, Designation, costToCompany, State Sales, Trainee, 12000, UP Sales, Lead, 32000, AP Sales, Lead, ...
Welcher Unterschied besteht zwischen der Ausführung eines Auftrags zur Kartenreduzierung mit dem Befehl hadoop und dem Befehl java?
Hier finden Sie viele Optionen zum Ausführen eines Programms zur Kartenreduzierung. Kann jemand den Unterschied zwischen diesen Befehlen erklären? Und welche Auswirkungen auf die Kartenreduzierung? java -jar MyMapReduce.jar [args] hadoop jar ...
Wie deaktiviere ich die INFO-Protokollierung in Spark?
Ich habe Spark mithilfe des AWS EC2-Handbuchs installiert und kann das Programm mit dem in Ordnung bringenbin/pyspark Skript, um zur Funken-Eingabeaufforderung zu gelangen, und kann auch die Schnellstart-Quide erfolgreich ausführen. Allerdings ...
Der Befehl "hadoop fs -ls." Funktioniert nicht
Ich denke ich habe Hadoop richtig installiert. Wenn ich machejps Ich kann den namenode und den datanode sehen, kein Problem. Wenn ich tippehadoop fs -ls . Ich erhalte den Fehler: Java HotSpot(TM) 64-Bit Server VM warning: You have loaded ...
hadoop java.net.URISyntaxException: Relativer Pfad in der absoluten URI: rsrc: hbase-common-0.98.1-hadoop2.jar
Ich habe einen Job zur Kartenreduzierung, der eine Verbindung zu HBASE herstellt, und ich kann nicht herausfinden, wo dieser Fehler auftritt: Exception in thread "main" java.lang.reflect.InvocationTargetException ...
Hadoop 2.0 JAR-Dateien
Beim Versuch, a zu instanziieren, wird ein unerwarteter Fehler angezeigtConfiguration Objekt in meinem Map / Reduce Programm. Der Fehler ist wie folgt: java.lang.NoClassDefFoundError: org / apache / commons / logging / LogFactory Ich benutze ...
Hadoop Map Reduce Für Google Web Graph
Als Aufgabe wurde uns die Aufgabe übertragen, Kartenreduzierungsfunktionen zu erstellen, die für jeden Knoten n in der Google Web Graph-Liste die Knoten ausgeben, die Sie in drei Schritten von Knoten n aus erreichen können. (Die aktuellen Daten ...
Überspringe die erste Zeile von csv, während du in die Hive-Tabelle lädst
Hallo Freunde, Ich habe eine Tabelle in Hive mit folgendem Befehl erstellt: CREATE TABLE db.test ( fname STRING, lname STRING, age STRING, mob BIGINT ) row format delimited fields terminated BY '\t' stored AS textfile;Um nun Daten aus einer ...
Hive-Befehl zum Ausführen der NOT IN-Klausel
Ich habe zwei Tabellen, tab1 & tab2. tab1(T1) tab2(T2) a1 b1 b1 c1 c1 f1 d1 g1Ich suche die Werte aus Tabelle T1, die in T2 nicht vorhanden sind. In diesem Fall sollte die Ausgabe seina1 d1 Ich habe es mit der folgenden Abfrage versucht, konnte ...