Suchergebnisse für Anfrage "hadoop"
Hadoop greift über das lokale Dateisystem eines Hadoop-Knotens auf Bibliotheken von Drittanbietern zu
Ich habe eine JAR-Datei auf allen meinen Hadoop-Knoten unter/home/ubuntu/libs/javacv-0.9.jar, mit einigen anderen JAR-Dateien. Wenn meineKarte verkleiner Anwendung wird ausgeführt am Hadoop Knoten, ich erhalte diese ...
Wie können Sie nach allen Tabellen mit einem bestimmten Spaltennamen suchen und zurückgeben, welche Tabellen diesen Spaltennamen in Hadoop / Hive haben?
Ich suche nach allen Tabellen, die einen bestimmten Spaltennamen in HDFS / Hive enthalten?
Standardverfahren für die Anmeldung bei MapReduce-Jobs
Ich versuche, die beste Methode zum Anmelden von MapReduce-Jobs zu finden. Ich verwende slf4j mit log4j appender wie in meinen anderen Java-Anwendungen, aber da der MapReduce-Job im Cluster verteilt ausgeführt wird, weiß ich nicht, wo ich den ...
Insert Daten in Hbase mit Hive (JSON-Datei)
Ich habe bereits eine Tabelle in Hbase mit Hive erstellt: hive> CREATE TABLE hbase_table_emp(id int, name string, role string) STORED BY 'org.apache.hadoop.hive.hbase.HBaseStorageHandler' WITH SERDEPROPERTIES ("hbase.columns.mapping" = ...
Apache Spark-Fehler: Konnte keine Verbindung zu akka.tcp: // sparkMaster @@ herstell
Dies sind unsere ersten Schritte mit Big Data wie Apache Spark und Hadoop. Wir haben eine Cloudera CDH 5.3 installiert. Vom Cloudera-Manager entscheiden wir uns, Funken zu installieren. Spark läuft auf einem der Knoten im Cluster sehr gut. uf ...
Lesen und Schreiben von Hive-Tabellen mit Funken nach Aggregation
Wir haben ein Bienenstocklager und wollten Funken für verschiedene Aufgaben verwenden (hauptsächlich Klassifizierung). Schreiben Sie die Ergebnisse manchmal als Hive-Tabelle zurück. Zum Beispiel haben wir die folgende Python-Funktion geschrieben, ...
Ist es möglich, Parkett direkt aus der Datei zu laden?
Wenn ich eine binäre Datendatei habe (diese kann in das CSV-Format konvertiert werden), gibt es eine Möglichkeit, Parketttabellen direkt daraus zu laden? In vielen Tutorials wird gezeigt, wie eine CSV-Datei in eine Texttabelle und anschließend ...
REGEXP_REPLACE Gruppen erfassen
Ich habe mich gefragt, ob mir jemand helfen kann, die Verwendung der Funktion regexp_replace von Hive zum Erfassen von Gruppen im regulären Ausdruck und zum Verwenden dieser Gruppen in der Ersatzzeichenfolge zu verstehen. Ich habe ein ...
Was ist Speicher auf Garn reserviert
Ich habe es geschafft, eine Funkenanwendung auf Yarn zu starten. Allerdings ist die Verwendung von Emory etwas seltsam, wie Sie unten sehen können: http: //imgur.com/1k6VvS [http://imgur.com/1k6VvSI] Was bedeutet reservierter Speicher? Wie kann ...