Suchergebnisse für Anfrage "hive"
hive Verzeichnisverschiebungsprozess als distcp überschreiben?
Wenn ich ein @ starINSERT OVERWRITE DIRECTORY Abfrage in Hive, es scheint, die Ergebnisse in einem @ zu speiche.hivexxxx Staging-Ordner und verschieben Sie die Dateien von dort in das Verzeichnis ... Am Ende des Kartenverkleinerungsprozesses ...
Rang einer Zeile berechnen
Ich möchte die Benutzer-ID anhand eines Feldes bewerten. Für den gleichen Wert des Feldes sollte der Rang gleich sein. Diese Daten befinden sich in der Hive-Tabelle. z.B user value a 5 b 10 c 5 d 6 Rank a - 1 c - 1 d - 3 b - 4Wie kann ich das ...
Warum ist mein BroadcastHashJoin langsamer als ShuffledHashJoin in Spark
Ich führe einen Join mit einem @ ajavaHiveContext in Spark. Der große Tisch hat eine Größe von 1,76 GB und einen Rekord von 100 Millionen. Die zweite Tabelle hat eine Größe von 273 MB und einen Datensatz von 10 Millionen. Ich bekomme ...
Versuchen Sie, Aktualisierungen oder Löschvorgänge mit dem Transaktionsmanager durchzuführen, der diese Vorgänge nicht unterstützt.
Während ich versuche, Daten in der Hive-Tabelle in der Cloudera Quickstart VM zu aktualisieren, wird dieser Fehler angezeigt. Fehler beim Kompilieren der Anweisung: FEHLGESCHLAGEN: SemanticException [Fehler 10294]: Versuch, mit dem ...
Alter Hive-Tabelle Spalte hinzufügen oder löschen
Ich habe eine Ork-Tabelle im Bienenstock. Ich möchte eine Spalte aus dieser Tabelle entfernen. ALTER TABLE table_name drop col_name;aber ich erhalte die folgende Ausnahme ei der Ausführung der Hive-Abfrage ist ein Fehler aufgetreten: ...
Hive-Tabelle erstellen, um Parkettdateien aus dem Parkett- / Avro-Schema zu lesen
Wir suchen nach einer Lösung, um eine externe Hive-Tabelle zum Lesen von Daten aus Parkettdateien nach einem Parkett- / Avro-Schema zu erstellen. auf andere Weise, wie man eine Hive-Tabelle aus einem Parkett- / Avro-Schema generiert? Vielen Dank :
Wie sieht die Datei hive-site.xml aus, die in $ SPARK_HOME enthalten ist?
Ich bin ein Anfänger im Bienenstock, etwas ist passiert (kann keinen Tisch finden), als ich einen Funkenjob beginne und Daten aus dem Bienenstock lese. Ich setze hive-site.xml nicht in $ SPARK_HOME / conf? Senden Sie den Funkenauftrag Befehl ist ...
Wann sind Dateien "aufteilbar"?
Wenn ich spark verwende, stoße ich manchmal auf eine große Datei in einem BIENENSTOC table, und ich versuche manchmal, viele kleinere Dateien in einer HIVE-Tabelle zu verarbeiten. Ich verstehe, dass beim Optimieren von Spark-Jobs die ...
Stammtabellen im YARN-Cluster-Modus nicht gefunden
Ich habe eine Spark-Anwendung (Version 1.4.1) auf HDP 2.3. Es funktioniert einwandfrei, wenn es im YARN-Client-Modus ausgeführt wird. Wenn es jedoch im YARN-Cluster-Modus ausgeführt wird, kann keine meiner Hive-Tabellen von der Anwendung gefunden ...
Wie finde ich heraus, welcher Java / Scala-Thread eine Datei gesperrt hat?
In Kürze Wie finde ich heraus, welcher Java / Scala-Thread eine Datei gesperrt hat? Ich weiß, dass eine Klasse / ein Thread in JVM eine konkrete Datei gesperrt hat (überlappt einen Dateibereich), aber ich weiß nicht, wie. Es ist ...