Suchergebnisse für Anfrage "hive"
Erstellen von Hive-Partitionen für mehrere Monate mithilfe eines Skripts
Ich habe Daten für 4 Jahre. Mögen '2011 2012 2013 2014'Ich muss Abfragen basierend auf den Daten eines Monats ausführen. Also erstelle ich Partitionen wie unten. 'ALTER TABLE table1_2010Jan ADD PARTITION(year='2010', month='01', ...
Pandas DataFrame to Hive Table
Ich bin neu in Python und Hive. Ich hatte gehofft, ich könnte einen Rat bekommen. Hat jemand Tipps, wie ein Python Pandas-Datenframe in eine Hive-Tabelle umgewandelt werden kann?
Ist die LIMIT-Klausel in HIVE wirklich zufällig?
DasDokumentation [https://cwiki.apache.org/confluence/display/Hive/LanguageManual+Select]vonHIVE stellt fest, dassLIMIT Klauselreturns rows chosen at random. Ich habe eineSELECT tisch auf einem tisch mit mehr als800,000 Aufzeichnungen mitLIMIT 1, ...
Wie Hive Conf Variable in Hive Udf übergeben?
Ich möchte die Variable hive conf an die Variable hive UDF übergeben. Unten ist ein Code-Snippet. hive -f ../hive/testHive.sql -hivevar testArg=${testArg}Unten ist ein Bienenstock-UDF-Aufruf. select ...
Wie vergleicht Hive mit HBase?
Ich bin daran interessiert, herauszufinden, wie die kürzlich veröffentlichten ( http://mirror.facebook.com/facebook/hive/hadoop-0.17/ [http://mirror.facebook.com/facebook/hive/hadoop-0.17/]) Hive ist leistungsmäßig mit HBase vergleichbar. Die von ...
Delta / Inkrementelle Last im Bienenstock
Ich habe den Anwendungsfall unten: Meine Bewerbung hat eine Tabelle mitmehrjährige DatenimRDBMSDB. Wir haben benutztsqoopum Daten in HDFS zu laden und in eine von partitionierte Hive-Tabelle zu ladenJahr Monat. Die Anwendung wird nun täglich ...
Wie kann Spark Streaming seine Ausgabe schreiben, damit Impala sie lesen kann?
Ich habe das folgende Problem mit Spark Streaming API. Momentan streame ich Eingabedaten über Flume zu Spark Streaming, mit dem ich die Daten vorverarbeiten möchte. Dann möchte ich die Daten in Hadoops Dateisystem speichern und mit Impala ...
Konzentrieren Sie einspaltige Felder mit GROUP BY
Gibt es eine Möglichkeit, die Felder in einer Spalte zu kombinieren / zu verketten, indem Sie sie gruppieren. Z.B: col1 col2 1 aa 1 bb 1 cc 2 dd 2 eeIch möchte etwas abfragen wie: select col1, concat(col2) from tableName group by col1;Die ...
Erforderliches Feld 'client_protocol' ist nicht gesetzt
Ich verwende Hive 0.12 und versuche es mit der JDBC von Apache. Wenn ich versuche, den Code auszuführen, erhalte ich apache.thrift.TApplicationException. import java.sql.SQLException; import java.sql.Connection; import java.sql.ResultSet; import ...
Wie kann man in jeder Gruppe eines Bienenstocks nach Anzahl der Bienenstöcke sortieren?
Hier ist die HQL: select A, B, count(*) as cnt from test_table group by A, B order by cnt desc; Die Beispielausgabe sieht wie folgt aus: a1 | b1 | 5 a2 | b1 | 3 a1 | b2 | 2 a2 | b2 | 1Aber was ich will, ist das @ zu torder by in jeder Gruppe ...