Suchergebnisse für Anfrage "apache-pig"
Fehler im Molch beim Laden der Daten
Ich benutze Ubuntu 12.02 32bit und habe installierthadoop2.2.0undSchwein 0,12 erfolgreich. Hadoop läuft einwandfrei auf meinem System. Immer wenn ich diesen Befehl ausführe: data = load 'atoz.csv' using PigStorage(',') as (aa1:int, bb1:int, ...
datetime in pig richtig laden
Ich lade eine tsv-Datei mit einer datetime-Spalte und einer langen Spalte mit: A = LOAD 'tweets-clean.txt' USING PigStorage('\t') AS (date:datetime, userid:long); DUMP A;Eine beispielhafte Eingabezeile: Tue Feb 11 05:02:10 +0000 2014 ...
Verwendung der Apache Pig-Rangfunktion
Ich verwende die Pig 0.11.0 Rangfunktion und generiere Ränge für jede ID in meinen Daten. Ich brauche eine bestimmte Rangfolge meiner Daten. Ich möchte, dass der Rang zurückgesetzt wird und für jede neue ID bei 1 beginnt. Ist es möglich, die ...
PIG Script REPLACE mit Pipe-Symbol
Ich möchte Zeichen außerhalb der geschweiften Klammern in Zeilen trennen, die wie folgt aussehen. 35|{......}|Strippen der '35 | ' von vorne und von hinten '|' vom Ende. {.....}Zunächst arbeite ich an den ersten 3 Zeichen und versuche ...
Speichern von Daten in SequenceFile von Apache Pig
Apache Pig Mit der PiggyBank können Daten aus Hadoop-Sequenzdateien geladen werdenSequenceFileLoader: REGISTER /home/hadoop/pig/contrib/piggybank/java/piggybank.jar; DEFINE SequenceFileLoader ...
Schwein: Kontrolliere die Anzahl der Mapper
Ich kann die Anzahl der Reduzierungen steuern, indem ich die PARALLEL-Klausel in den Anweisungen verwende, die zu Reduzierungen führen. Ich möchte die Anzahl der Mapper kontrollieren. Die Datenquelle ist bereits erstellt, und ich kann die Anzahl ...
Building Apache Pig für Hadoop 2.4 Version
Ich habe PIG 0.14 heruntergeladen und ein @ gemacant -dhadoopversion = 23 jar, aber als ich es auf Hadoop 2.4 benutzt habe, funktioniert es nicht. Gibt es irgendetwas, das ich tun sollte, außer Ameise laufen zu lassen? Pig läuft, zeigt aber ...
JSON-Array in Pig laden
Ich habe eine JSON-Datei mit dem folgenden Format [ { "id": 2, "createdBy": 0, "status": 0, "utcTime": "Oct 14, 2014 4:49:47 PM", "placeName": "21/F, Cunningham Main Rd, Sampangi Rama NagarBengaluruKarnatakaIndia", "longitude": 77.5983817, ...
Linke Polsterung einer Zeichenfolge in Schwein
Ich möchte ein String-Datentyp-Feld mit 0-s auffüllen. Gibt es eine Möglichkeit, das zu tun? Ich benötige Werte mit fester Länge (40). ielen Dank im Voraus, Hellseh
Human readable String date wird mit Pig in date konvertiert?
Ich habe die folgenden lesbaren Datumsformate in einer Textdatei gespeichert: Wed Oct 15 09:26:09 BST 2014 Wed Oct 15 19:26:09 BST 2014 Wed Oct 18 08:26:09 BST 2014 Wed Oct 23 10:26:09 BST 2014 Sun Oct 05 09:26:09 BST 2014 Wed Nov 20 19:26:09 ...