Suchergebnisse für Anfrage "google-hadoop"
„Kein Dateisystem für Schema: gs“, wenn Spark-Job lokal ausgeführt wird
Ich führe einen Spark-Job aus (Version 1.2.0) und die Eingabe ist ein Ordner in einem Google Clous-Speicher-Bucket (d. H. Gs: // mybucket / folder). Wenn der Auftrag lokal auf meinem Mac ausgeführt wird, wird die folgende Fehlermeldung ...
Hadoop kann keine Verbindung zu Google Cloud Storage herstellen
Ich versuche, Hadoop, das auf Google Cloud VM ausgeführt wird, mit Google Cloud Storage zu verbinden. Ich habe Die Datei core-site.xml wurde so geändert, dass sie die Eigenschaften von fs.gs.impl und fs.AbstractFileSystem.gs.impl ...
So aktivieren Sie Snappy / Snappy Codec über Hadoop Cluster für Google Compute Engine
Ich versuche, Hadoop Job in der Google Compute-Engine für unsere komprimierten Daten auszuführen, die sich in Google Cloud Storage befinden. Beim Versuch, die Daten über SequenceFileInputFormat zu lesen, wird die folgende ...
Migration von 50 TB Daten von einem lokalen Hadoop-Cluster zu Google Cloud Storage
Ich versuche, vorhandene Daten (JSON) in meinem Hadoop-Cluster auf Google Cloud Storage zu migrieren. Ich habe GSUtil untersucht und es scheint, dass es die empfohlene Option ist, große Datenmengen nach GCS zu verschieben. Es scheint, dass es ...