Resultados de la búsqueda a petición "google-hadoop"
Migración de datos de 50 TB del clúster local de Hadoop a Google Cloud Storage
Estoy tratando de migrar datos existentes (JSON) en mi clúster Hadoop a Google Cloud Storage. He explorado GSUtil y parece que es la opción recomendada para mover grandes conjuntos de datos a GCS. Parece que puede manejar grandes conjuntos de ...
Hadoop no puede conectarse a Google Cloud Storage
Estoy tratando de conectar Hadoop que se ejecuta en Google Cloud VM a Google Cloud Storage. Yo tengo: Se modificó el core-site.xml para incluir propiedades de fs.gs.impl y fs.AbstractFileSystem.gs.implDescargado y referenciado ...
Cómo habilitar Snappy / Snappy Codec sobre hadoop cluster para Google Compute Engine
Estoy tratando de ejecutar Hadoop Job en el motor de Google Compute contra nuestros datos comprimidos, que se encuentran en Google Cloud Storage. Al intentar leer los datos a través de SequenceFileInputFormat, obtengo la siguiente ...
"No hay sistema de archivos para el esquema: gs" cuando se ejecuta el trabajo de chispa localmente
Estoy ejecutando un trabajo de Spark (versión 1.2.0), y la entrada es una carpeta dentro de un depósito de Google Clous Storage (es decir, gs: // mybucket / folder) Cuando ejecuto el trabajo localmente en mi máquina Mac, obtengo el ...