cómo evitar que el trabajo hadoop falle en un archivo de entrada dañado

importar datos Json complejos a la colmena

Se requiere un poco de alimentación con cuchara, cómo importar json complejos en la colmena. Json archivo en el formato de:

MultipleTextOutputFormat alternativa en nueva API

Como se destaca, MultipleTextOutputFormat no se ha migrado a la nueva API. Entonces, si tenemos que elegir un directorio de salida y un nombre de salida basa...

¿Cómo eliminar / truncar tablas de Hadoop-Hive?

Cómo extraer datos de Mainframe a Hadoop

Ejecución de tareas especulativas de Hadoop.

En el documento MapReduce de Google, tienen una tarea de copia de seguridad, creo que es lo mismo con la tarea especulativa en Hadoop. ¿Cómo se implementa la...

Primer error del proyecto hadoop: "La ruta de entrada no existe"

Para configurar un proyecto hadoop simple estoy siguiendo este tutorial:http://ebiquity.umbc.edu/Tutorials/Hadoop/23%20-%20create%20the%20project.htmlMi nodo...

MRUnit con Avro NullPointerException en serialización

Estoy intentando probar un trabajo de Hadoop .mapreduce Avro usando MRUnit. Estoy recibiendo una NullPointerException como se ve a continuación. He adjuntado...

Descomprime archivos usando streaming de hadoop

Tengo muchos archivos en HDFS, todos ellos un archivo zip con un archivo CSV dentro. Estoy tratando de descomprimir los archivos para poder ejecutar un traba...

¿Es posible importar datos en la tabla de Hive sin copiar los datos?