Resultados de la búsqueda a petición "elastic-map-reduce"

1 la respuesta

¿Configurando parámetros hadoop con boto?

Estoy intentando habilitar la omisión de entrada incorrecta en mis trabajos de Amazon Elastic MapReduce. Estoy siguiendo la maravillosa receta descrita aquí:...

1 la respuesta

Obteniendo "No queda espacio en el dispositivo" durante aprox. 10 GB de datos en EMR m1.large instancias

Aparece un error "No queda espacio en el dispositivo" cuando ejecuto mis trabajos de Amazon EMR utilizando m1.large como el tipo de instancia para ...

6 la respuesta

Exportando tabla de colmena a un cubo S3

Creé una tabla de colmena a través de una sesión interactiva de Elastic MapReduce y la llené de un archivo CSV como este: CREATE TABLE csvimport(id BIGINT, time STRING, log STRING) ROW FORMAT DELIMITED FIELDS TERMINATED BY '\t'; LOAD DATA LOCAL ...

1 la respuesta

Error: java.io.IOException: valor incorrecto clase: clase org.apache.hadoop.io.Text no es clase Myclass

Tengo mi mapeador y reductores de la siguiente manera. Pero estoy recibiendo algún tipo de excepción extraña. No puedo entender por qué está lanzando semejan...

2 la respuesta

DynamoDB InputFormat para Hadoop

Tengo que procesar algunos datos que se conservan en Amazon Dynamo DB utilizando Hadoop map reduce.Estaba buscando en Internet el Hadoop InputFormat para Dyn...

4 la respuesta

Demasiados archivos abiertos en EMR

1 la respuesta

Cómo establecer el número máximo preciso de tareas que se ejecutan simultáneamente por nodo en Hadoop 2.4.0 en Elastic MapReduce

De acuerdo a http://blog.cloudera.com/blog/2014/04/apache-hadoop-yarn-avoiding-6-time-consuming-gotchas/ [http://blog.cloudera.com/blog/2014/04/apache-hadoop-yarn-avoiding-6-time-consuming-gotchas/] , la fórmula para determinar el número de ...

2 la respuesta

La reducción falla debido a que el intento de tarea no informó el estado durante 600 segundos. ¡Asesinato! ¿Solución?

2 la respuesta

Introducir datos dentro y fuera de Elastic MapReduce HDFS

He escrito un programa Hadoop que requiere un cierto diseño dentro de HDFS y que luego necesito sacar los archivos de HDFS. Funciona en mi configuración de Hadoop de nodo único y estoy ansioso por hacerlo funcionar en 10 de nodos dentro de ...

14 la respuesta

Programar un trabajo en AWS EC2

Tengo un sitio web que se ejecuta en AWS EC2. Necesito crear un trabajo nocturno que genere un archivo de mapa del sitio y suba los archivos a los distintos navegadores. Estoy buscando una utilidad en AWS que permita esta funcionalidad. He ...