Resultados de la búsqueda a petición "hadoop2"
Advertencia de "No se puede cargar la biblioteca nativa-hadoop para su plataforma" de Hadoop
Actualmente estoy configurando hadoop en un servidor en ejecuciónCentOs. Cuando corro
¿Las aplicaciones no se muestran en la interfaz de usuario de hilo cuando se ejecuta el trabajo mapreduce hadoop?
estoy usandoHadoop2.2. Veo que mis trabajos se completan con éxito. Puedo navegar por el sistema de archivos para encontrar la salida. Sin embargo, cuando navegohttp://NNode:8088/cluster/apps, No puedo ver ninguna aplicación que se haya ...
¿Se ordena siempre la salida de la fase de mapa del trabajo mapreduce?
Estoy un poco confundido con el resultado que obtengo de Mapper. Por ejemplo, cuando ejecuto un programa simple de conteo de palabras, con este texto de entrada: hello world Hadoop programming mapreduce wordcount lets see if this works 12345678 ...
Cómo establecer el número máximo preciso de tareas que se ejecutan simultáneamente por nodo en Hadoop 2.4.0 en Elastic MapReduce
De acuerdo a http://blog.cloudera.com/blog/2014/04/apache-hadoop-yarn-avoiding-6-time-consuming-gotchas/ [http://blog.cloudera.com/blog/2014/04/apache-hadoop-yarn-avoiding-6-time-consuming-gotchas/] , la fórmula para determinar el número de ...
Spark Indefinite Waiting con "Se le pide que envíe ubicaciones de salida del mapa para barajar"
Mis trabajos a menudo cuelgan con este tipo de mensaje: 14/09/01 00:32:18 INFO spark.MapOutputTrackerMasterActor: Asked to send map output locations for shuffle 0 to spark@*:37619Sería genial si alguien pudiera explicar qué está haciendo Spark ...
Hay 0 datanode (s) en ejecución y no se excluyen ningún nodo (s) en esta operación
He configurado un clúster Hadoop de múltiples nodos. NameNode y Secondary namenode se ejecutan en la misma máquina y el clúster solo tiene un Datanode. Todos los nodos están configurados en máquinas Amazon EC2. Los siguientes son los archivos de ...
¿Cómo puedo acceder a S3 / S3n desde una instalación local de Hadoop 2.6?
Estoy tratando de reproducir un clúster de Amazon EMR en mi máquina local. Para ello, he instalado elúltima versión estable de Hadoop a partir de ahora - 2.6.0 [http://ftp.cixug.es/apache/hadoop/common/hadoop-2.6.0/]. Ahora me gustaría acceder a ...
Prácticas estándar para iniciar sesión en trabajos de MapReduce
Estoy tratando de encontrar el mejor enfoque para iniciar sesión en trabajos de MapReduce. Estoy usando slf4j con log4j appender como en mis otras aplicaciones Java, pero dado que el trabajo de MapReduce se ejecuta de manera distribuida en todo ...
¿Qué es la memoria reservada en hilo?
Logré lanzar una aplicación de chispa en Yarn. Sin embargo, el uso de emory es un poco extraño, como puede ver a continuación: http://imgur.com/1k6VvSI [http://imgur.com/1k6VvSI] ¿Qué significa memoria reservada? ¿Cómo puedo usar eficientemente ...
El comando hdfs está en desuso en hadoop
Como estoy siguiendo el siguiente ...