Resultados de la búsqueda a petición "hdfs"
Obtenga pocas líneas de datos HDFS
Estoy teniendo un2 GB datos en miHDFS. ¿Es posible obtener esos datos al azar? Como lo hacemos en la línea de comando de Unix cat iris2.csv |head -n 50
¿Por qué es un bloque en HDFS tan grande?
¿Alguien puede explicar este cálculo y dar una explicación lúcida? Un cálculo rápido muestra que si el tiempo de búsqueda es de alrededor de 10 ms y la velocidad de transferencia es de 100 MB / s, para que el tiempo de búsqueda sea del 1% del ...
¿Por qué falla "hadoop fs -mkdir" con Permiso denegado?
Estoy usando Cloudera en una máquina virtual con la que estoy jugando. Desafortunadamente, tengo problemas para copiar datos al HDFS, obtengo lo siguiente: [cloudera@localhost ~]$ hadoop fs -mkdir input mkdir: Permission denied: user=cloudera, ...
¿Qué debería ser hadoop.tmp.dir?
Hadoop tiene parámetro de configuraciónhadoop.tmp.dir que, según la documentación, es `"Una base para otros directorios temporales". Supongo que esta ruta se refiere al sistema de archivos local. Establezco este valor ...
Error al intentar escribir en hdfs: el servidor IPC versión 9 no puede comunicarse con el cliente versión 4
Estoy intentando escribir un archivo en hdfs usando scala y sigo recibiendo el siguiente error Caused by: org.apache.hadoop.ipc.RemoteException: Server IPC version 9 cannot communicate with client version 4 ...
¿Cuál es el significado del espacio de nombres y metadatos que se utilizaron en hdfs (namenode)
Como principiante en hadoop, estoy confundido con estas palabras, espacio de nombres y metadatos. ¿Hay alguna relación entre estos dos?
Escribir en múltiples salidas mediante la tecla Spark: un trabajo de Spark
¿Cómo puede escribir en múltiples salidas dependientes de la clave usando Spark en un solo trabajo? Relacionado:Escriba en múltiples salidas por clave Scalding Hadoop, un ...
Comando para almacenar archivos en HDFS
Introducción Se han instalado y se están ejecutando un NameNode de Hadoop y tres DataNodes. El siguiente paso es proporcionar un archivo a HDFS. Se han ejecutado los siguientes comandos: hadoop fs -copyFromLocal ubuntu-14.04-desktop-amd64.iso ...
Escribir y leer matrices de bytes sin procesar en Spark - usando Sequence File SequenceFile
Como escribesRDD[Array[Byte]] a un archivo usando Apache Spark y leerlo de nuevo?
No se puede conectar a HDFS usando el paso PDI
He configurado con éxitoHadoop 2.4en unUbuntu 14.04 VMa partir de unaWindows 8 sistema. La instalación de Hadoop funciona absolutamente bien y también puedo ver el Namenode desde mi navegador de Windows. Imagen adjunta a ...