Resultados de la búsqueda a petición "hdfs"
¿Falta el personaje de nueva línea?
Copié un archivo de HDFS en mi sistema de archivos local (todo en RH Linux). Sin embargo, después de la copia, si yocat el archivo, veo lo siguiente: [me@ac12 ~]$ cat file_copy 0|name|string 1|phone|string 2|age|string[me@ac12 ~]$ Lo que ...
¿Cómo puede buscar todas las tablas con un nombre de columna dado y devolver qué tablas tienen este nombre de columna en Hadoop / Hive?
¿Estoy buscando encontrar todas las tablas que contienen un nombre de columna dado en HDFS / Hive?
El nodo / hbase no está en ZooKeeper
Soy un novato en Hadoop que intenta instalar Hbase en modo pseudo distribuido, versión hbase-0.98.10.1-hadoop1-bin, con Hadoop 2.5.2. No puedo agregar una tabla. El siguiente error continúa cuando intento crear una ...
¿Cómo puedo hacer un nuevo directorio en hdfs con java?
public static void main(String[] args) throws IOException, URISyntaxException {Configuración config = nueva Configuración (); config.set("fs.default.name","hdfs://127.0.0.1:50070/dfshealth.jsp"); FileSystem dfs = FileSystem.get(config); String ...
Spark Streaming: HDFS
No puedo hacer que mi trabajo de Spark transmita archivos "antiguos" de HDFS.Si mi trabajo de Spark está inactivo por alguna razón (por ejemplo, demostración, implementación) pero la escritura / traslado al directorio HDFS es continua, podría ...
Cambiar el tamaño del bloque de archivos existentes en Hadoop
Considere un clúster hadoop donde el tamaño de bloque predeterminado es de 64 MBhdfs-site.xml. Sin embargo, más tarde, el equipo decide cambiar esto a 128 MB. Aquí están mis preguntas para el escenario anterior? ¿Este cambio requerirá reiniciar ...
NameNode HA cuando se usan hdfs: // URI
Con el esquema UFS HDFS o HFTP (p. Ej.hdfs://namenode/path/to/file) Puedo acceder a los clústeres HDFS sin requerir sus archivos de configuración XML. Es muy útil cuando se ejecutan comandos de shell comohdfs dfs -get, hadoop distcp o leer ...
Obtener archivos en Hadoop en una aplicación web
Soy nuevo en Hadoop. En este momento estoy tratando de hacer una aplicación en eclipse en la que quiero usar los datos presentes en HDFS. Si queremos conectarnos a la base de datos con Java, tenemos conexión JDBC. De esta manera, ¿qué debo hacer ...
¿Hay alguna pérdida de memoria en HDFS si utilizamos archivos pequeños?
He tomado a continuación las citas de Hadoop: la guía definitiva: tenga en cuenta, sin embargo, que los archivos pequeños no ocupan más espacio en disco del necesario para almacenar el contenido sin formato del archivo. Por ejemplo, un archivo de ...
el formato hadoop hdfs obtiene un error en el bloque de bloques
Después de formatear mis hdfs, recibo los siguientes errores: 2015-05-28 21:41:57,544 WARN org.apache.hadoop.hdfs.server.common.Storage: java.io.IOException: Incompatible clusterIDs in /usr/local/hadoop/dfs/datanode: namenode clusterID = ...