Resultados de la búsqueda a petición "hadoop"

1 la respuesta

REGEXP_REPLACE capturando grupos

Me preguntaba si alguien podría ayudarme a comprender cómo usar la función regexp_replace de Hive para capturar grupos en la expresión regular y usar esos grupos en la cadena de reemplazo. Tengo un problema de ejemplo con el que estoy trabajando ...

6 la respuesta

¿Cómo abrir / transmitir archivos .zip a través de Spark?

Tengo archivos zip que me gustaría abrir 'a través' de Spark. Puedo abrir el archivo .gzip sin problemas debido al soporte nativo de códec de Hadoops, pero no puedo hacerlo con los archivos .zip. ¿Hay una manera fácil de leer un archivo zip en ...

1 la respuesta

¿Qué es la memoria reservada en hilo?

Logré lanzar una aplicación de chispa en Yarn. Sin embargo, el uso de emory es un poco extraño, como puede ver a continuación: http://imgur.com/1k6VvSI [http://imgur.com/1k6VvSI] ¿Qué significa memoria reservada? ¿Cómo puedo usar eficientemente ...

5 la respuesta

El nodo / hbase no está en ZooKeeper

Soy un novato en Hadoop que intenta instalar Hbase en modo pseudo distribuido, versión hbase-0.98.10.1-hadoop1-bin, con Hadoop 2.5.2. No puedo agregar una tabla. El siguiente error continúa cuando intento crear una ...

1 la respuesta

Error intermitente de Hiveop / Hadoop: no se puede mover el origen al destino

Ha habido algunos artículos SO sobreHive/Hadoop Error "No se puede mover la fuente". Muchos de ellos apuntan a un problema de permiso. Sin embargo, en mi sitio vi el mismo error pero estoy bastante seguro de que no está relacionado con un ...

2 la respuesta

Apache Oozie no pudo cargar ShareLib

Tengo el siguiente oozie.log: org.apache.oozie.service.ServiceException: E0104: Could not fully initialize service [org.apache.oozie.service.ShareLibService], Not able to cache sharelib. An Admin needs to install the sharelib with oozie-setup.sh ...

1 la respuesta

Recorrer directorios hdfs

La estructura de mi directorio HDFS se ve a continuación. /user/hive/warehouse/check.db/abcd/date=2015-02-02/xyz=hijk/000000_0 /user/hive/warehouse/check.db/abcd/date=2015-02-02/xyz=pqrs / 000000_0 Estoy tratando de recorrer todos los ...

13 la respuesta

Configuración del clúster de Hadoop - java.net.ConnectException: conexión rechazada

Quiero configurar un hadoop-cluster en modo pseudodistribuido. Logré realizar todos los pasos de configuración, incluido el inicio de un Namenode, Datanode, Jobtracker y Tasktracker en mi máquina. Luego intenté ejecutar algunos programas ...

3 la respuesta

¿Cómo determino el tamaño de mis tablas de HBase? ¿Hay algún comando para hacerlo?

Tengo varias tablas en mi shell de Hbase que me gustaría copiar en mi sistema de archivos. Algunas mesas superan los 100 gb. Sin embargo, solo me quedan 55 gb de espacio libre en mi sistema de archivos local. Por lo tanto, me gustaría saber el ...

6 la respuesta

Conecte Hive a través de Java JDBC

Hay una pregunta aquíconectar de java a colmena [https://stackoverflow.com/questions/25157273/connect-from-java-to-hive-using-jdbc] pero el mio esdiferente Mi colmena se ejecuta en machine1 y necesito pasar algunas consultas usando el servidor ...