Resultados de la búsqueda a petición "hadoop"
caché distribuida
Estoy trabajando con hadoop 19 en opensuse linux, no estoy usando ningún clúster en lugar de ejecutar mi código hadoop en mi máquina. Estoy siguiendo la técnica estándar para colocar en caché distribuida, pero en lugar de acceder a los archivos ...
Encontrar el número total de líneas en el archivo distribuido hdfs usando la línea de comando
Estoy trabajando en un clúster donde se guarda un conjunto de datoshdfs de manera distribuida Esto es lo que tengo: [hmi@bdadev-5 ~]$ hadoop fs -ls /bdatest/clm/data/ Found 1840 items -rw-r--r-- 3 bda supergroup 0 2015-08-11 00:32 ...
Cómo usar la interfaz web ResourceManager como usuario
Cada vez que intento usar la interfaz web de Hadoop Resource Manager ( http://resource-manger.host:8088/cluster/ [http://resource-manger.host:8088/cluster/]) me presento conectado como dr.who. Mi pregunta, ¿cómo puedo iniciar sesión como otro ...
obtener JAVA_HOME está configurado incorrectamente con hadoop
Acabo de descargar hadoop y descomprimí el archivo. pero cuando ejecuto el comando hadoop version desde el símbolo del sistema, obtengo el siguiente error. Verifico dos veces y JAVA_HOME está configurado en "C: \ Archivos de programa \ Java \ ...
Conéctese a los datos S3 de PySpark
Estoy tratando de leer un archivo JSON, de Amazon s3, para crear un contexto de chispa y usarlo para procesar los datos. Spark está básicamente en un contenedor acoplable. Por lo tanto, poner archivos en la ruta del acoplador también es PITA. ...
FileNotFoundException cuando se usa la caché distribuida de Hadoop
esta vez, alguien debería volver a repetir que estoy luchando con ejecutar mi código usando cahe distribuido. Ya tengo los archivos en hdfs pero cuando ejecuto este código: import java.awt.image.BufferedImage; import ...
Error de permiso denegado al crear la base de datos en la colmena
Estoy tratando de crear una base de datos en la colmena, pero cuando ejecuto la consulta a continuación en HIVE: CREATE DATABASE BIGDATA;Recibo el siguiente mensaje de error: FALLIDO: Error en los metadatos: MetaException (mensaje: Excepción ...
Cómo pasar archivos Jar al script de shell en el nodo de shell OOZIE
Hola, recibo el siguiente error al ejecutar un programa java en un script que se ejecuta en el flujo de trabajo de acción de shell oozie. Stdoutput 2015-08-25 03:36:02,636 INFO [pool-1-thread-1] (ProcessExecute.java:68) - Exception in thread ...
Hive FAILED: ParseException line 2: 0 no puede reconocer la entrada cerca de '' macaddress '' 'CHAR' '(' en la especificación de la columna
He intentado correrhive -v -f sqlfile.sql Aquí está el contenido del archivo CREATE TABLE UpStreamParam ( 'macaddress' CHAR(50), 'datats' BIGINT, 'cmtstimestamp' BIGINT, 'modulation' INT, 'chnlidx' INT, 'severity' BIGINT, 'rxpower' FLOAT, ...
No se puede conectar con el almacenamiento de blobs azul con hadoop local
Al intentar conectar elhadoop localcon elAZUR GOTAalmacenamiento (es decir, utilizando elalmacenamiento de blobs como HDFS) con la versión Hadoop - 2.7.1, arroja una excepción Aquí he formado con éxito el clúster local estableciendo la ...