Resultados de la búsqueda a petición "hive"
Cree una tabla de Hive para leer archivos de parquet del esquema de parquet / avro
Estamos buscando una solución para crear una tabla de colmena externa para leer datos de archivos de parquet de acuerdo con un esquema de parquet / avro. de otro modo, ¿cómo generar una tabla de colmena a partir de un esquema de parquet / ...
¿Cuándo son los archivos "divisibles"?
Cuando uso spark, a veces me encuentro con un archivo enorme en unCOLMENAtabla, y a veces intento procesar muchos archivos más pequeños en una tabla HIVE. Entiendo que al ajustar trabajos de chispa, cómo funciona depende de si los archivos son o ...
Cómo calcular la mediana en spark sqlContext para la columna de tipo de datos double
He dado la tabla de muestra. Quiero obtener la mediana de la columna "valor" para cada columna "fuente" de cada grupo. Donde la columna de origen es de String DataType, la columna de valor es de doble DataType scala> sqlContext.sql("SELECT * ...
No se puede conectar a HIVE2 a través de JAVA
[/imgs/FESNi.jpg]Refiriéndose aColmena2 [https://cwiki.apache.org/confluence/display/Hive/HiveServer2+Clients#HiveServer2Clients-JDBC] Creé un programa simple de Java para conectarse al servidor HIVE2 (no local) y agregué todos los archivos jar ...
Cómo conectarse a Hadoop / Hive desde .NET
Estoy trabajando en una solución en la que tendré un clúster de Hadoop con Hive ejecutándose y quiero enviar trabajos y consultas de colmena desde una aplicación .NET para procesar y recibir una notificación cuando terminen. No puedo encontrar ...
Query Hive Meta Store
Quiero saber cómo consultar la base de datos de metastore de la colmena y obtener algunas propiedades clave que incluyen: Fecha de CreaciónÚltima Fecha de Actualizaciónúltima fecha de accesoAcabo de aprender un comando de la colmenashow table ...
¿Cómo obtener todas las definiciones de tabla en una base de datos en Hive?
Estoy buscando obtener todas las definiciones de tabla en Hive. Sé que para la definición de una sola tabla puedo usar algo como: describe <<table_name>> describe extended <<table_name>>Pero, no pude encontrar una manera de obtener todas las ...
java.lang.RuntimeException: no se puede crear una instancia de org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient
Tengo las versiones Hadoop 2.7.1 y apache-hive-1.2.1 instaladas en ubuntu 14.0. ¿Por qué ocurre este error?¿Se requiere alguna instalación de metastore?Cuando escribimos el comando hive en la terminal como se llama internamente a los xml, ¿cuál ...
Use collect_list y collect_set en Spark SQL
De acuerdo con ladocs [http://spark.apache.org/docs/latest/api/scala/index.html#org.apache.spark.sql.functions$] , elcollect_set ycollect_list Las funciones deben estar disponibles en Spark SQL. Sin embargo, no puedo hacer que funcione. Estoy ...
Looping usando Hiveql
Estoy tratando de fusionar 2 conjuntos de datos, digamos A y B. El conjunto de datos A tiene una variable "Flag" que toma 2 valores. En lugar de fusionar ambos datos juntos, estaba tratando de fusionar 2 conjuntos de datos basados en la variable ...