Resultados de la búsqueda a petición "mapreduce"
MongoDB MapReduce actualización en su lugar cómo
* Básicamente estoy tratando de ordenar los objetos por su puntaje en la última hora. Estoy tratando de generar una suma de votos por hora para los objetos en mi base de datos. Los votos están incrustados en cada objeto. El esquema del ...
CouchDB consultando y filtrando por tres claves indexadas
Actualmente estoy tratando de ordenar y ordenar por una clave con tres valores. Pero comencemos con la estructura del documento: { _id: "DOCIDGOESHERE01", type: "MESSAGE", date: "2011-08-24 06:49:02", author: "USERIDGOESHERE01", receiver: ...
¿Cómo decirle a MapReduce cuántos mapeadores usar?
Estoy tratando de optimizar la velocidad del trabajo MapReduce. ¿Hay alguna forma de decirle a hadoop que use un número particular de procesos de mapeo / reductor? O, al menos, un número mínimo de procesos de mapeo? n la documentación, se ...
¿Cómo decide Hive cuándo usar el mapa reducido y cuándo no?
Como ejemplo simple, select * from tablename; NO patea en el mapa reducir, mientras que select count(*) from tablename;HACE. ¿Cuál es el principio general utilizado para decidir cuándo usar map reduce (por colmena)?
as opciones de @Hadoop no tienen ningún efecto (mapreduce.input.lineinputformat.linespermap, mapred.max.map.failures.percent)
Estoy tratando de implementar un trabajo MapReduce, donde cada uno de los mapeadores tomaría 150 líneas del archivo de texto, y todos los mapeadores se ejecutarían simultáneamente; Además, no debe fallar, no importa cuántas tareas de mapa ...
Seleccione más de un campo con el mapa de MongoDB reduce
Quiero ejecutar esta declaración SQL en MongoDB: SELECT DISTINCT book,author from library Hasta ahora DISTINCT de MongoDB solo admite un campo a la vez. Para más de un campo, tenemos que usar el comando GROUP o map-reduce. He buscado en Google ...
mongodb: cómo depurar el mapa / reducir en mongodb shell
Soy nuevo en MongoDB, estoy usando map / reduce. ¿Alguien puede decirme cómo depurar mientras uso map / reduce? Utilicé la función "print ()" pero en el shell MongoDB, no se imprime nada. La siguiente es mi función de reducción: var reduce = ...
¿Cómo extraer datos en las funciones de Mapa / Reducir?
De acuerdo con laHadoop: la guía definitiva [http://shop.oreilly.com/product/0636920010388.do]. La nueva API admite un estilo de iteración "push" y "pull". En ambas API, los pares de registros clave-valor se envían al asignador, pero además, la ...
MapReduceBase y Mapper en desuso
public static class Map extends MapReduceBase implements MapperMapReduceBase, Mapper yJobConf están en desuso enHadoop 0.20.203. ¿Qué debemos usar ahora? Edit 1 - para elMapper y elMapReduceBase, Descubrí que solo necesitamos ...
La serialización con ArrayWritable parece funcionar de manera divertida
Estaba trabajando conArrayWritable, en algún momento tuve que comprobar cómo Hadoop serializa laArrayWritable, esto es lo que obtuve al configurarjob.setNumReduceTasks(0): 0 IntArrayWritable@10f11b8 3 IntArrayWritable@544ec1 6 ...