Resultados de la búsqueda a petición "mapreduce"

5 la respuesta

Cómo arreglar "El intento de tarea_201104251139_0295_r_000006_0 no pudo informar el estado durante 600 segundos".

Escribí un trabajo de mapreduce para extraer información de un conjunto de datos. El conjunto de datos es la calificación de los usuarios sobre películas. El número de usuarios es de aproximadamente 250K y el número de películas es ...

2 la respuesta

Operación conjunta con MongoDB MapReduce

He estado usando MapReduce antes para realizar una operación MR clásica, el equivalente de GROUP BY en SQL. Me preguntaba si sería conceptualmente posible realizar una operación JOIN con MapReduce. ¿Alguna idea de cómo se podría implementar ...

2 la respuesta

Ejemplo de contador simple usando mapreduce en Google App Engine

Estoy algo confundido con el estado actual del soporte de mapreduce en GAE. De acuerdo con los documentoshttp: //code.google.com/p/appengine-mapreduce [http://code.google.com/p/appengine-mapreduce/] Reducir fase aún no es compatible, pero en la ...

2 la respuesta

Configure Map Side join para múltiples mapeadores en Hadoop Map / Reduce

Tengo una pregunta sobre la configuración de la unión interna Mapa / Lado para múltiples mapeadores en Hadoop. Supongamos que tengo dos conjuntos de datos muy grandes A y B, uso la misma partición y algoritmo de clasificación para dividirlos en ...

2 la respuesta

Mongo Funciones definidas por el usuario y Mapa Reducir

Hay una forma en mongo para crear funciones Javascript definidas por el usuario. Tengo varias funciones de Mapa / Reducir en el lado del cliente que me gustaría usar dentro de otras funciones de MR. Por ejemplo, varias funciones de MR calculan ...

1 la respuesta

Permutaciones con MapReduce

¿Hay alguna forma de generar permutaciones con MapReduce? fichero de entrada 1 title1 2 title2 3 title3mi meta 1,2 title1,title2 1,3 title1,title3 2,3 title2,title3

3 la respuesta

¿Qué es el Dremel de Google? ¿Cómo es diferente de Mapreduce?

Dremel de Google esdescrito aquí [http://research.google.com/pubs/pub36632.html]. ¿Cuál es la diferencia entre Dremel y Mapreduce?

15 la respuesta

Establecer el número de tareas de mapa y reducir tareas

Actualmente estoy ejecutando un trabajo, fijé el número de tareas del mapa en 20, pero obtuve un número mayor. También configuré la tarea de reducción a cero, pero todavía obtengo un número distinto de cero. El tiempo total para completar el ...

1 la respuesta

Cómo imprimir en la consola durante la ejecución del trabajo MapReduce en hadoop

Quiero imprimir cada paso de mi "mapa" después de su ejecución en la consola. Algo com System.out.println ("Paso uno completado"); System.out.println ("Paso dos completado"); y as Existe un comando especial para hacer eso o no es posible, ...

1 la respuesta

Encuentra la mediana de un conjunto entero grande usando MapReduce

Existe un algoritmo rápido para ejecutar en el marco de MapReduce para encontrar la mediana de un gran conjunto de enteros?