и уменьшить

Подсчет строк в больших файлах

Хорошие примеры MapReduce [закрыто]

Я не мог придумать ни одного хорошего примера, кроме как подсчитывать слова в длинном тексте с помощью MapReduce. задача. Я обнаружил, что это не лучший прим...

PySpark Как читать CSV в Dataframe и манипулировать им

Я новичок в pyspark и пытаюсь использовать его для обработки большого набора данных, который сохраняется в виде файла csv. Я хотел бы прочитать CSV-файл в ис...

Как установить редуктор для передачи <Text, IntWritable> и преобразователь для получения <Text, IntWritable>?

Я разрабатываю код наHadoop суменьшение карты который используетдва картографа и два редуктора. Мне сказали использоватьSequenceFileInputFormat а такжеSequen...

Присоединяйтесь к двум коллекциям с MapReduce в MongoDB

Я уже знаю, что MongoDB не поддерживает операции соединения, но я должен имитировать

Как я могу получить карту / уменьшить результат, который отсортирован в порядке убывания значения «значение»? Если также можно использовать функцию списка?

У меня есть карта просмотра и уменьшить, как это: карта:

Почему метод setMapOutputKeyClass необходим в работе mapreduce

Когда в Hadoop начинается сокращение задач?

В Hadoop, когда начинаются задачи сокращения? Они начинаются после того, как определенный процент (порог) картографов завершен? Если так, этот порог установл...

Spark java.lang.StackOverflowError

Я использую спарк, чтобы вычислить рейтинг страниц отзывов пользователей, но я продолжаю получать Spark