Результаты поиска по запросу "mapreduce"

2 ответа

Как реализовать самостоятельное соединение / перекрестный продукт с помощью hadoop?

Обычной задачей является оценка некоторых пар: Примеры: дедупликация, совместная фильтрация, похожие элементы и т. Д. Это в основном самостоятельное объедине...

2 ответа

Как прервать работу MR внутри картографа (или редуктора)

Я попытался выбросить IOException в методе map, но работа MR не была остановлена. Работа будет остановлена после тонны IOException. Есть ли способ остановить всю работу, просто бросив исключение или несколько простых вызовов? Благодарю.

2 ответа

Спасибо за ваш ответ! Поскольку ответ @JasonSmith был более подробным, я решил пометить его ответ как ответ, но мне тоже понравился ваш ответ!

тоящее время я пытаюсь упорядочить и отсортировать по ключу с тремя значениями. Но давайте начнем со структуры документа: { _id: "DOCIDGOESHERE01", type: "MESSAGE", date: "2011-08-24 06:49:02", author: "USERIDGOESHERE01", receiver: ...

ТОП публикаций

3 ответа

Spark java.lang.StackOverflowError

Я использую спарк, чтобы вычислить рейтинг страниц отзывов пользователей, но я продолжаю получать Spark

3 ответа

Преимущества использования NullWritable в Hadoop

Каковы преимущества использованияNullWritable заnull ключи / значения по сравнению с использованиемnull тексты (т.е.new Text(null)). Я вижу следующее из книги «Hadoop: Полное руководство». NullWritable это особый типWritable, так как он имеет ...

3 ответа

Выберите различное количество облачных / couchdb

Я начинаю проект с использованием Cloudant. Это простая система регистрации, поэтому я могу отслеживать использование моих приложений.Мои документы выглядят ...

1 ответ

hadoop java.net.URISyntaxException: Относительный путь в абсолютном URI: rsrc: hbase-common-0.98.1-hadoop2.jar

У меня есть задание уменьшения карты, которое подключается к HBASE, и я не могу понять, где я сталкиваюсь с этой ошибкой:

4 ответа

YarnException: неавторизованный запрос на запуск контейнера

3 ответа

Как получить доступ к значению счетчика Mapper в редукторе?

3 ответа

Задание MapReduce со смешанными источниками данных: таблица HBase и файлы HDFS

Мне нужно реализовать работу MR, которая обращается к данным как из таблицы HBase, так и из файлов HDFS. Например, mapper считывает данные из таблицы HBase и...