Что такое керберос?

Я хочу научиться безопасности Hadoop, используяКерберос, Я настроил Kerberos изэтот блог, но не знаю над этим работать.Я хочу знать, как это на самом деле ра...

Hadoop / hdfs / name находится в несогласованном состоянии: каталог хранения (hadoop / hdfs / data /) не существует или недоступен

Я перепробовал все различные решения, представленные в stackoverflow по этой теме, но безрезультатно. Спрашивать снова с конкретным журналом и деталямиЛюбая ...

Hadoop несколько входов

Разделитель Hadoop

Я хочу спросить о разделителе Hadoop, он реализован в Mappers? Как измерить производительность при использовании стандартного хеш-разделителя - Есть ли лучши...

Hadoop hdfs, показывающий ls: `/ home / hduser / input / ': нет такого файла или ошибка каталога

Я установилHadoop 2.6 на одной машине с использованиемэто Руководство. Я использую машину Ubuntu 12.04 и версию 1.6.0_27 Java.Я создал отдельного пользовател...

Hadoop 2.6.0: Основная ошибка «запуска MRAppMaster» после установки

Я только начал работать с Hadoop 2.После установки с базовыми конфигами мне всегда не удавалось запустить какие-либо примеры. Кто-нибудь видел эту проблему и...

«Нет файловой системы для схемы: gs» при локальном запуске искрового задания

Я запускаю задание Spark (версия 1.2.0), а входные данные - это папка внутри корзины Google Clous Storage (например, gs: // mybucket / folder)При локальном з...

В чем разница между hbase и ульем? (Hadoop)

Проблема с производительностью в версии куста 0.13.1

рекурсивное чтение файлов из подкаталогов с помощью spark из s3 или локальной файловой системы

Я пытаюсь прочитать файлы из каталога, который содержит много подкаталогов. Данные в S3, и я пытаюсь сделать это: