Hadoop в Windows [закрыто]
Я пользователь Microsoft Windows и новичок в Apache Hadoop. Большинство учебных пособий по Hadoop, которые я нашел, основаны на Linux, поэтому мне трудно изучать Hadoop на Windows. Любые указатели, чтобы изучить Hadoop на Windows было бы лучше.
Ответы на вопрос(7)
cygwin-1.7, jdk1.7_x64.
но это не для начинающих: вам нужно будет исправить и перекомпилировать hadoop.
то не важно, изучаете ли вы его в Windows или Linux, потому что на обеих платформах все одинаково. Я широко использовал Hadoop на обеих платформах и обнаружил, что все команды и обработка идентичны в Windows и Linux. Итак, вот мои предложения:
Download VMware VMPlayer on your Windows Machine Download CDH Virtual Machine for VMware https://ccp.cloudera.com/display/SUPPORT/DownloadsПолучите доступ к виртуальной машине в вашей коробке Windows и следуйте инструкциям точно так же, как в Linux.
что в примечаниях к выпуску упоминается, что эта версия имеет значительные улучшения для запуска Hadoop в Windows. Вчера я скачал Hadoop 2.2 и увидел множество файлов .cmd с файлами .sh, что гарантирует наличие в этой версии скриптов и командных файлов для запуска Hadoop в среде Windows. Однако, просматривая документацию Apache Hadoop, я не смог найти никаких пошаговых инструкций по установке и запуску этой новой версии в Windows. Кроме того, похоже, что в более новую версию встроена архитектура YARN, а старые конфигурации, представленные в некоторых онлайн-руководствах, могут быть устаревшими и более не применимыми. Есть ли в сети хорошая документация по Ha, doop 2.2? Я хочу это специально для запуска Hadoop под Win
Apache Hadoop для Windows с зетабайтами;, Доступен пакет core / common, а также пакет со средой GNU (bash и т. Д.)
"Syncfusion BigData Studio" запустить кластер из одного узла на вашем локальном компьютере вместе с необходимыми экосистемами, установленными на нем; Также"Syncfusion BigData Platform" позволяет вам легко управлять кластерами без какой-либо ручной настройки со стороны пользователя; Эти 2 установки "на 100% бесплатны для всех";
Чтобы загрузить настройки и узнать больше, пожалуйста, обратитесь:http://www.syncfusion.com/products/big-data
работающий на одной машине. Он работает внутри Cygwin (так что нет VM). Хорошо работает, чтобы опробовать Hadoop, и я все еще использую его для тестирования нового кода маленьким, прежде чем поместить его в кластер. Вы в основном получаете все функциональные возможности, как с полным кластером. Однако заставить его работать немного сложнее.
Я использовал следующее краткое руководство:Руководство по Stanford Hadoop для Windows
Который работал хорошо для меня. Очень важно, что вы используете 0.20.0! Более высокая версия не работает под Cygwin. Я думаю, что лучше оставить количество узлов по умолчанию равным 2. Таким образом, вы можете проверить, работает ли разделение работы на несколько узлов, но большее количество одновременных узлов может вызвать проблемы с памятью.