Результаты поиска по запросу "hadoop"
Нахождение наибольшего значения для ключа
Я хочу узнать самую большую страну с самой большой областью.мой набор данных выглядит следующим образом
Улей - как оператор
Я не могу понять, как я справляюсь с этой проблемой:Это мои данные:
Hadoop / Hive Collect_list без повторяющихся элементов
Основываясь на посте,Улей 0.12 - Collect_listЯ пытаюсь найти код Java для реализации UDAF, который будет выполнять эту или аналогичную функциональность, но б...
Сохранить Spark DataFrame как динамическую многораздельную таблицу в Hive
У меня есть пример приложения, работающего для чтения из файлов CSV в кадре данных. Фрейм данных может быть сохранен в таблице Hive в формате паркета, исполь...
Как я могу заставить Spark выполнить код?
Как я могу заставить Spark выполнить вызов map, даже если он считает, что его не нужно выполнять из-за его ленивой оценки?Я пытался поставить
Hive 1.1.0 Изменение типа раздела таблицы с int на строку
У меня есть таблица, которая имеет раздел типа int, но я хочу преобразовать в строку. Однако я не могу понять, как это сделать.Описание таблицы:
Исключение в потоке «main» org.apache.hadoop.ipc.RemoteException: сервер IPC версии 9 не может связаться с клиентом версии 4. Как решить эту проблему?
Я использую hadoop 2.7.0 и java oracle jdk1.7.0_79 с IDE NetBeans 8.0.2. Когда я пытаюсь связаться с Hadoop, используя файл Java, я получаю следующую ошибку....
Пользовательский интерфейс Hadoop показывает только одну датаноду
Я запустил кластер hadoop, состоящий из главного и 4 подчиненных узлов.Конфигурация кажется нормальной:hduser @ ubuntu-amd64: / usr / local / hadoop $ ./bin/...
Постоянно увеличивающаяся физическая память для приложения Spark в YARN
Я запускаю приложение Spark в YARN с двумя исполнителями с Xms / Xmx 32 ГБ и spark.yarn.excutor.memoryOverhead 6 ГБ.Я вижу, что физическая память приложения ...