Результаты поиска по запросу "apache-spark"
Как конвертировать CSV-файл в RDD
Я новичок, чтобы зажечь. Я хочу выполнить некоторые операции с определенными данными в записи CSV.Я пытаюсь прочитать файл CSV и преобразовать его в RDD. Мои...
Функция карты RDD не вызывается в Scala Spark
Когда я вызываю карту, функция RDD не применяется. Он работает, как и ожидалось, для scala.collection.immutable.List, но не для RDD. Вот некоторый код для ил...
Как читать файлы gz в Spark, используя wholeTextFiles
У меня есть папка, которая содержит много небольших файлов .gz (сжатые текстовые файлы CSV). Мне нужно прочитать их в моей работе Spark, но дело в том, что м...
Искра с вводом / выводом Кассандры
Представьте себе следующее senario: Приложение Spark (реализация Java) использует базу данных Cassandra для загрузки, преобразования в RDD и обработки данных...
Как установить мастер-адрес для примеров Spark из командной строки
НОТА: Автор ищет ответы для установки Spark Master при запуске примеров Spark, которые включаютнет изменения в исходном коде, а скорее только параметры, кото...