Результаты поиска по запросу "apache-spark"

10 ответов

Как изменить имена столбцов данных в pyspark?

Я пришел из панды и привык к чтению данных из CSV-файлов в информационный фрейм, а затем просто изменяя имена столбцов на что-то полезное, используя простую ...

0 ответов

Spark: недостаточно места для кэширования красного в контейнере, но при этом остается много общего объема памяти

0 ответов

Ошибка задания искры: YarnAllocator: Статус выхода: -100. Диагностика: контейнер освобожден на * потерянном * узле

ТОП публикаций

2 ответа

Почему компилятор Scala не работает с «объектом SparkConf в пакете spark нельзя получить доступ в пакете org.apache.spark»?

1 ответ

Как сохранить спарк-фрейм данных в виде текстового файла без строк в pyspark?

У меня есть фрейм данных "df" со столбцами ['name', 'age']. Я сохранил фрейм данных, используя

1 ответ

Проблемы с конфигурацией Google Cloud Dataproc

2 ответа

Работать с соседними элементами в RDD в Spark

1 ответ

Почему мой BroadcastHashJoin медленнее, чем ShuffledHashJoin в Spark

3 ответа

Spark Word2vec векторная математика

2 ответа

Как агрегировать значения в коллекцию после groupBy?