Результаты поиска по запросу "apache-spark"

7 ответов

Решение проблем с зависимостями в Apache Spark

Общие проблемы при создании и развертывании приложений Spark:

1 ответ

Чтение графика из файла

Нужно запустить пример GraphX ​​на моей машине с Windows, используя Spark-Shell из SparklyR, установив Hadoop / Spark. Я могу запустить оболочку из каталога ...

1 ответ

Найти медиану в искровом SQL для нескольких столбцов с двойным типом данных

У меня есть требование найти медиану для нескольких столбцов с двойным типом данных. Запросить предложение, чтобы найти правильный подход.Ниже приведен мой п...

ТОП публикаций

1 ответ

Как найти точную медиану для сгруппированных данных в Spark

У меня есть требование рассчитать точную медиану на сгруппированном наборе данных типа Double в Spark, используя Scala.Это отличается от аналогичного запроса...

1 ответ

Spark SQL «<=>» оператор

Недавно я столкнулся с этим оператором: &quot;&lt;=&gt;&quot; в проекте Scala Spark. У меня проблемы с поиском какой-либо документации по нему. Кто-нибудь зн...

2 ответа

Вернуть Seq [Row] из UDF Spark-Scala

Я использую Spark со Scala для обработки данных. У меня есть данные XML, сопоставленные с dataframe. Я передаю строку в качестве параметра в UDF и пытаюсь из...

2 ответа

Разница между === нулевым и isNull в Spark DataDrame

1 ответ

Как работает разделитель диапазона в Spark?

1 ответ

Dataframe для набора данных, который имеет тип Any

Недавно я перешел с Spark 1.6 на Spark 2.X, и я хотел бы перейти - по возможности - с Dataframes на наборы данных. Я пробовал такой код

1 ответ

Аутентификация сервера Spark History в кластере Kerberized