Результаты поиска по запросу "apache-spark"
Решение проблем с зависимостями в Apache Spark
Общие проблемы при создании и развертывании приложений Spark:
Чтение графика из файла
Нужно запустить пример GraphX на моей машине с Windows, используя Spark-Shell из SparklyR, установив Hadoop / Spark. Я могу запустить оболочку из каталога ...
Найти медиану в искровом SQL для нескольких столбцов с двойным типом данных
У меня есть требование найти медиану для нескольких столбцов с двойным типом данных. Запросить предложение, чтобы найти правильный подход.Ниже приведен мой п...
Как найти точную медиану для сгруппированных данных в Spark
У меня есть требование рассчитать точную медиану на сгруппированном наборе данных типа Double в Spark, используя Scala.Это отличается от аналогичного запроса...
Spark SQL «<=>» оператор
Недавно я столкнулся с этим оператором: "<=>" в проекте Scala Spark. У меня проблемы с поиском какой-либо документации по нему. Кто-нибудь зн...
Вернуть Seq [Row] из UDF Spark-Scala
Я использую Spark со Scala для обработки данных. У меня есть данные XML, сопоставленные с dataframe. Я передаю строку в качестве параметра в UDF и пытаюсь из...
Dataframe для набора данных, который имеет тип Any
Недавно я перешел с Spark 1.6 на Spark 2.X, и я хотел бы перейти - по возможности - с Dataframes на наборы данных. Я пробовал такой код