Как отключить ведение журнала INFO в Spark?

Я установил Spark с помощью руководства AWS EC2 и могу нормально запустить программу, используя

SPARK SQL - случай, когда тогда

Я новичок в SPARK-SQL. Есть ли в SPARK SQL эквивалент «СЛУЧАЙ КОГДА« СОСТОЯНИЕ »ТОГДА 0 ИЛИ 1 КОНЕЦ»?

Как мне установить pyspark для использования в автономных скриптах?

Я пытаюсь использовать Spark с Python. Я установил Spark 1.0.2 для бинарного дистрибутива Hadoop 2 иззагрузок стр. Я могу просмотреть примеры быстрого запуск...

ElasticSearch to Spark RDD

Я тестировал интеграцию ElasticSearch и Spark на своем локальном компьютере, используя некоторые тестовые данные, загруженные вasticsearch.

Запись в HBase через Spark: задача не сериализуема

Я пытаюсь записать некоторые простые данные в HBase (0.96.0-hadoop2), используя Spark 1.0, но у меня продолжают появляться проблемы с сериализацией. Вот соот...

Ошибка РАЗРЕШЕННЫЕ ЗАВИСИМОСТИ при попытке создать JAR

Я пытаюсь создать файл jar Scala, чтобы запустить его в Spark.Я слежу за этимруководство.при попытке собрать JAR-файл, используя sbt какВот, я сталкиваюсь со...

Посмотреть содержимое RDD в Python Spark?

Запуск простого приложения в pyspark.

Разобрать CSV как DataFrame / DataSet с Apache Spark и Java

Как мне войти из моего скрипта Python Spark

У меня есть программа Python Spark, с которой я работаю

SQL через Spark Streaming

Это код для запуска простых SQL-запросов через Spark Streaming.