Как установить и получить статические переменные от спарк?

У меня есть класс как это:

Невозможно отправить задания в спарк кластер (режим кластера)

Spark версия 1.3.0Ошибка при отправке заданий в спарк кластер в режиме кластера

Spark Streaming: HDFS

Я не могу получить задание Spark для потоковой передачи «старых» файлов из HDFS.Если по какой-то причине мое задание Spark не работает (например, демонстраци...

Spark с использованием Python: Как решить Этап x содержит задачу очень большого размера (ххх КБ). Максимальный рекомендуемый размер задачи составляет 100 КБ

Я только что создал список Python

обработка логов в реальном времени с использованием Apache Spark Streaming

Я хочу создать систему, в которой я мог бы читать журналы в реальном времени и использовать apache spark для ее обработки. Я сбит с толку, если я должен испо...

Как создать несколько SparkContexts в консоли

spark ssc.textFileStream не выполняет потоковую передачу файлов из каталога

Spark Streaming: StreamingContext не читает файлы данных

Я новичок в Spark Streaming и пытаюсь начать работу с ним, используя Spark-shell. Предполагая, что у меня есть каталог с именем «dataTest», помещенный в корн...

Spark streaming StreamingContext.start () - Ошибка запуска приемника 0

У меня есть проект, использующий потоковую передачу по искру, и я запускаю его с помощью «spark-submit», но у меня возникает эта ошибка:

SQL через Spark Streaming

Это код для запуска простых SQL-запросов через Spark Streaming.