Spark DataFrames Groupby в список

Я пытаюсь сделать некоторый анализ на множествах. У меня есть пример набора данных, который выглядит следующим образом:orders.json

Как отфильтровать один искровой фрейм данных против другого фрейма данных

Как преобразовать DataFrame в набор данных в Apache Spark в Java?

Я могу очень легко конвертировать DataFrame в набор данных в Scala:

Spark 1.6: java.lang.IllegalArgumentException: spark.sql.execution.id уже установлен

Я использую spark 1.6 и столкнулся с проблемой выше, когда я запускаю следующий код:

Функция Apache Spark Window с вложенным столбцом

Создать DataFrame из списка кортежей, используя pyspark

Spark Streaming: Как я могу добавить больше разделов в мой DStream?

У меня есть потоковое приложение, которое выглядит так:

как выбрать все столбцы, которые начинаются с общей метки

Как изменить Spark Dataframe со сложной вложенной структурой?

Как позволить Spark анализировать поле String, экранированное JSON, как объект JSON, чтобы вывести правильную структуру в DataFrames?