Как преобразовать DataFrame в набор данных в Apache Spark в Java?

Я могу очень легко конвертировать DataFrame в набор данных в Scala:

В чем разница между Spark DataSet и RDD

Когда использовать Spark DataFrame / Dataset API, а когда использовать обычный RDD?

Spark / Scala: заполните Nan последним хорошим наблюдением

Я использую искру 2.0.1 и хочу заполнить значения nan последним известным значением в столбце.Единственную ссылку на искру я мог найтиSpark / Scala: заполнен...

Как получить ключи и значения из столбца MapType в SparkSQL DataFrame

У меня есть данные в файле паркета, который имеет 2 поля:

Spark dynamic DAG намного медленнее и отличается от жестко закодированного DAG

У меня есть операция в спарк, которая должна быть выполнена для нескольких столбцов в кадре данных. Как правило, есть 2 возможности указать такие операциижёстко

Dataframe для набора данных, который имеет тип Any

Недавно я перешел с Spark 1.6 на Spark 2.X, и я хотел бы перейти - по возможности - с Dataframes на наборы данных. Я пробовал такой код

Набор данных Spark 2.0 против DataFrame

ение этой нулевой ошибки в spark Dataset.filterВход CSV:

 только об этой конкретной проблеме.

гда думал, что API набора данных / dataframe одинаковы ... и единственное отличие состоит в том, что API набора данных обеспечит вам безопасность времени компиляции. Правильно ? Итак .. У меня очень простой случай: case class Player (playerID: ...

Spark Dataset выберите с помощью typedcolumn

Глядя на