Как оценить модель spark.ml без DataFrames / SparkContext?
С Spark MLLib я бы построил модель (например,RandomForest
), а затем можно было оценить его вне Spark, загрузив модель и используяpredict
по нему проходит вектор особенностей.
Похоже, с Spark ML,predict
сейчас называетсяtransform
и действует только наDataFrame
.
Есть ли способ построитьDataFrame
за пределами Spark, поскольку кажется, что для создания DataFrame нужен SparkContext?
Я что-то пропустил?