Como avaliar o modelo spark.ml sem DataFrames / SparkContext?
Com o Spark MLLib, eu construí um modelo (comoRandomForest
) e, em seguida, foi possível avaliá-lo fora do Spark, carregando o modelo e usandopredict
nele passando um vetor de recursos.
Parece que com o Spark ML,predict
agora é chamadotransform
e atua apenas emDataFrame
.
Existe alguma maneira de construir umDataFrame
fora do Spark, pois parece que é necessário um SparkContext para criar um DataFrame?
Estou esquecendo de algo?