Результаты поиска по запросу "apache-spark-ml"
Например, если вы только что оснастили модель конвейера тремя этапами и хотите установить некоторые параметры на втором этапе, вы можете просто сделать что-то вроде:
исал собственный ML PipelineEstimator а такжеTransformer для моего собственного алгоритма Python, следуя показанной схемеВот [https://stackoverflow.com/a/37279526/1843329]. Однако в этом примере все параметры, необходимые для_transform() были ...
Кодировать и собрать несколько функций в PySpark
У меня есть класс Python, который я использую для загрузки и обработки некоторых данных в Spark. Среди различных вещей, которые мне нужно сделать, я создаю с...
Как оценить модель spark.ml без DataFrames / SparkContext?
С Spark MLLib я бы построил модель (например,
https://github.com/Hydrospheredata/hydro-serving
от вопрос уже есть ответ здесь: Как обслуживать модель Spark MLlib? [/questions/40533582/how-to-serve-a-spark-mllib-model] 3 ответаВ настоящее время мы тестируем механизм прогнозирования, основанный на реализации LDA Spark ...
Как преобразовать RDD со столбцом SparseVector в DataFrame со столбцом как вектор
у меня естьРДД с кортежем значений (String, SparseVector), и я хочу создатьDataFrame с использованиемРДД, Чтобы получить (метка: строка, функции: вектор)Data...
Не удалось преобразовать тип <class 'pyspark.ml.linalg.SparseVector'> в вектор
Учитывая мой pyspark Row объект: