Suchergebnisse für Anfrage "sparkr"

2 die antwort

sparkR 1.6: Vorhersage der Wahrscheinlichkeit bei der Modellierung mit glm (Binomialfamilie)

Ich habe gerade sparkR 1.6.1 auf CentOS installiert und verwende Hadoop nicht. Mein Code zum Modellieren von Daten mit diskreten 'TARGET'-Werten lautet wie folgt: # 'tr' is a R data frame with 104 numeric columns and one TARGET column # ...

0 die antwort

SparkR collect () und head () Fehler für Spark DataFrame: Argumente implizieren unterschiedliche Zeilenanzahl

Ich habe eine Parkettdatei vom HDFS-System gelesen: path<-"hdfs://part_2015" AppDF <- parquetFile(sqlContext, path) printSchema(AppDF) root |-- app: binary (nullable = true) |-- category: binary (nullable = true) |-- date: binary (nullable = ...

14 die antwort

SparkR vs sparklyr [geschlossen]

Hat jemand einen Überblick über die Vor- / Nachteile von SparkR gegenüber sparklyr? Google liefert keine zufriedenstellenden Ergebnisse und beide scheinen ziemlich ähnlich zu sein. Wenn Sie beides ausprobieren, scheint SparkR viel umständlicher ...

TOP-Veröffentlichungen

4 die antwort

Spalte zu DataFrame in sparkR @ hinzufüg

Ich möchte eine Spalte mit einem Zeichen hinzufügenN in einem DataFrame in SparkR. Ich würde es so mit Nicht-SparkR-Code machen: df$new_column <- "N"Aber mit SparkR erhalte ich den folgenden Fehler: Error: class(value) == "Column" || ...

8 die antwort

Installation von SparkR

Ich habe die letzte Version von R - 3.2.1. Jetzt möchte ich SparkR auf R installieren. Nachdem ich ausgeführt habe: > install.packages("SparkR")Ich bin zurückgekommen Installing package into ‘/home/user/R/x86_64-pc-linux-gnu-library/3.2’ (as ...

6 die antwort

SparkR von Rstudio - gibt in invokeJava einen Fehler aus (isStatic = TRUE, className, methodName,…):

Ich verwende RStudio. Nach dem Erstellen einer Sitzung, wenn ich versuche, einen Datenrahmen mit R-Daten zu erstellen, tritt ein Fehler auf. Sys.setenv(SPARK_HOME = "E:/spark-2.0.0-bin-hadoop2.7/spark-2.0.0-bin-hadoop2.7") ...

2 die antwort

SparkR chinesisches Zeichen falsch anzeigen

Ich bin neu bei SparkR. Heutzutage ist ein Problem aufgetreten, das nach dem Konvertieren einer Datei mit chinesischen Zeichen in SparkR nicht mehr richtig angezeigt wird. So was city=c("北京","上海","杭州") A <- as.data.frame(city) A city 1 北京 2 上海 3 ...

0 die antwort

SparkR: Split-Apply-Combine im Dplyr-Stil für DataFrame

Unter dem vorherigen RDD-Paradigma könnte ich einen Schlüssel angeben und dann eine Operation den RDD-Elementen zuordnen, die jedem Schlüssel entsprechen. Ich sehe keinen klaren Weg, um dies mit DataFrame in SparkR ab 1.5.1 zu tun. Was ich tun ...

2 die antwort

R-Datenframes schreiben, die von SparkR ::: map @ zurückgegeben wurd

Ich verwende SparkR ::: map und meine Funktion gibt einen großen R-Datenrahmen für jede Eingabezeile mit derselben Form zurück. Ich möchte diese Datenrahmen als Parkettdateien schreiben, ohne sie zu "sammeln". Kann ich write.df über meine ...

8 die antwort

SparkR Fehler in sparkR.init (master = “local”) in RStudio

Ich habe das SparkR-Paket von der Spark-Distribution in die R-Bibliothek installiert. Ich kann den folgenden Befehl aufrufen und es scheint richtig zu funktionieren:library(SparkR) Wenn ich jedoch versuche, den Spark-Kontext mithilfe des ...