Suchergebnisse für Anfrage "scala"
Spark Werte aus einer Zeile extrahieren
Ich habe den folgenden Datenrahmen val transactions_with_counts = sqlContext.sql( """SELECT user_id AS user_id, category_id AS category_id, COUNT(category_id) FROM transactions GROUP BY user_id, category_id""") Ich versuche, die Zeilen in ...
Spark DataFrame übergibt leere Zeichenfolge in OneHotEncoder
Ich importiere eine CSV-Datei (mit spark-csv) in einDataFrame das hat leerString Werte. Bei Anwendung desOneHotEncoder, die Anwendung stürzt mit Fehler @ requirement failed: Cannot have an empty string for name.. Kann ich das umgehen? Ich konnte ...
Kann SBT in JFrog artifactory veröffentlichen
Meine Organisation verwendet JFROG Artifactory für die Verteilung aller Gläser. Bisher habe ich SBT immer für meine Scala-Entwicklung verwendet. Aber jetzt, wenn ich nach Möglichkeiten suche, von SBT gebaute Jars in JFROG Artifactory ...
Play Framework und Slick automatische Datenbankerstellung
Ich benutze play 2.4 und slick 3, ist es möglich automatisch ddl scripte zu generieren, ist es evolutions? In offiziellen Dokumenten habe ich einige Skripte gefunden, aber wo soll ich sie im Play Framework platzieren?http: ...
spark sbt compile error libraryDependencies
1.2.0-bin-hadoop2.4 und meine Scala-Version ist2.11.7. Ich erhalte eine Fehlermeldung, daher kann ich sbt nicht verwenden. ~/sparksample$ sbtStarting sbt: invoke with -help for other options [info] Set current project to Spark Sample (in build ...
Scala: seltsames Verhalten beim `for` Pattern Matching für None case
eltsames Verhalten infor Cycle Pattern Matching: scala> val a = Seq(Some(1), None) a: Seq[Option[Int]] = List(Some(1), None) scala> for (Some(x) <- a) { println(x) } 1 scala> for (None <- a) { println("none") } none noneWarum im zweiten Beispiel ...
Master muss mit Garn beginnen, Funken
Ich erhalte diesen Fehler, wenn das SparkPi-Beispiel ausgeführt werden soll. beyhan@beyhan:~/spark-1.2.0-bin-hadoop2.4$ /home/beyhan/spark-1.2.0-bin-hadoop2.4/bin/spark-submit --master ego-client --class ...
Spark - Korrelationsmatrix aus Bewertungsdatei
Ich bin ein Neuling in Scala und Spark und kann aus einer Bewertungsdatei keine Korrelationsmatrix erstellen. Es ist ähnlich wiediese Frag [https://stackoverflow.com/questions/32402475/spark-how-to-create-a-sparse-matrix-from-item-ratings] aber ...
Mehrere verschiedene Spalten mit Spark Dataframe-Scala in Map-Spalten konvertieren
Ich habe einen Datenrahmen mit der Spalte:user, address1, address2, address3, phone1, phone2 und so weiter. Ich möchte diesen Datenrahmen in - @ konvertieruser, address, phone where address = Map("address1" -> address1.value, "address2" -> ...
Unter Verwendung verschiedener Monaden zum Verständnis
Können verschiedene Monaden für das Verständnis verwendet werden? Hier ist der Code, der @ verwendmap case class Post(id: Int, text: String) object PostOps { def find(id: Int) : Option[Post] = if (id == 1) Some(Post(1, "text")) else None def ...