Suchergebnisse für Anfrage "scala"
Scala unveränderliche Karte langsam
Ich habe einen Code, wenn ich eine Karte erstelle: val map = gtfLineArr(8).split(";").map(_ split "\"").collect { case Array(k, v) => (k, v) }.toMapDann benutze ich diese Map, um mein Objekt zu erstellen: case class MyObject(val attribute1: ...
Verwendung von Lazy Val zum Cachen der Zeichenfolgendarstellung
Ich habe den folgenden Code in JAXMags Scala-Sonderausgabe gefunden: package com.weiglewilczek.gameoflife case class Cell(x: Int, y: Int) { override def toString = position private lazy val position = "(%s, %s)".format(x, y) } Nimmt die ...
Leistungsauswirkungen der RDD-API im Vergleich zu UDFs, die mit der DataFrame-API gemischt sind
(Scala-spezifische Frage.) n @While Spark-Dokumenten wird die Verwendung der DataFrame-API empfohlen. Wenn die DataFrame-API nicht ausreicht, können Sie normalerweise auf die RDD-API zurückgreifen oder UDFs verwenden. Gibt es inhärente ...
Spark: Shuffle-Operation führt zu langer GC-Pause
Ich renneSpark 2 und versuche, um 5 Terabyte Json zu mischen. Ich habe beim Mischen eines @s sehr lange Pausen bei der Garbage CollectioDataset: val operations = spark.read.json(inPath).as[MyClass] operations.repartition(partitions, ...
Wie kann JSon in Gatling dynamisch generiert werden?
Ich habe die folgenden zwei Methoden: def randomStartMethod() : Long = { var range = 1000L var r = ThreadLocalRandom.current().nextLong(10L*range) var randomStart = 1396024675000L + r return randomStart } def randomStopMethod() : Long = { var ...
Gradle-Android-Scala-Plugin gibt "Konnte nicht passenden Konstruktor finden" Fehler
ImportierenDie [https://github.com/saturday06/gradle-android-scala-plugin/tree/master/sample/hello] Beispielcode in Android Studio gibt diesen Fehler aus: Error: (17, 0) Konnte keinen passenden Konstruktor finden ...
Skolemisierung existentiell typisierter Ausdrücke
In Scala löst der folgende Ausdruck einen Typfehler aus: val pair: (A => String, A) forSome { type A } = ( { a: Int => a.toString }, 19 ) pair._1(pair._2) Wie in @ erwäh SI-9899 [https://issues.scala-lang.org/browse/SI-9899] und das Antworte ...
Spark :: KMeans ruft takeSample () zweimal auf?
Ich habe viele Daten und habe mit Partitionen der Kardinalität [20k, 200k +] experimentiert. Ich nenne es so: from pyspark.mllib.clustering import KMeans, KMeansModel C0 = KMeans.train(first, 8192, initializationMode='random', ...
Issues probiert ein Beispiel in der Spark-Shell aus
Wollte Spark 2.0 ausprobieren, aber als ich versuchte, den folgenden Code von @ aus ...
Wie kann ich ein Merkmal in eine Instanz einmischen?
Eine Eigenschaft gegebenMyTrait: trait MyTrait { def doSomething = println("boo") }it kann mit @ in eine Klasse gemischt werdextends oderwith: class MyClass extends MyTraitEs kann auch beim Instanziieren einer neuen Instanz gemischt ...