Suchergebnisse für Anfrage "kryo"
Customize SparkContext using sparkConf.set (..) bei Verwendung von spark-shell
In Spark gibt es drei Hauptoptionen zum Festlegen der Optionen für dasSparkConf verwendet, um das @ zu erstellSparkContext: As Eigenschaften in der conf / spark-defaults.conf. B. die Zeile:spark.driver.memory 4gAls Argumente für Spark-Shell ...
Serialisieren eines beliebigen Java-Objekts mit Kryo (IllegalAccessError abrufen)
MotivationUm das Remote-Debugging (Java) zu unterstützen, ist es hilfreich, Remote-Server aufzufordern, beliebige Objekte zur Überprüfung an meinen lokalen Computer zu senden. Dies bedeutet jedoch, dass der Remote-Server in der Lage sein muss, ...
Die Kryo-Serialisierung lehnt die Registrierung der Klasse ab
Ich versuche, Kryo-Serialisierung zu verwenden mit: kryo.setRegistrationRequired(true);Ich erhalte immer wieder die Fehlermeldung, dass eine bestimmte Klasse nicht registriert ist: java.lang.IllegalArgumentException: Class is not ...
Wie man Byte [] [] mit Kryo-Serialisierung für Funken registriert
Ich versuche, die Kryo-Serialisierung für Funken vollständig zu nutzen. Rahme .set("spark.kryo.registrationRequired", "true")Dies teilt mir mit, welche Klassen registriert werden müssen. Ich habe ungefähr 40 Klassen angemeldet, einige meiner ...
Kryo-Deserialisierung schlägt mit „KryoException: Buffer underflow“ fehl
Ich benutze Kryo, um Objekte in Byte-Arrays zu schreiben. Es funktioniert gut. Aber wenn die Byte-Arrays in die Objekte konvertiert werden, wirft es,com.esotericsoftware.kryo.KryoException: Buffer underflow. Ausnahme. Das ist meine ...