Suchergebnisse für Anfrage "parallel-processing"
Wie man in Java 8 alle Zeilen einer Datei parallel liest
Ich möchte alle Zeilen einer 1 GB großen Datei so schnell wie möglich in ein @ einleseStream<String>. Zur Zeit benutze ichFiles(path).lines() dafür. Nach dem Parsen der Datei führe ich einige Berechnungen durch map()/filter()) Zuerst dachte ich, ...
Wie wird das Blockieren von E / A in einem Apache-Spark-Job durchgeführt?
Was passiert, wenn ich beim Durchlaufen von RDD Werte im Datensatz durch Aufrufen eines externen (blockierenden) Dienstes berechnen muss? Wie denkst du, könnte das erreicht werden? val Werte:Future[RDD[Double]] = Future sequence tasks Ich habe ...
Warum ist Parallel.ForEach viel schneller als AsParallel (). ForAll (), obwohl MSDN etwas anderes vorschlägt?
Ich habe einige Untersuchungen durchgeführt, um herauszufinden, wie wir eine Multithread-Anwendung erstellen können, die über einen Baum ausgeführt wird. Um herauszufinden, wie dies am besten implementiert werden kann, habe ich ...
Warum ist PLINQ für diesen Code langsamer als LINQ?
Zunächst starte ich dies auf einem Dual-Core-2,66-GHz-Prozessor. Ich bin nicht sicher, ob ich den Aufruf von .AsParallel () an der richtigen Stelle habe. Ich habe es auch direkt auf der Bereichsvariablen versucht und das war noch langsamer. Ich ...
ImageMagick convert und GNU parallel zusammen
Ich möchte den folgenden Befehl beschleunigen: convert -limit memory 64 -limit map 128 -antialias -delay 1x2 final/*.png movie.mp4 Ich habe andere @ ...
Warum hängt sich Clojure auf, nachdem ich meine Berechnungen durchgeführt habe?
Ich experimentiere mit dem parallelen Filtern von Elementen. Für jedes Element muss eine Entfernungsberechnung durchgeführt werden, um festzustellen, ob es nahe genug an einem Zielpunkt liegt. Egal, dass dafür bereits Datenstrukturen existieren, ...
Zählen der Gesamtanzahl der Aufgaben, die während der Ausführung in einem Multiprocessing.Pool ausgeführt wurden.
Ich würde gerne einen Hinweis auf den aktuellen Vortrag insgesamt geben, dass wir nur sind. Ich arbeite in der Landwirtschaft und würde gerne den aktuellen Fortschritt erfahren. Also, wenn ich @ gesend100 jobs to10ie kann ich bei Prozessoren die ...
entscheiden zwischen Subprozess, Multiprozess und Thread in Python?
Ich möchte mein Python-Programm parallelisieren, damit es mehrere Prozessoren auf dem Computer verwendet, auf dem es ausgeführt wird. Meine Parallelisierung ist sehr einfach, da alle parallelen "Threads" des Programms unabhängig sind und ihre ...
multiprocessing.dummy in Python verwendet nicht 100% CPU
Ich mache ein maschinelles Lernprojekt in Python, daher muss ich eine parallele Vorhersagefunktion ausführen, die ich in meinem Programm verwende. from multiprocessing.dummy import Pool from multiprocessing import cpu_count def multi_predict(X, ...
Wie kann ich Chuncks einer Datei mit java.util.stream verarbeiten?
Um mich mit der Stream-API vertraut zu machen, habe ich versucht, ein recht einfaches Muster zu codieren. Problem Eine Textdatei mit nicht verschachtelten Textblöcken. Alle Blöcke werden durch Start- / Endmuster identifiziert (z. B.<start> ...