Suchergebnisse für Anfrage "large-data"
Zwischenzentralität für relativ große Datenmengen
Mit R versuche ich, die Betweenness-Zentralität für etwa 1 Million Knoten und mehr als 20 Millionen Kanten zu berechnen. Dazu habe ich eine ziemlich anständige Maschine mit 128 GB RAM und 4 * 2,40 GHz CPU und einem 64-Bit-Fenster. Die Verwendung ...
Fread Protection Stack-Überlauffehler
Ich verwende fread in data.table (1.8.8, R 3.0.1), um zu versuchen, sehr große Dateien zu lesen.Die fragliche Datei hat 313 Zeilen und ~ 6,6 Millionen Spalte...
Warum nimmt MongoDB so viel Platz ein?
Ich versuche, Datensätze mit einer Reihe von Double- und Ints-Werten (ca. 15-20) in mongoDB zu speichern. Die meisten Datensätze (99,99%) haben dieselbe Stru...
R konnte beim ff-Vorgang keinen Speicher zuweisen. Woher?
Ich arbeite an einem 64-Bit-Windows Server 2008-Computer mit Intel Xeon-Prozessor und 24 GB RAM. Ich habe Probleme beim Lesen einer bestimmten TSV-Datei (tabulatorgetrennt) mit 11 GB (> 24 Millionen Zeilen, 20 Spalten). Mein üblicher ...
Stream analysiert 4 GB XML-Datei in PHP
Ich versuche und brauche Hilfe bei folgenden Aufgaben:Ich möchte eine große XML-Datei (4 GB) mit PHP streamen und analysieren. Ich kann kein einfaches XML od...
Wie finde ich alle eindeutigen Teilzeichenfolgen einer sehr langen Zeichenfolge?
Ich habe eine sehr lange Saite. Ich möchte alle eindeutigen Teilzeichenfolgen dieser Zeichenfolge finden. Ich habe versucht, den Code dort zu schreiben, wo ich a verwendet habeeinstellen(Python) zum Speichern aller Teilzeichenfolgen, um die ...
R - Warum wird durch Hinzufügen einer Spalte zur Datentabelle der Spitzenwert des verwendeten Speichers fast verdoppelt?
Nachdem ich @ bekommen haHilf [https://stackoverflow.com/questions/28279078/r-how-to-run-average-max-on-different-data-table-columns-based-on-multiple-f] von 2 gütigen herren habe ich es geschafft, von data frame + plyr auf datentabellen ...
MATLAB Spalten zufällig anders permutieren
Ich habe eine sehr große Matrix A mit N Zeilen und M Spalten. Ich möchte im Grunde die folgende Operation durchführen for k = 1:N A(k,:) = A(k,randperm(M)); endaber schnell und effizient. (Sowohl M als auch N sind sehr groß, und dies ist nur ...