Resultados de la búsqueda a petición "large-files"
¿Cómo leo un archivo CSV grande con la clase Scala Stream?
¿Cómo leo un archivo CSV grande (> 1 Gb) con Scala Stream? ¿Tienes un ejemplo de código? ¿O usaría una forma diferente de leer un archivo CSV grande sin cargarlo primero en la memoria?
Cómo leer un archivo xml grande sin cargarlo en la memoria y usar XElement
Quiero leer un archivo xml grande (100 + M). Debido a su tamaño, no quiero cargarlo en la memoria usando XElement. Estoy usando consultas linq-xml para analizar y leerlo. ¿Cuál es la mejor manera de hacerlo? ¿Algún ejemplo sobre la combinación ...
XML: procesar datos grandes
¿Qué analizador XML recomienda para el siguiente propósito? El archivo XML (formateado, que contiene espacios en blanco) tiene alrededor de 800 MB. Principalmente contiene tres tipos de etiquetas (llamémoslas n, w y r). Tienen un atributo ...
AS3 trabajando con archivos arbitrariamente grandes
Estoy tratando de leer un archivo muy grande en AS3 y estoy teniendo problemas con el tiempo de ejecución que simplemente me falla. Actualmente estoy usando ...
Python: cortando un archivo binario muy grande
Digamos que tengo un archivo binario de 12 GB y quiero cortar 8 GB del medio. Sé los índices de posición que quiero cortar. ¿Cómo hago esto? Obviamente, 12GB no caben en la memoria, está bien, pero 8GB tampoco ... Lo que pensé que estaba bien, ...
Cómo leer un archivo de 4 GB en un sistema de 32 bits
En mi caso tengo diferentes archivos, supongamos que tengo un archivo> 4GB con datos. Quiero leer ese archivo línea por línea y procesar cada línea. Una de mis restricciones es que el software debe ejecutarse en MS Windows de 32 bits o en 64 bits ...
Python: ¿cómo comprimir un archivo de texto grande sin MemoryError?
Utilizo el siguiente script simple de Python para comprimir un archivo de texto grande (por ejemplo,10GB) en una instancia EC2 m3.large. Sin embargo, siempre tengo unMemoryError: import gzip with open('test_large.csv', 'rb') as f_in: ...
La forma más eficiente de encontrar coincidencias parciales de cadenas en un gran archivo de cadenas (Python)
Descargué el archivo de títulos de artículos de Wikipedia que contiene el nombre de cada artículo de Wikipedia. Necesito buscar todos los títulos de artículos que puedan coincidir. Por ejemplo, podría tener la palabra "hockey", pero el artículo ...
Graficando cantidades masivas de datos
Actualmente estamos usando ZedGraph para dibujar un gráfico de líneas de algunos datos. Los datos de entrada provienen de un archivo de tamaño arbitrario, por lo tanto, no sabemos cuál es el número máximo de puntos de datos por adelantado. Sin ...
Archivo de acceso aleatorio de Python
¿Existe un tipo de archivo Python para acceder a líneas aleatorias sin atravesar todo el archivo? Necesito buscar dentro de un archivo grande, leer todo en la memoria no sería posible. Cualquier tipo o método sería apreciado.