Результаты поиска по запросу "large-files"

6 ответов

https://www.rdocumentation.org/packages/base/versions/3.5.1/topics/readLines

я есть файл с 15 миллионами строк (не помещается в памяти). У меня также есть небольшой вектор номеров строк - строк, которые я хочу извлечь. Как я могу прочитать строки за один проход? Я надеялся на функцию C, которая делает это за один проход.

1 ответ

Единственная проблема с методом root.clear () - он возвращает NoneTypes. Это означает, что вы не можете, например, редактировать данные, которые вы анализируете, с помощью строковых методов, таких как replace () или title (). Тем не менее, это оптимальный метод для использования, если вы просто анализируете данные как есть.

ужно написать анализатор на Python, который может обрабатывать некоторые очень большие файлы (> 2 ГБ) на компьютере без большого объема памяти (только 2 ГБ). Я хотел использовать iterparse в lxml, чтобы сделать это. Мой файл имеет ...

5 ответов

Чем отличается PushStreamContent от веб-API и веб-API 2?

Я создал два идентичных проекта веб-API, один в VS 2012, а другой в VS 2013, оба предназначались для платформы 4.5 .net. Проекты основаны на учебнике по загрузке видео от Филиппа ...

ТОП публикаций

14 ответов

Как читать большие текстовые файлы на окнах? [закрыто]

У меня есть большой файл журнала сервера (~ 750 МБ), который я не могу открыть ни с помощью Блокнота, ни с помощью Блокнота ++ (оба говорят, что файл слишком большой). Кто-нибудь может предложить программу (для Windows), которая будет ...

13 ответов

Очень большие загрузки с PHP

Я хочу разрешить загрузку очень больших файлов в наше PHP-приложение (сто мегабайт - 8 гигабайт). Однако есть несколько проблем с этим. Браузер: HTML-загрузки имеют дрянную обратную связь, нам нужно либо опрашивать о прогрессе (что немного ...

11 ответов

Рекомендации по обработке больших объемов данных

Таким образом, у меня есть «большое» количество «очень больших» ASCII-файлов числовых данных (всего гигабайт), и моя программа должна будет последовательно обрабатывать их полностью хотя бы один раз. Любой совет по хранению / загрузке данных? Я ...

6 ответов

Получить большой размер файла в C

Прежде чем кто-либо жаловался на «дубликат», я довольно тщательно проверял SO, но пока нет четкого ответа, хотя вопрос выглядит довольно простым. Я ищупортативный код C, который может предоставить размер файла, даже если такой файл больше 4 ...

5 ответов

Поддержка больших файлов в C ++

64-битный API-интерфейс файла отличается для каждой платформы. в окнах:_fseeki64 в Linux:fseeko в freebsd: еще один похожий вызов ... Как я могу наиболее эффективно сделать его более удобным и портативным? Есть ли полезные примеры?

7 ответов

Написание больших файлов с Node.js

Я пишу большой файл с помощью node.js, используязаписываемый поток [http://nodejs.org/docs/latest/api/streams.html#writable_Stream]: var fs = require('fs'); var stream = fs.createWriteStream('someFile.txt', { flags : 'w' }); var lines; while ...

1 ответ

Может ли кто-нибудь привести пример поиска, чтения и записи> 4 ГБ файла с помощью boost iostreams

Я читал, что boost iostreams предположительно поддерживает 64-битный доступ к большим файлам полупортативным способом. Их FAQ упоминает64-битные функции смещения [http://www.boost.org/doc/libs/1_39_0/libs/iostreams/doc/faq.html#offsets], но нет ...