Может ли кто-нибудь привести пример поиска, чтения и записи> 4 ГБ файла с помощью boost iostreams

Я читал, что boost iostreams предположительно поддерживает 64-битный доступ к большим файлам полупортативным способом. Их FAQ упоминает64-битные функции смещения, но нет примеров того, как их использовать. Кто-нибудь использовал эту библиотеку для обработки больших файлов? Очень помог бы простой пример открытия двух файлов, поиска их середин и копирования одного в другой.

Благодарю.

Ответы на вопрос(1)

Решение Вопроса
Краткий ответ

Просто включите

#include <boost/iostreams/seek.hpp>

и использоватьseek функционировать как в

boost::iostreams::seek(device, offset, whence);

где

device файл, поток, streambuf или любой объект, конвертируемый вseekable;offset является 64-битным смещением типаstream_offset;whence являетсяBOOST_IOS::beg, BOOST_IOS::cur или жеBOOST_IOS::end.

Возвращаемое значениеseek имеет типstd::streamposи его можно преобразовать вstream_offset с помощьюposition_to_offset функция.

пример

Вот длинный, утомительный и повторяющийся пример, в котором показано, как открыть два файла, выполнить поиск во внешнем размере> 4 ГБ и скопировать данные между ними.

ВНИМАНИЕ: Этот код создаст очень большие файлы (несколько ГБ). Попробуйте этот пример в ОС / файловой системе, которая поддерживает разреженные файлы. Linux в порядке; Я не проверял это на других системах, таких как Windows.

/*
 * WARNING: This creates very large files (several GB)
 * unless your OS/file system supports sparse files.
 */
#include <boost/iostreams/device/file.hpp>
#include <boost/iostreams/positioning.hpp>
#include <cstring>
#include <iostream>

using boost::iostreams::file_sink;
using boost::iostreams::file_source;
using boost::iostreams::position_to_offset;
using boost::iostreams::seek;
using boost::iostreams::stream_offset;

static const stream_offset GB = 1000*1000*1000;

void setup()
{
    file_sink out("file1", BOOST_IOS::binary);
    const char *greetings[] = {"Hello", "Boost", "World"};
    for (int i = 0; i < 3; i++) {
        out.write(greetings[i], 5);
        seek(out, 7*GB, BOOST_IOS::cur);
    }
}

void copy_file1_to_file2()
{
    file_source in("file1", BOOST_IOS::binary);
    file_sink out("file2", BOOST_IOS::binary);
    stream_offset off;

    off = position_to_offset(seek(in, -5, BOOST_IOS::end));
    std::cout << "in: seek " << off << std::endl;

    for (int i = 0; i < 3; i++) {
        char buf[6];
        std::memset(buf, '\0', sizeof buf);

        std::streamsize nr = in.read(buf, 5);
        std::streamsize nw = out.write(buf, 5);
        std::cout << "read: \"" << buf << "\"(" << nr << "), "
                  << "written: (" << nw << ")" << std::endl;

        off = position_to_offset(seek(in, -(7*GB + 10), BOOST_IOS::cur));
        std::cout << "in: seek " << off << std::endl;
        off = position_to_offset(seek(out, 7*GB, BOOST_IOS::cur));
        std::cout << "out: seek " << off << std::endl;
    }
}

int main()
{
    setup();
    copy_file1_to_file2();
}
 Xeningem03 сент. 2010 г., 15:45
В Windows XP 32-разрядная функция setup () не может создать файл размером более 2 ГБ в разделе NTFS. BOOST версия 1.39, MS VS 2008 Express.

Ваш ответ на вопрос