Результаты поиска по запросу "multiprocessing"

3 ответа

Общая память в многопроцессорной обработке

У меня есть три больших списка. Первый содержит битовые массивы (модуль bitarray 0.8.0), а два других содержат массивы целых чисел. l1=[bitarray 1, bitarray 2, ... ,bitarray n] l2=[array 1, array 2, ... , array n] l3=[array 1, array 2, ... , ...

2 ответа

Как правильно обрабатывать (в Python) IOError: [Errno 4] Прерванный системный вызов, вызванный multiprocessing.Queue.get

Когда я использую multiprocessing.Queue.get, я иногда получаю исключение из-за EINTR. Я точно знаю, что иногда это происходит без уважительной причины (я открываю другую панель в буфере tmux), и в таком случае я хотел бы продолжить работу ...

1 ответ

Профилирование многопроцессорного пула Python

Я пытаюсь запустить cProfile.runctx () для каждого процесса в многопроцессорном пуле, чтобы получить представление о узких местах многопроцессорности в моем источнике. Вот упрощенный пример того, что я пытаюсь сделать: from multiprocessing ...

ТОП публикаций

1 ответ

Почему многопроцессорный модуль Python импортирует __main__ при запуске нового процесса в Windows?

Я играю с библиотекой для моих начинающих учеников и использую модуль многопроцессорной обработки в Python. Я столкнулся с этой проблемой:импорт и использование модуля, который использует многопроцессорность, не вызывая бесконечный цикл в ...

1 ответ

Python: многопроцессорность и массив c_char_p

Я запускаю 3 процесса, и я хочу, чтобы они поместили строку в общий массив,по индексу, соответствующему процессу (я). Посмотрите на код ниже, сгенерированный вывод: ['test 0', None, None] ['test 1', 'test 1', None] ['test 2', 'test 2', 'test ...

1 ответ

Как использовать многоядерный питон с процессом PyQt4?

Я пишу приложение на pyqt4, которое должно читать и анализировать много XML-файлов. Выполненный однопоточным, требуется некоторое время, чтобы выполнить весь этот анализ и создать тысячи объектов python, соответствующих этому входящему xml. Я ...

2 ответа

Python Multiprocessing хранит данные до дальнейшего вызова в каждом процессе

У меня есть большой объект типа, который не может быть разделен между процессами. У него есть методы для его создания и работы с его данными. Текущий способ, которым я делаю это, - я сначала создаю экземпляр объекта в главном родительском ...

2 ответа

Python 2.6 отправляет объект соединения через очередь / канал / и т. Д.

Даноэтот баг (Python Issue 4892) [http://bugs.python.org/issue4892]это приводит к следующей ошибке: >>> import multiprocessing >>> multiprocessing.allow_connection_pickling() >>> q = multiprocessing.Queue() >>> p = multiprocessing.Pipe() >>> ...

1 ответ

multiprocessing.Pool порождает новый childern после terminate () в Linux / Python2.7?

У меня есть исполняемый файл, который мне нужно запускать очень часто, с разными параметрами. Для этого я написал небольшую оболочку Python (2.7), используя многопроцессорный модуль, следуя приведенному ...

3 ответа

многопроцессорная обработка с большими данными

Я используюmultiprocessing.Pool() распараллелить некоторые тяжелые вычисления. Функция target возвращает много данных (огромный список). У меня заканчивается ОЗУ. БезmultiprocessingЯ бы просто изменил целевую функцию на ...