Resultados de la búsqueda a petición "python-multiprocessing"
python pool apply_async y map_async no se bloquean en la cola completa
Soy bastante nuevo en Python. Estoy usando el módulo de multiprocesamiento para leer líneas de texto en stdin, convertirlas de alguna manera y escribirlas en una base de datos. Aquí hay un fragmento de mi código: batch = [] pool = ...
Tensorflow: pasar una sesión a un multiproceso de Python
Estoy usando tensorflow para preprocesar algunas imágenes grandes. Estaba teniendo un problema en el que la memoria colapsaba rápidamente. Decidí usar el multiprocesamiento en Python para que la memoria se liberara por completo ...
Python ejecuta cobertura en proceso interminable
Tengo un servidor web multiprocesado con procesos que nunca terminan, me gustaría verificar la cobertura de mi código en todo el proyecto en un entorno en vivo (no solo de las pruebas). El problema es que, dado que los procesos nunca terminan, ...
Python manager.dict () es muy lento en comparación con el dict regular
Tengo un dict para almacenar objetos: jobs = {} job = Job() jobs[job.name] = jobahora quiero convertirlo para usar manager dict porque quiero usar multiprocesamiento y necesito compartir este dict entre procesos mgr = multiprocessing.Manager() ...
Problema de decapado con python pathos
import pathos.multiprocessing as mp class Model_Output_File(): """ Class to read Model Output files """ def __init__(self, ftype = ''): """ Constructor """ # Create a sqlite database in the analysis directory self.db_name = 'sqlite:///' ...
Medición del progreso con el multiprocesamiento de Python y la función de mapa
El siguiente código que estoy usando para el procesamiento paralelo de CSV: #!/usr/bin/env python import csv from time import sleep from multiprocessing import Pool from multiprocessing import cpu_count from multiprocessing ...
Multiprocesamiento de arañas Scrapy en procesos paralelos
Hay varias preguntas similares que ya he leído en Stack Overflow. Desafortunadamente, perdí enlaces de todos ellos, porque mi historial de navegación se eliminó inesperadamente. Todas las preguntas anteriores no pudieron ayudarme. O bien, ...
¿El registro de Python admite el multiprocesamiento?
Me han dicho que el registro no se puede usar en Multiprocesamiento. Debe hacer el control de concurrencia en caso de que el multiprocesamiento altere el registro. Pero hice algunas pruebas, parece que no hay problema al usar el inicio de sesión ...
Compartir muchas colas entre procesos en Python
Estoy consciente demultiprocessing.Manager() y cómo se puede usar para crear objetos compartidos, en particular colas que se pueden compartir entre los trabajadores. Ahi estaesta ...
apio: los procesos demoníacos no pueden tener hijos
En Python (2.7) trato de crear procesos (con multiprocesamiento) en una tarea de apio (apio 3.1.17) pero me da el error: daemonic processes are not allowed to have childrenAl buscarlo en Google, descubrí que las versiones más recientes de billar ...