Resultados de la búsqueda a petición "multiprocessing"
Contando el número total de tareas ejecutadas en un multiprocesamiento. Grupo durante la ejecución
Me encantaría dar una indicación de la charla actual en total de que solo somos. Estoy trabajando en la agricultura y me gustaría saber el progreso actual. Entonces si enviara100 trabajos a10 procesadores, ¿cómo puedo mostrar cuál es el número ...
multiprocessing.dummy en Python no utiliza 100% de CPU
Estoy haciendo un proyecto de aprendizaje automático en Python, así que tengo que hacer una función de predicción paralela, que estoy usando en mi programa. from multiprocessing.dummy import Pool from multiprocessing import cpu_count ...
Depuración de subprocesos de Popen con PyCharm
Estoy tratando de depurar una aplicación Python que usa objetos psutil.Popen. Cuando inicio un subproceso, PyCharm reemplaza mi línea de comando con lo siguiente: python -m pydevd.py --multiproc --client 127.0.0.1 --port 52581 ...
C - significado de esperar (NULL) al ejecutar fork () en paralelo
En el siguiente código, ¿las horquillas realmente se ejecutan en paralelo o una tras otra? Cuál es el significado dewait(NULL) ? (El programa crea un n número de procesos secundarios, n se suministra a través de la línea de comando) int main ( ...
multiprocesamiento.Piscina: ¿Cuál es la diferencia entre map_async e imap?
Estoy tratando de aprender a usar Pythonmultiprocessing paquete, pero no entiendo la diferencia entremap_async yimap. Me di cuenta de que ambosmap_async yimap se ejecutan de forma asincrónica. Entonces, ¿cuándo debo usar uno sobre el otro? ¿Y ...
¿Cómo hago más rápidas las operaciones de gmpy array?
He estado teniendo problemas con la velocidad al intentar utilizar el módulo gmpy. import numpy as np import gmpy2 as gm N = 1000 a = range(N) %timeit [gm.sin(x) for x in a] # 100 loops, best of 3: 7.39 ms per loop %timeit np.sin(a) # ...
se aplica multiprocesamiento de pandas
Estoy tratando de usar el multiprocesamiento con el marco de datos de pandas, que es dividir el marco de datos en 8 partes. aplique alguna función a cada parte usando apply (con cada parte procesada en un proceso diferente). EDITAR: Aquí está la ...
Compartir datos globales estáticos entre procesos en una aplicación Gunicorn / Flask
Tengo una aplicación Flask que se ejecuta en Gunicorn, que usa el tipo de trabajador de sincronización con 20 procesos de trabajo. La aplicación lee muchos datos al inicio, lo que lleva tiempo y usa memoria. Peor aún, cada proceso carga su propia ...
Rendimiento no confiable descargando archivos de S3 con boto y multiprocesamiento.
Quiero descargar miles de archivos desde S3. Para acelerar el proceso probé Pythonmultiprocessing.Pool [https://docs.python.org/2/library/multiprocessing.html], pero el rendimiento es muy poco confiable. A veces funciona y es mucho más rápido que ...
¿Por qué puedo pasar un método de instancia a multiprocessing.Process, pero no a multiprocessing.Pool?
Estoy tratando de escribir una aplicación que aplique una función simultáneamente con unmultiprocessing.Pool. Me gustaría que esta función sea un método de instancia (para poder definirla de manera diferente en diferentes subclases). Esto no ...