Resultados da pesquisa a pedido "multiprocessing"

1 a resposta

Como selecionar um objeto ssl.SSLContext

Python 3.5 no Windows, tente o seguinte: import ssl, pickle, multiprocessing context = ssl.create_default_context() foo = pickle.dumps(context) pickle.loads(foo)Lança uma exceção: TypeError: __new__() missing 1 required positional argument: ...

1 a resposta

log python com multiprocessamento, logger raiz diferente no windows

Eu tentei fazer logon com multiprocessamento e, encontrado no Windows, vou obter um logger raiz diferente no processo filho, mas no Linux tudo bem. O código de teste: main.py: #!/usr/bin/env python # -*- coding: utf-8 -*- import logging ...

2 a resposta

Multiprocessamento Python 3: tamanho ideal de chunk

Como encontro o tamanho ideal de bloco paramultiprocessing.Pool instâncias? Eu usei isso antes para criar um gerador den objetos sudoku: processes = multiprocessing.cpu_count() worker_pool = multiprocessing.Pool(processes) sudokus ...

1 a resposta

Aipo: como limitar o número de tarefas na fila e parar de alimentar quando cheio?

Eu sou muito novo no Aipo e aqui está a pergunta que tenho: Suponha que eu tenha um script que deve buscar constantemente novos dados do DB e enviá-los aos trabalhadores usando o Aery. tasks.py # Celery Task from celery import Celery app = ...

2 a resposta

O Python manager.dict () é muito lento comparado ao dict regular

Eu tenho um ditado para armazenar objetos: jobs = {} job = Job() jobs[job.name] = jobagora eu quero convertê-lo para usar o comando dict, porque eu quero usar o multiprocessamento e preciso compartilhar esse dict entre os processos mgr = ...

3 a resposta

Tubo quebrado ao usar os gerenciadores de multiprocessamento Python (BaseManager / SyncManager) para compartilhar a fila com máquinas remotas

No último mês, tivemos um problema persistente com o pacote de multiprocessamento do Python 2.6.x quando tentamos usá-lo para compartilhar uma fila entre vários computadores (Linux) diferentes. Também fiz essa pergunta diretamente a Jesse Noller, ...

4 a resposta

A maneira mais fácil de ler arquivos csv com multiprocessamento no Pandas

Aqui está a minha pergunta. Com vários arquivos .csv (ou outros arquivos). Pandas é uma maneira fácil de lê-los e salvar emDataframe formato. Mas quando a quantidade de arquivos era enorme, desejo ler os arquivos com multiprocessamento para ...

5 a resposta

Compartilhando um objeto complexo entre processos Python?

Eu tenho um objeto Python bastante complexo que preciso compartilhar entre vários processos. Eu inicio esses processos usandomultiprocessing.Process. Quando eu compartilho um objeto commultiprocessing.Queue emultiprocessing.Pipe nele, eles são ...

3 a resposta

Em quais núcleos de CPU meus processos Python estão em execução?

A configuração Eu escrevi um software bastante complexo em Python (em um PC com Windows). Meu software inicia basicamente duas conchas de intérpretes Python. O primeiro shell inicia (suponho) quando você clica duas vezes nomain.py Arquivo. ...

2 a resposta

A classe registrada BaseManager do multiprocessamento python perdeu a conexão imediatamente após Ctrl-C

Estou enfrentando alguns problemas que, suspeito, são uma limitação do meu programa python para lidar corretamente, meu programa não conseguiu chamar métodos de uma classe registrada de BaseManager imediatamente após pressionar Ctrl-C, até mesmo ...