W Pika lub RabbitMQ, jak mogę sprawdzić, czy konsumenci obecnie się konsumują?
Chciałbym sprawdzić, czy aKonsument / Pracownik jest obecny, aby konsumowaćWiadomość Mam zamiar wysłać.
Jeśli nie maPracownik, Zacznę niektórych pracowników (zarówno konsumenci, jak i wydawcy są na jednej maszynie), a następnie publikujęWiadomości.
Jeśli istnieje taka funkcjaconnection.check_if_has_consumers
, Zaimplementowałbym to w ten sposób -
import pika
import workers
# code for publishing to worker queue
connection = pika.BlockingConnection(pika.ConnectionParameters(host='localhost'))
channel = connection.channel()
# if there are no consumers running (would be nice to have such a function)
if not connection.check_if_has_consumers(queue="worker_queue", exchange=""):
# start the workers in other processes, using python's `multiprocessing`
workers.start_workers()
# now, publish with no fear of your queues getting filled up
channel.queue_declare(queue="worker_queue", auto_delete=False, durable=True)
channel.basic_publish(exchange="", routing_key="worker_queue", body="rockin",
properties=pika.BasicProperties(delivery_mode=2))
connection.close()
Ale nie mogę znaleźć żadnej funkcjicheck_if_has_consumers
funkcjonalność wpika.
Czy jest jakiś sposób na osiągnięcie tego, używającpika? a może przezmówić doKrólik bezpośrednio?
Nie jestem całkowicie pewien, ale naprawdę myślęRabbitMQ byłby świadomy, że liczba konsumentów subskrybuje różne kolejki, ponieważ wysyławiadomości im i akceptujeacks
Właśnie zacząłemRabbitMQ 3 godziny temu ... wszelka pomoc jest mile widziana ...
tutaj jestworkers.py kod, który napisałem, jeśli to pomoże ...
import multiprocessing
import pika
def start_workers(num=3):
"""start workers as non-daemon processes"""
for i in xrange(num):
process = WorkerProcess()
process.start()
class WorkerProcess(multiprocessing.Process):
"""
worker process that waits infinitly for task msgs and calls
the `callback` whenever it gets a msg
"""
def __init__(self):
multiprocessing.Process.__init__(self)
self.stop_working = multiprocessing.Event()
def run(self):
"""
worker method, open a channel through a pika connection and
start consuming
"""
connection = pika.BlockingConnection(
pika.ConnectionParameters(host='localhost')
)
channel = connection.channel()
channel.queue_declare(queue='worker_queue', auto_delete=False,
durable=True)
# don't give work to one worker guy until he's finished
channel.basic_qos(prefetch_count=1)
channel.basic_consume(callback, queue='worker_queue')
# do what `channel.start_consuming()` does but with stopping signal
while len(channel._consumers) and not self.stop_working.is_set():
channel.transport.connection.process_data_events()
channel.stop_consuming()
connection.close()
return 0
def signal_exit(self):
"""exit when finished with current loop"""
self.stop_working.set()
def exit(self):
"""exit worker, blocks until worker is finished and dead"""
self.signal_exit()
while self.is_alive(): # checking `is_alive()` on zombies kills them
time.sleep(1)
def kill(self):
"""kill now! should not use this, might create problems"""
self.terminate()
self.join()
def callback(channel, method, properties, body):
"""pika basic consume callback"""
print 'GOT:', body
# do some heavy lifting here
result = save_to_database(body)
print 'DONE:', result
channel.basic_ack(delivery_tag=method.delivery_tag)
EDYTOWAĆ:
Muszę iść naprzód, więc oto obejście, które zamierzam podjąć, chyba że przyjdzie lepsze podejście,
Więc,RabbitMQ ma toApis zarządzania HTTP, działają po włączeniuwtyczka do zarządzania aw środku strony apis HTTP jest
/ api / connections - Lista wszystkich otwartych połączeń.
/ api / connections / name - Indywidualne połączenie. DELETEing zamknie połączenie.
Więc jeśli połączę mojePracownicy i mójProdukuje oba przez różnePołączenie imiona / użytkownicy, będę mógł sprawdzić, czyPołączenie pracownika jest otwarty ... (mogą wystąpić problemy, gdy pracownik umrze ...)
będzie czekać na lepsze rozwiązanie ...
EDYTOWAĆ:
właśnie znalazłem to w dokumentach rabbitmq, ale byłoby to hacky w python:
shobhit@oracle:~$ sudo rabbitmqctl -p vhostname list_queues name consumers
Listing queues ...
worker_queue 0
...done.
więc mógłbym zrobić coś takiego,
subprocess.call("echo password|sudo -S rabbitmqctl -p vhostname list_queues name consumers | grep 'worker_queue'")
hacky ... wciąż mam nadzieję, że pika ma jakąś funkcję pythona, żeby to zrobić ...
Dzięki,