Stability: queue worker stopt na AMQP-fout terwijl probes groen blijven #201

Open
opened 2026-09-22 14:37:51 +00:00 by meshflows · 0 comments
Owner

Context

Stability review (2026-09-22).

Bevindingen

  • Medium. engine/services/orchestrator/app/queue_worker.py rond 199-226: één connect_robust en daarna async for message, zonder outer reconnect-loop. De RabbitMQ-trigger in rabbitmq/app/main.py heeft die loop wel.
  • Medium. Worker-probes zijn test -f /tmp/queue-worker-ready. Dat bestand wordt bij startup gezet en niet verwijderd bij disconnect. engine/deploy/k8s/orchestrator-worker-small-deployment.yaml rond 137-145.

Impact

Na een channel-fout stopt de consumer. De pod blijft Ready. Berichten stapelen op de queue.

Gewenste uitkomst

  • Zelfde reconnect-lus als de RabbitMQ-trigger.
  • Ready-file weghalen bij disconnect, of een probe die een recente consume-heartbeat eist.
## Context Stability review (2026-09-22). ## Bevindingen - **Medium.** `engine/services/orchestrator/app/queue_worker.py` rond 199-226: één `connect_robust` en daarna `async for message`, zonder outer reconnect-loop. De RabbitMQ-trigger in `rabbitmq/app/main.py` heeft die loop wel. - **Medium.** Worker-probes zijn `test -f /tmp/queue-worker-ready`. Dat bestand wordt bij startup gezet en niet verwijderd bij disconnect. `engine/deploy/k8s/orchestrator-worker-small-deployment.yaml` rond 137-145. ## Impact Na een channel-fout stopt de consumer. De pod blijft Ready. Berichten stapelen op de queue. ## Gewenste uitkomst - Zelfde reconnect-lus als de RabbitMQ-trigger. - Ready-file weghalen bij disconnect, of een probe die een recente consume-heartbeat eist.
Sign in to join this conversation.
No milestone
No project
No assignees
1 participant
Notifications
Due date
The due date is invalid or out of range. Please use the format "yyyy-mm-dd".

No due date set.

Dependencies

No dependencies set

Reference
MeshFlowsGPL/meshflows#201
No description provided.