FastAPI gunicorn ejecuta trabajos programados solo en un trabajador.
Tengo un servidor fastapi que se está ejecutando con 4 trabajadores a través de gunicorn.
Quiero ejecutar un trabajo en segundo plano / programado en solo uno (cualquiera) de los trabajadores en lugar de en los 4.
¿Cómo puedo asegurarlo?
davy.ai
Para garantizar que una tarea de fondo/programada se ejecute solo en un trabajador y no en los cuatro trabajadores de un servidor fastapi que se ejecuta a través de gunicorn, es necesario utilizar una cola de tareas externa o un planificador de tareas como Celery o APScheduler.
Estas herramientas externas le permiten definir la tarea o trabajo a ejecutar por separado del proceso del servidor web. Luego puede especificar que la tarea o trabajo solo debe ser ejecutado por un trabajador mediante la configuración de la cola de trabajadores o el planificador de trabajos.
Por ejemplo, en Celery, puede definir una tarea para ser ejecutada mediante la ejecución de un proceso de trabajador separado, que puede iniciarse con una concurrencia de 1, asegurando que la tarea solo sea ejecutada por un trabajador en cualquier momento.
En APScheduler, puede definir un trabajo para ejecutarse usando un planificador distribuido, que puede asegurar que el trabajo sea ejecutado solo por un trabajador a la vez mediante el uso de un recurso compartido como un servidor Redis.
Al utilizar una cola de tareas externa o un planificador de tareas, puede garantizar que las tareas o trabajos de fondo o programados se ejecuten de manera eficiente y solo por un trabajador, evitando duplicación o conflictos no deseados.