Milyen komponensek alkotják az Apache Airflow architektúráját?

Архитектура Apache Airflow включает несколько ключевых компонентов:

• Scheduler (Планировщик) — отвечает за запуск задач (tasks) в соответствии с расписанием DAG.
• Executor (Исполнитель) — управляет выполнением задач, может быть локальным, Celery, Kubernetes и др.
• Web Server (Веб-сервер) — предоставляет UI для мониторинга и управления DAG.
• Metadata Database (База метаданных) — хранит состояние DAG, задачи, логи и другую информацию.
• Worker (Рабочие узлы) — выполняют задачи, если используется распределенный исполнитель (например, Celery).

Эти компоненты взаимодействуют для организации и управления workflow, обеспечивая масштабируемость и надежность.