Комментарии 6
Было бы интереснее почитать, как сделать масштабируемое и тиражируемое решение на ряд проектов и разработчиков. Правильное разделение сред и тд.
Привет, спасибо за статью.
Эта установка подходит для прода?
Почему не через докер?
Есть проблема, что умирает scheduler периодически(airflow в dockere), ставят ли еще один в проде?
На связи автор статьи.
Для прода подходит (само собой - придётся что-то подкрутить под себя).
Не через докер для того, чтобы наглядно и пошагово показать процесс, с докером будет выглядеть не так наглядно что происходит "под капотом".
Scheduler на моей практике чаще всего умирает из-за того, что в разделе не хватает места для логов - в таком случае необходимо настроить ротацию. Ставить ещё один не вижу смысла (может я и не прав, конечно) - вместо одного контейнера будут падать два. Нужно выяснить из-за чего падает контейнер и устранить причину.
Примите искреннюю признательность за такую интересную статью! Мы восхищены вашим инженерным талантом. Представленная статья написана красиво, технически точно и со вкусом. Статья продемонстрировала высокий уровень профессионального мастерства автора, а также поразила максимально простой подачей высокотехнологичных действий. Желаем вам успехов в реализации вас, как специалиста, а также много денег!
Знакомство с Apache Airflow: установка и запуск первого DAGа