Привет!

У нас есть огромные ночные отчёты по продуктовым метрикам, которые с утра попадают их владельцам. Пару лет назад они собирались обычным Cron'ом, но это оказалось очень нестабильной историей. Cron требует учёта определенных нюансов и дисциплины: если отчёт не собрался, то нужно перезапустить скрипт. А не собраться он может по многим причинам: одна из MySQL-баз не ответила, или не ответил опрашиваемый сервис, или сервер, на котором работает Cron, ночью перезагружался или вышел из строя. В большинстве своём такие отчеты создавались аналитиками, которые обычно всего этого не учитывали. Потому что они аналитики и это не их задача. Поэтому мы начали искать варианты, которые упростят жизнь всем.

И нашли.

В финальном решении используется планировщик Airflow с его возможностью взаимодействия с кластером Kubernetes. Система получилась гибкая и надежная и упрощает жизнь конечным потребителям. Для разработки таких систем есть мы, техническая команда из четырёх человек, называемая Data Team, а конечные потребители – аналитики, продакт-менеджеры и техлиды.

1. С одной стороны — ровно по той же цене, что в кассе;
2. С другой — чтобы точно обошлось без злоупотребления типа «вижу контролёра в двух шагах — покупаю билет»;
3. Быстро, удобно и надёжно.

Самое важное:

• Растут цены на авиатопливо. В аэропорту Екатеринбурга на 62,1%, в Домодедово — на 33,4%, в Иркутске — на 28,1%, во Владивостоке — на 20,4% и в Петербурге — на 18%. Это с одной стороны, с другой наша аналитика показывала, что цены на авиабилеты падают к прошлому году (скорее всего, из-за желания компаний хоть как-то получить ликвидные средства и упавшей покупательской способности населения). Изменение цен на топливо больше сезонного скачка, и дальше нас ждёт интересный сюжет.
• Зимняя Универсиада, которая должна была пройти в Швейцарии с 21 по 31 января 2021, перенесена. Новых дат пока нет, но это уже толстый намёк, что 31 января — это не предел окукливания Европы.
• В начале месяца открылось авиасообщение с Великобританией, Танзанией и Турцией. В Лондоне наших граждан ждал карантин, а в Танзанию до сих пор нет прямого рейса, хотя в теории граница открыта. Во многие страны можно попасть с пересадкой через Стамбул или Лондон, вот список. Первые рейсы в Турцию несколько раз внезапно отменялись, но сейчас Турция остаётся наиболее стабильным направлением для полётов. А ещё турецкая лира продолжает падать, и теперь отдыхать выгоднее. 3 сентября подписали распоряжение о возобновлении авиасообщение с Египтом (Каир), ОАЭ (Дубай) и Мальдивами (аэропорт Велана).
• В Бейруте теперь нет порта. 4 августа в морском порту ливанской столицы произошёл мощный взрыв. Это была аммиачная селитра, которую хранили ненадлежащим образом. Около 2750 тонн удобрения (или взрывчатки, как посмотреть) лежало на складе шесть лет.
• Ростуризм подсчитал, что россияне приобрели туры по стране на 1,4 млрд рублей с начала запуска программы «кешбэк за тур по России» (это когда возвращали от 5 до 15 тысяч при оплате картой «МИР» отелей и туров из госсписка). Могут провести ещё одну подобную акцию или вообще сделать её на постоянной основе. Планировалось по прикидкам 3 млн участников, купили туры 50 тысяч.