Как не сойти с ума с Grafana Unified Alerting: настраиваем алерт и разбираем все грабли

[mnv]

Какая боль, какая боль... Активно пользуюсь графаной, но когда надо добавить новый алерт, то это настолько неудобно и нелогично, что просто руки опускаются. А потом ещё задача со звёздочкой подписаться на этот алерт. Там в самом деле сильно не хватает интерфейса для чайников, где можно просто добавить алерт а не вот это всё)

[PavelAnnin]

Спасибо за статью.

Из какого источника вы берете данные для своего ClickHouse? Экспортируете из какой то аналитики?

[Z55]

Алерты через UI...ну такое... Ставьте себе нормальный Alert Manager + OnCall, и алерты будете прописывать нормальными выражениями, а не этими А и В. Да и в целом, с ним куда приятней, чем с алертами внутри графаны.

[mnv]

Какой используете Alert Manager? Чем удобен?

[Z55]

Используем mimir + alertmanager, удобно тем, что не нужно тыкать по UI, а все изменения выполняются в yaml - файлах, в нормальном git-flow

[IOstream]

Проблема не в реализации Алертов в Графана, а в реализации интерфейса. Очень вероятно, что доля людей, которые разобрались и которым, тем более, нравится -- мала.

[suricat404]

Как же мне чертовски не хватало такой статьи несколько лет назад после обновления Grafana до 9-ки.. Если с Notification polices получилось более-менее быстро разобраться, то с шаблонами и "особыми пожеланиями" к ним от разных команд сложилась довольно долгая история.. Отдельный респект комьюнити за баг с отправкой сообщений о восстановлении - приходило только одно лишь "Resolved" без каких-либо подробностей.