Обновить
5
19
Александр Лопинцев@cldlss

Разработка сетевой инфраструктуры и мониторинга

Отправить сообщение

Эволюция сбора flow-статистики в Яндексе: архитектура, грабли и оптимизации

Уровень сложностиСредний
Время на прочтение10 мин
Охват и читатели6.9K

Привет, Хабр! На связи Саша Лопинцев, SRE в группе разработки сетевой инфраструктуры и мониторинга Yandex Infrastructure. Я очень люблю мониторинг — а когда дело касается видимости сетевого трафика, нам не обойтись без анализа flow‑данных. 

Сегодня расскажу, как и почему мы переехали с устаревшего flow‑коллектора на GoFlow2, реализовали запись в БД и через etcd решили проблемы с шаблонами. Новая система обрабатывает 85 тысяч пакетов статистики в секунду, обеспечивает отказоустойчивость и помогает создавать отчёты. Если вам интересно узнать чуть больше об архитектуре, экспериментах, ошибках и решениях, полезных для инфраструктурного мониторинга в продакшн‑среде, читайте далее.

Читать далее

Информация

В рейтинге
390-й
Зарегистрирован
Активность