В рамках многих наших услуг нам нужно регулярно предоставлять клиентам различную статистическую информацию. Клиентам, арендующим выделенные серверы, требуется информация о потреблении трафика. Пользователям облачных серверов нужна статистика использования аппаратных и сетевых ресурсов, а пользователям облачного хранилища — статистика скачивания файлов.

Наиболее простым и наглядным способом представления статистических данных является построение графиков. Существует много специализированных программных решений, предназначенных для анализа статистических данных с последующей визуализацией.Мы стали искать подходящий инструмент; основным требованием при этом была высокая производительность. В результате этих поисков… Впрочем, обо всем по порядку. Начнем с небольшого теоретического вступления.

На работоспособность современного веб-сервиса влияют самые разнообразные факторы. В условиях постоянного роста количества данных и увеличения числа пользователей инфраструктура сервиса усложняется, и остро встает проблема отслеживания ее состояния. Имеющиеся средства мониторинга (например, Nagios или Icinga) во многих случаях оказываются недостаточными.

Одновременно с ростом инфраструктуры требуется обеспечивать масштабируемость системы мониторинга: количество проверок все время растет, отчеты становятся все более объемными… Отслеживание стабильности работы веб-сервиса в таких условиях отнимает все больше времени и средств.

Прекрасно понимая всю сложность описываемой ситуации, мы разработали услугу мониторинга сервисов для своих клиентов. Подробное её описание представлено ниже.