Система охлаждения NORD-4.

Часть 1. Мониторинг инженерной инфраструктуры в дата-центре. Основные моменты.
Часть 2. Как устроен мониторинг энергоснабжения в дата-центре.
Часть 3. Мониторинг холодоснабжения на примере дата-центра NORD-4.
Часть 4. Сетевая инфраструктура: физическое оборудование.

Мы уже рассказывали о том, что такое система мониторинга и почему ее необходимо проектировать на этапе строительства. В статье «Мониторинг инженерной инфраструктуры в дата-центре» мы рассмотрели общие ситуации, в которых необходимо проводить комплексный мониторинг, а также рассказали об особенностях наших систем.

Сегодня поговорим о том, как устроена система мониторинга холодоснабжения на примере дата-центра NORD-4. Перед прочтением рекомендуем ознакомиться со статьей о том, как создавалась система холодоснабжения.

Лето 2017 года выдалось богатым на ураганы. А вот у нас тоже был случай. Ровно 7 лет назад наш первый дата-центр на Боровой пережил ураган, который похоронил чиллеры под слоем 10 тонн железа, прилетевшего с соседней крыши. Душещипательные фотографии искореженных чиллеров разошлись по интернету уже давно, а история про восстановление ЦОДа, оставшегося без холода, никогда не публиковалась. Решил поднять архивы и восполнить пробел.

Эксплуатация дата-центра, серверной чем-то напоминает езду по автомобильной дороге. Когда дорога пустая, то можно рискнуть и ездить против правил, и ничего страшного не случится. Но как только на дороге появляется много машин, любой неверный маневр, незамеченная яма или колдобина могут привести к аварии. Похожая ситуация с дата-центрами и серверными: чем больше загруженность, тем выше цена ошибки.

Сегодня расскажу про ошибки в проектировании, строительстве и эксплуатации, из-за которых в дата-центре может произойти авария.

Приходите 31 мая к нам семинар, и мы расскажем, как безболезненно обновить давно работающий дата-центр.
У нас осталось всего несколько мест, и мы будем рады видеть ИТ-директоров, инженеров и всех тех, кто занимается вопросами эксплуатации серверных и корпоративных дата-центров.

О чем поговорим:

• Плановые замены: график и организация работ;
• Модернизация и увеличение мощности: дополнительные кондиционеры, распределительные щиты, ИБП;
• Моральное устаревание оборудования: категории оборудования и средние «дистанции»;
• Аварийные замены: от PDU и вентиляторов до чиллеров и транcформаторов.

После семинара для всех участников экскурсия по дата-центру OST и вкусный ланч.

На календаре май, а значит – «серая зона» праздников. Каждый, у кого выходил из строя сервис в праздники, знает, что такое две недели, в которых выходных больше, чем рабочих дней. По такому случаю рассказываем, как устроена наша техподдержка и что происходит с заявками, пришедшими в ночь с субботы на воскресенье. В конце статьи – небольшой чек-лист по составлению запроса в техподдержку. Чтобы на том конце провода вас правильно поняли и быстро смогли помочь.

Не так давно совместно с Digital Security мы провели пентест своей корпоративной wi-fi-сети. Сегодня с коллегами расскажем, что может угрожать беспроводной сети, построенной на базе WPA2-Enterprise с аутентификацией по доменному аккаунту, и как от этого защититься.

UPD. Обновили видеотур по уже заполненному дата-центру.

У нас для вас пятничный видеотур по дата-центру NORD-4. Дата-центр располагается на Коровинском шоссе в Москве. По проекту будет вмещать 2016 стоек. Сейчас в эксплуатации 1008 стоек, в апреле заработает еще 504.

Если хочется подробностей, то не так давно подробно рассказывали про устройство ЦОДа здесь.

Проходим, не стесняемся.

Часть 1. Мониторинг инженерной инфраструктуры в дата-центре. Основные моменты.
Часть 2. Как устроен мониторинг энергоснабжения в дата-центре.
Часть 3. Мониторинг холодоснабжения на примере дата-центра NORD-4.
Часть 4. Сетевая инфраструктура: физическое оборудование.

Продолжаем серию статей про работу систем мониторинга инженерной инфраструктуры в наших дата-центрах. В первой части разобрали теоретические моменты, сегодня обратимся к практике. Начнем с самой критичной системы – энергоснабжения. Перед прочтением рекомендуем освежить знания про устройство электропитания в дата-центре.


Одна из схем для мониторинга системы энергоснабжения в дата-центре OST-2.

Сегодня хотим рассказать, как мы отбираем и готовим для своих дата-центров дежурных инженеров. Эта позиция важна для нас по двум причинам:

• это наша первая линия технической поддержки. Дежурные следят за стеной мониторинга, общаются с клиентами, которые приходят в наши дата-центры, помогают устанавливать новое оборудование. Их четкая работа, доброжелательное отношение к клиентам, внимание к мелочам значат для нашего сервиса не меньше, чем работа инфраструктуры дата-центра: превысил время ответа на запрос, позволил пройти в дата-центр без бахил, просто не поздоровался – минус в нашу карму.
  
  
• это наша “кузница кадров”. Некоторые ребята потом вырастают до ведущих инженеров профильных технических групп и даже до руководителей отделов.

Но обо всем по порядку.

1 марта приглашаем в дата-центр OST на бесплатный семинар, посвященный созданию и обслуживанию веб-проектов в облаке.

О чем поговорим:

• Архитектура веб-проекта: о чем нужно помнить на этапе проектирования.
• График технического обслуживания.
• Работа с разработчиками.
• Как правильно рассчитать ресурсы.
• Масштабирование веб-проекта в облаке.
• Сезонная нагрузка: чего бояться и как подготовиться.
• Пользовательские аккаунты и соблюдение ФЗ-152.
• Безопасность на уровне архитектуры: разграничение сетей и зон ответственности.
• Как выбирать провайдера.

По традиции в конце семинара экскурсия по дата-центру OST и вкусный ланч :)

Приглашаем на семинар 21 февраля в дата-центр OST. У нас осталось всего несколько мест, и мы будем рады видеть ИТ-директоров, специалистов и всех тех, кто по роду деятельности занимается составлением бюджета на эксплуатацию корпоративного дата-центра или серверной.

На семинаре расскажем:

• Из чего складывается бюджет на эксплуатацию: основные статьи и пример «калькулятора» для расчета
• На чём можно экономить, а на чём – не стоит
• Что необходимо учесть при планировании бюджета на месяц, квартал и финансовый год

После семинара для всех участников экскурсия по дата-центру OST и вкусный ланч.

Часть 1. Мониторинг инженерной инфраструктуры в дата-центре. Основные моменты.
Часть 2. Как устроен мониторинг энергоснабжения в дата-центре.
Часть 3. Мониторинг холодоснабжения на примере дата-центра NORD-4.
Часть 4. Сетевая инфраструктура: физическое оборудование.

Статью про устройство мониторинга в дата-центре мы обещали еще в сентябре. Тема обширная, одной статьей тут не отделаться, поэтому решили сделать серию постов. Начнем с базовых моментов, о которых важно помнить при проектировании и настройке мониторинга. Затем подробно остановимся на основных инженерных системах (энергоснабжение и холодоснабжение) и расскажем про инструменты для их мониторинга.

В статьях будем делиться своим опытом, тем, что пробовали и используем сами в собственных дата-центрах. На полноту не претендуем, зато все будет из жизни, а не из учебника.

В комментариях можно попробовать повлиять на редакторскую политику и предложить для рассмотрения интересные именно для вас аспекты мониторинга.



С организационными моментами вроде разобрались, приступим к азбуке мониторинга в редакции DataLine :). Итак, сегодня речь пойдет о концептуальных вещах, которые нужно учитывать на этапе проектирования, внедрения и настройки системы мониторинга. Сабж рассмотрим на примере нашего мониторинга, построенного на базе Nagios и Cacti.

В предыдущих постах мы делились инструкциями по настройке резервного копирования и репликации на базе Veeam. Сегодня мы хотим рассказать про резервное копирование средствами Commvault. Инструкций не будет, зато расскажем, что и как уже бэкапят наши клиенты.


СХД системы резервного копирования на базе Commvault в дата-центре OST-2.

Сегодня мы продолжаем говорить о точке обмена трафиком DataLine-IX. Первая часть была посвящена устройству нашей точки обмена трафиком. В этом посте расскажем про пару инструментов, которые пригодятся ее участникам в работе.


Одно из помещений Meet-Me-Room на площадке OST.

В 90-е, когда российский интернет только зарождался, провайдерам из одного города приходилось обмениваться трафиком через Европу и платить за него транзитным и вышестоящим операторам (аплинкам). Конечный пользователь в итоге получал высокие цены на доступ в Интернет, ограничения по объему доступного трафика, большим временем отклика веб-ресурсов. Чтобы не гонять национальный трафик по заграничным городам и весям, местные провайдеры стали объединяться и создавать точки обмена трафиком в крупных городах.

Сегодня речь пойдет о них: расскажем, зачем нам понадобилась собственная точка обмена трафиком DataLine-IX, как она устроена, и поделимся первыми результатами.


Провайдеры ISP-A и ISP-B обмениваются трафиком своих сетей через точку обмена трафиком. Без нее обмен происходил бы через “большой” Интернет.

16 ноября вышел Veeam Availability Suite 9.5. После релиза новые возможности появились не только у пользователей, но и у сервис-провайдеров. Главная новость для нас – это портал самообслуживания для резервного копирования виртуальной инфраструктуры на базе VMware vCloud Director.

Мы уже развернули портал, и он доступен всем, кто арендует ресурсы в облаке CloudLine, пользуется нашим резервным копированием и имеет лицензию Veeam Enterprise Plus. Теперь, чтобы поставить на бэкап виртуальную машину, изменить расписание резервного копирования или восстановить нужную виртуальную машину, необязательно обращаться в службу технической поддержки DataLine.
Ниже расскажем, как это все это провернуть самостоятельно с помощью Self-Service Backup Portal.

Создание задания на резервное копирование
Восстановление виртуальной машины
Восстановление отдельных файлов виртуальной машины

У нас прошла ровно половина курса “Управление инженерной инфраструктурой дата-центра”. Так получалось, что определенные темы звучали почти на каждом семинаре, – не важно, рассказывали мы нашим слушателям про подготовку дата-центра к лету, работу с подрядчиками или выстраивание собственной службой эксплуатации. Мы решили собрать небольшой гайд по самым животрепещущим темами и рекомендациям из нашего опыта.

В конце сентября проект системы холодоснабжения дата-центра NORD-4 получил премию Russian Data Center Awards 2016 в номинации «Лучшее решение в области инженерных систем». Сегодня мы расскажем в деталях, как создавалась система охлаждения самого большого дата-центра в России.

KVM over IP, или просто IP KVM, – способ удаленного подключения к консоли сервера по протоколу TCP. Без него не обойтись, когда штатный удаленный доступ через Интернет (RDP, SSH) пропадает, сервер нужно срочно перезагрузить или переустановить ОС.

Обычно в дата-центрах IP KVM — это отдельная услуга, на которой часто экономят при заказе colocation или dedicated-серверов. Когда при форс-мажоре клиент все-таки обращается за IP KVM, то доступ к консоли приходится ждать: провайдеру нужно проложить кроссировку, организовать и настроить отдельный интернет-канал до стойки, где располагается пострадавший сервер. Для таких экстренных ситуаций мы и сделали Wi-Fi-вариант IP KVM. Получилось сердито, но эффективно.

Приглашаем 27 октября на семинар «Эксплуатация дата-центра: что нужно делать самим».

О том, как выстроить работу собственной службы эксплуатации в дата-центре или простой серверной, расскажет Кирилл Шадский. С 2012 по 2015 год он заведовал службой эксплуатации самой большой сети коммерческих дата-центров в России.

О чем поговорим:

• Функции и задачи: аутсорсить нельзя я сама;
• Штат: сколько человек вам нужно и кто все эти люди;
• Как оценить работу внутренних служб;
• Инструкции и регламенты: что необходимо формализовать и как это сделать, чтобы оно действительно работало.

Для всех участников семинара в конце семинара экскурсия по дата-центру OST и вкусный ланч :)