• Когда деревья были большими: как маленький дата-центр ураган пережил



      Лето 2017 года выдалось богатым на ураганы. А вот у нас тоже был случай. Ровно 7 лет назад наш первый дата-центр на Боровой пережил ураган, который похоронил чиллеры под слоем 10 тонн железа, прилетевшего с соседней крыши. Душещипательные фотографии искореженных чиллеров разошлись по интернету уже давно, а история про восстановление ЦОДа, оставшегося без холода, никогда не публиковалась. Решил поднять архивы и восполнить пробел.

      Читать дальше →
    • 10-гигабитный Ethernet: советы новичку



        Вдохновившись интернет-запросами в стиле «как сделать спиннер из картонки», я решил рассказать о том, что близко мне: как самому построить 10-гигабитную сеть. Гигабитный Ethernet вопросов уже не вызывает – справится даже школьник: потребуется коммутатор, медная витая пара и привычные RJ-45 разъемы.

        А если хочется больше? Например, 10-гигабитное соединение для небольшого офиса или серверной. Какое оборудование понадобится и как его подключать – просто и по шагам в моей сегодняшней статье.
        Читать дальше →
      • Дата-центр NORD на Коровинском шоссе

          Знакомьтесь, это дата-центр NORD на Коровинском шоссе.
          ЦОД состоит из трех корпусов (NORD 1, NORD 2, NORD 3) и на сегодняшний день является самым масштабным объектом компании DataLine. Общая площадь всех корпусов дата-центров NORD 7636 кв. м., на таких пространствах с легкостью разместятся 1280 стоек в 8 машинных залах.

          Панорамный вид на локацию NORD: NORD 2 (серый) и NORD 1, тот, что у серого под боком. Общая площадь NORD 2 — 1713 кв. м, количество стойко-мест — 474. Общая площадь NORD 1 — 1320 кв. м, количество стойко-мест – 284. А серый корпус в стороне – это NORD 3, который был запущен в этом году. Общая площадь — 1880 кв. м, количество стойко-мест — 426. Там же, где котлован (сейчас уже залит фундамент), строится новый корпус NORD 4 общей площадью 11700 кв. м и на 2000 стоек. Запуск первых машинных залов NORD 4 запланирован на первую половину 2014 года.

          Читать дальше →
        • Как строятся оптоволоконные сети

            Всем привет! Меня зовут Дмитрий, я занимаюсь проектированием и строительством волоконно-оптических линий связи (ВОЛС) в DataLine. Сегодня расскажу, как мы создаем оптические трассы для наших клиентов и как устраняем аварии.


            Монтажник укладывает волокна двух кабелей в оптической муфте.
            Читать дальше →
          • Чек-лист неприятностей, которые могут случиться при переезде



              Совсем недавно мы открыли облако в Санкт-Петербурге. Оборудование для него перевозили из Москвы. Готовя этот переезд, я вспомнил о многих историях и «граблях» из моего опыта и решил подготовить небольшую обзорную статью на эту тему.

              В формате чек-листа, сдобренного примерами из жизни, расскажу, какие неожиданности и подводные камни могут подстерегать новичков при переезде и монтаже серверного оборудования на новой территории. Для наглядности использовал фотографии с нашего монтажа в Санкт-Петербурге.

              Заходите под кат, поговорим о том, как переехать и не сойти с ума.
              Читать дальше →
            • 7 популярных ошибок при подключении оборудования



                Не хотелось бы никого расстраивать, но даже самый “нарядный” ЦОД — с резервированием по схеме N в кубе и вообще ваш собственный — еще не гарантия бесперебойной работы оборудования: это самое оборудование, прежде всего, нужно правильно подключить.

                “Спасибо, Кэп!” — снисходительно улыбнется мой читатель, а я ему отвечу: не стоит благодарностей, сходите лучше в ЦОД и проверьте еще раз ваши стойки. Да-да, те самые, с которыми сто лет как все в порядке. Вы не поверите, как часто именно с такими вот “беспроблемными” стойками и случается прискорбное. Я даже чеклист набросал.
                Итак, что НЕ должно встретиться вам на этой послеобеденной прогулке:
                Читать дальше →
                • +34
                • 20,7k
                • 4
              • Если очень хочется: 10-гигабит на меди



                  Всем привет! Меня зовут Александр, я сетевой инженер в компании DataLine. Сегодня я продолжу тему 10-гигабитного Ethernet-соединения для новичков. В комментариях к прошлой статье справедливо заметили, что мы не раскрыли тему меди. Постараюсь исправить этот пробел.

                  Сразу оговорюсь, что медь для 10-гигабит используется сильно реже, чем оптика и в исключительных случаях. Такое решение будет стоить дороже и по передаче сигнала ограничено короткими расстояниями.

                  Но есть случаи, в которых медная топология встречается:
                  — Вендор подогнал оборудование под медь «за недорого» — не пропадать же добру!
                  — «Там, где идет строительство или подвешен груз», оптика не всегда выдерживает условия среды. Медный кабель более износостойкий и используется в таких случаях.
                  — Коммутация серверов. Подключение между серверами требует прочных кабелей — еще бы, их будут частенько переключать. К тому же у серверов чаще всего нет портов под оптику.

                  Как видите, причины есть. Поэтому чтобы не попасть впросак, когда вам придется соединять оборудование медными кабелями, читайте мой короткий гайд.
                  Читать дальше →
                • Ошибки в проекте дата-центра, которые вы ощутите только на этапе эксплуатации

                    Ошибки в проекте дата-центра — это бомба замедленного действия. Дата-центр построят, сдадут в эксплуатацию и он даже будет работать, но придет час, и начнут вылезать проблемы. В лучшем случае просчеты в проекте доставят неудобства инженерам службы эксплуатации, в худшем — поставят под вопрос работу дата-центра. Только вот будет поздно пить Боржоми: строители с подписанным актом приемки уже сделали ручкой, да и сам проект не подразумевает маневров.

                    Мы отобрали самые горькие ошибки в проектах дата-центров, с которыми мы столкнулись за восемь лет проектирования, строительства и эксплуатации дата-центров. Открываем хит-парад.


                    Читать дальше →
                  • Как тестируют ДГУ в дата-центре

                      В эксплуатации дата-центров мы уделяем тестированию инженерных систем и оборудования много внимания. Один из самых важных тестов – это запуски дизель-генераторных установок (ДГУ). Эти испытания помогают проверить работоспособность сразу нескольких инженерных систем.

                      ДГУ отвечают за гарантированное энергоснабжение. В случае перебоев с городским питанием на них ложится вся нагрузка дата-центра. Питание от ДГУ обычно называют резервным, но относиться к нему стоит как к основному: только этим видом энергоснабжения мы можем управлять. Это еще одна причина, почему тесты ДГУ так нужны.

                      На всех площадках у нас работает суммарно 30 ДГУ мощностью от 1200 до 1750 кВт. Сегодня расскажем, как мы тестируем ДГУ в своих дата-центрах и на что обращаем внимание в процессе. Надеемся, что наш опыт будет полезен и обладателям небольших серверных.

                      Перед прочтением рекомендуем пробежаться по нашей прошлой статье и освежить знания об устройстве электроснабжения в дата-центрах.


                      ДГУ в помещении и в контейнерном исполнении.
                      Читать дальше →
                      • +27
                      • 7,9k
                      • 7
                    • Путь электричества в дата-центре

                        Система энергоснабжения — одна из самых критических составляющих инженерной инфраструктуры дата-центра. Без электричества дата-центр за доли секунды может превратиться в бесполезное здание с грудой простаивающего ИТ-оборудования. Чтобы такого не случалось, дата-центр имеет на борту дизельные генераторы и источники бесперебойного питания.

                        Сегодня подробно поговорим о системе энергоснабжения дата-центра: узнаем, какой путь проходит электричество до стойки и что происходит, когда в ЦОДе пропадает городское электричество. Сабж разберем на примере одного из наших дата-центров.

                        Читать дальше →
                      • Игры в тетрис, или что такое capacity management в дата-центре


                          Зал дата-центра NORD-4 в 2016 году.

                          Вот пустой машинный зал в дата-центре. Думаете, стойку можно поставить в любое место? Если бы все было так просто!

                          Меня зовут Алексей, я занимаюсь capacity management в дата-центрах DataLine. Сегодня расскажу, что правильно расставлять стойки в зале – это целая наука, а иногда и искусство.

                          Что такое capacity management?


                          У машинного зала в дата-центре три главных ресурса: место, электропитание и холод.
                          Все эти три ресурса должны расходоваться равномерно и заканчиваться одновременно. Собственно за этим и следит человек, занимающийся capacity management.

                          Если размещать оборудование как попало, то можем оказаться в следующих неприятных ситуациях:
                          Читать дальше →
                          • +26
                          • 3,3k
                          • 7
                        • Вредные советы по настройке резервного копирования и несколько баек

                            Если настроил резервное копирование, не забил, не сэкономил — уже молодец. Но бэкап еще нужно уметь правильно готовить.

                            Лично у меня ощущение, что некоторые администраторы своей настольной книгой сделали специздание Остера с вредными советами по настройке бэкапа для оптимистов, не верящих в закон Мерфи.

                            Сегодня решил выложить свой короткий хит-парад с реальными историями, с которыми приходилось сталкиваться за время работы на стороне сервис-провайдеров и клиентов. После каждого такого случая виновник торжества остро чувствует, что ему в компании больше не рады, и понимает, что самое время обновить резюме на ХХ.

                            Читайте и мотайте на ус.

                            Читать дальше →
                          • VMware NSX для самых маленьких. Часть 4. Настройка маршрутизации

                            • Tutorial


                            Часть первая. Вводная
                            Часть вторая. Настройка правил Firewall и NAT
                            Часть третья. Настройка DHCP

                            NSX Edge поддерживает статическую и динамическую (ospf, bgp) маршрутизацию.
                            Первоначальная настройка
                            Статическая маршрутизация
                            OSPF
                            BGP
                            Route Redistribution
                            Читать дальше →
                          • Экскурсия по дата-центру NORD-4

                              Сегодня отправимся гулять по самому большому коммерческому дата-центру в России — NORD-4. По пути расскажем, как все устроено в дата-центре TIER III.

                              Читать дальше →
                            • Виртуальные Check Point'ы: чек-лист по настройке



                                Многие клиенты, арендующие у нас облачные ресурсы, используют виртуальные Check Point’ы. С их помощью клиенты решают различные задачи: кто-то контролирует выход серверного сегмента в Интернет или же публикует свои сервисы за нашим оборудованием. Кому-то необходимо прогонять весь трафик через IPS blade, а кому-то хватает Check Point в роли VPN-шлюза для доступа к внутренним ресурсам в ЦОДе из филиалов. Есть и те, кому нужно защитить свою инфраструктуру в облаке для прохождения аттестации по ФЗ-152, но об этом я расскажу как-нибудь отдельно.

                                По долгу службы я занимаюсь поддержкой и администрированием Check Point'ов. Сегодня расскажу, что нужно учесть при разворачивании кластера из Check Point'ов в виртуальной среде. Затрону моменты уровня виртуализации, сети, настроек самого Check Point'а и мониторинга.
                                Не обещаю открыть Америку – многое есть в рекомендациях и best practices вендора. Но их же никто не читает), поэтому погнали.
                                Читать дальше →
                                • +19
                                • 2,7k
                                • 6
                              • VMware NSX для самых маленьких. Часть 3. Настройка DHCP

                                • Tutorial


                                Часть первая. Вводная
                                Часть вторая. Настройка правил Firewall и NAT

                                DHCP – сетевой протокол, позволяющий вашим виртуальным машинам автоматически получать IP-адрес и другие параметры, необходимые для работы в сети TCP/IP.

                                В NSX Edge есть три опции настроек DHCP:

                                1. DHCP pool – создание пула адресов, которые будут выдаваться автоматически клиентам DHCP;
                                2. DHCP binding – привязка конкретного IP-адреса к определенному mac-адресу;
                                3. DHCP Relay – использование стороннего DHCP-сервера, выдающего IP-адреса серверам, которые находятся в других подсетях (отличных от DHCP-сервера).
                                Читать дальше →
                                • +19
                                • 3,5k
                                • 2
                              • Как вести сложные технические проекты, не нанимая PMщиков: опыт DataLine

                                  DataLine начинала с традиционных colocation и телекома. Потом к ним добавились облачные вычисления. Сейчас мы администрируем инфраструктуру, базы данных, сервисы информационной безопасности, приложения и целые веб-проекты. Вместе с числом услуг выросло и наше производство – так мы называем инженерные отделы компании.

                                  2009
                                  2019
                                  Группа сети
                                  Дежурные инженеры
                                  Отдел эксплуатации инфраструктуры

                                  Группа сети
                                  Группа виртуализации
                                  VMware
                                  Группа виртуализации
                                  Hyper-V
                                  Группа резервного копирования
                                  Группа Microsoft
                                  Группа мониторинга
                                  Группа Unix
                                  Группа DBA
                                  Центр киберзащиты
                                  Отдел управления внешними дата-центрами
                                  Дизайн-центр
                                  Отдел архитектурных решений
                                  Группа разработки ПО
                                  Отдел эксплуатации инфраструктуры
                                  Дежурные инженеры
                                  Служба технической поддержки
                                  Небольшой филиал #10yearschallenge. Вот так выросла производственная дирекция.

                                  Сегодня большинство клиентских кейсов задействуют компетенции 2-3 отделов производства. Например, у клиента пул ресурсов в облаке. Это уже два отдела – виртуализация и сеть.


                                  Когда в проекте всего три отдела, скоординироваться не так сложно.
                                  Читать дальше →
                                • Семинар «Как ERP в облаке живется? Опыт, сценарии, грабли», 29 марта, Санкт-Петербург

                                    image

                                    Санкт-Петербург, специально для вас, университеты DataLine возвращаются!
                                    29 марта пройдет семинар на тему «Как ERP в облаке живется? Опыт, сценарии, грабли». Обсуждаем размещение ERP-систем на виртуализации, планирование миграции и параметры SLA.

                                    Спикер: Эдуард Бавижев, директор проектов DataLine.

                                    Осталось всего несколько мест, будем рады видеть ИТ-директоров, инженеров и всех, кто занимается вопросами обслуживания информационных систем компании.
                                    Читать дальше →
                                  • «Идеальный шторм» и как это лечится

                                      Привет, Хабр!

                                      Broadcast storm (широковещательный шторм) – это такой ночной кошмар сетевиков, когда в считанные секунды парализуется передача полезного трафика во всей сети ЦОД. Как это происходит и о чем надо было раньше думать – в нашем сегодняшнем посте.
                                      imageimage
                                      Читать дальше →
                                    • Обзор Update 4 для Veeam Cloud Connect

                                        Новый год начался с новинок от Veeam. На прошлой неделе сервис-провайдерам стал доступен Update 4 для Veeam Cloud Connect. Напомню, Veeam Cloud Connect помогает настраивать репликацию виртуальных машин, запускать реплики в облаке сервис-провайдера, организовывать удаленный репозиторий для бэкапов на площадке провайдера. Я уже писал про этот инструмент тут. Сегодня покажу, что в нем появилось нового.

                                        Вот основные изменения:

                                        • привязка Cloud Gateway к конкретным клиентам;
                                        • репликация в организацию VMware vCloud Director. Раньше можно было делать реплики только на уровне vCenter. У клиентов не было возможности подключиться в реплике виртуальной машины через консоль, не проводя при этом failover.
                                        • бэкап на ленты с привязкой клиента к конкретной ленте.

                                        Подробности под катом.



                                        Читать дальше →

                                      Самое читаемое