Как ЦОД в Каяни построили и чем это может быть хорошо

    Этот рассказ — для тех, кто интересуется практикой постройки ЦОДов (по верхам, ибо детали выбора конкретного оборудования для ЦОДа раскрыты не будут), или думает об аренде стойки или выделенного сервера за границей, или хочет сравнить условия, в которых оказываются ЦОДы в России и за рубежом.

    Краткое содержание: красивые пейзажи — короткий обзор характеристикистория постройкивопрос хабрасообществубонус тем, кто дочитает до конца.

    Среди финских бескрайних озер и сосновых лесов, в 30 километрах от горнолыжного курорта Вуокатти, вдоль реки Каяни у озера Оулуярви раскинулся бизнес-парк Renforsin Ranta. К теме нашего обсуждения озера и реки имеют непосредственное отношение: в бизнес-парке в 2012 году выстроили один из самых современных в Европе ЦОДов, и окрестные озера и реки снабжают его энергией и водой для охлаждения.





    Почему ЦОД построили именно здесь? Здесь ниже цена электроэнергии (ее не надо передавать издалека), есть четыре местные электростанции и несколько высоковольтных линий, подключенных к финской национальной электросети, нет проблем с охлаждением (температура воды в озере — от 1o до 23o), есть место для расширения, есть три оптических линка — по одному в Эспоо и Оулу (и далее — в Швецию), один — в российскую Костомукшу (и далее — в Москву).

    Прямое подключение на площадке имеют операторы Kaisanet, TeliaSonera, Elisa, TDC, FNE, PPO и FUNET, и многие российские операторы уже имеют партнерские соглашения с одним или несколькими из них.



    Одним из якорных арендаторов ЦОДа стал CSC — Computer Science Center, государственная организация, принадлежащая министерству образования Финляндии и владеющая серьезными вычислительными мощностями в стране. На их компьютерах рассчитывается погода по всей Финляндии, на них же университетские ученые ведут свои научные расчеты.

    Среди партнеров центра — IBM, готовая предоставить свои серверы в аренду и обеспечить их стабильную работу.

    Сухим языком характеристик про ЦОД следует сказать следующее:

    Площадь
    • площадь построенного дата-центра — 24000 кв.м.;
    • уже арендовано 11000 кв.м, из них 7000 кв.м. — CSC;
    • для заказа стоек в существующем ЦОДе сейчас доступно 800 кв. м (их сдает оператор colocation, который арендовал часть тех самых 11000 кв.м., о которых сказано выше), и есть еще свободное пространство под крышей — 13000 кв.м, где можно построить свой ЦОД;
    • участок, на котором можно строить свои ЦОДы в отдельных зданиях: 50-200 Гa инвестиционного пространства с готовой инфраструктурой.

    (примечание: для меня немного непривычно, что финские коллеги размещают по сути разные ЦОД, принадлежащие разным компаниям, под одной крышей, но это действительно так. У них общая магистральная система охлаждения, общая подводка электричества, общее здание, единый периметр охраны и т.п.)

    Питание
    120 МВт производятся на месте из источников возобновляемой энергии и 400 МВт подведены от финской национальной энергосистемы четырьмя независимыми высоковольтными линиями;

    Источники возобновляемой энергии — это электростанция на биотопливе и три гидроэлектростанции, все они имеют непосредственное подключение к площадке ЦОДа.

    Охлаждение
    Температуры воздуха и воды в Каяни позволяют использовать пассивное охлаждение круглый год.

    Оптика
    Три отдельных линка с точками обмена интернет-трафиком в Финляндии, Швеции и России.

    Отличительные особенности ЦОД: можно подвести к стойкам в существующем ЦОД заметно больше мощности, чем обычно (до 28 кВт). Арендовать стойки с такой мощностью можно уже сейчас.

    Как строили


    Идея построить датацентр в Каяни пришла, по-видимому, одновременно специалистам из CSC и правительству Каяни: одним была нужна новая площадка, другим — эффективное использование климатических и инфраструктурных преимуществ региона.

    В 2010 году в CSC решили, что нужно выбрать место для нового большого датацентра. К решению подтолкнуло два события: во-первых, CSC требовалось место для расширения вычислительных мощностей и удешевления их обслуживания. Во-вторых, Google построил свой новый дата-центр в Хамине. Стало еще яснее, что Финляндия со своими холодами, чистыми озерами и относительно недорогой электроэнергией — рай не только для туризма и рыболовства, но и для ЦОДов, требующих охлаждения и электропитания.

    В этом же году провели конкурс на место постройки: претенденты из местных администраций соревновались в качестве инфраструктуры, требуемых инвестиций в стоительство и цене аренды участка. Выиграл город Каяни.

    В 2011 году спланировали инфраструктуру. Первую очередь ЦОД решили разместить в здании бывшего целлюлозно-бумажного комбината, который закрылся несколько лет назад (видимо, из-за снижения спроса на бумагу).

    В январе 2012 года началось строительство. Дата-центр получался немаленьким: здание бывшего комбината высокое, и места для стоек оказалось полно. Уместилось два этажа (на фото — этап строительства).





    Фото взяты из презентации Питера Дженкинса.

    В январе-феврале 2012 сделали проект без детализации.
    Все детали проработали с февраля по апрель.
    С апреля по август проложили все трубы, провели проводку.
    В августе и сентябре сделали фальшполы, протянули и подключили все кабели.
    В сентябре установили стойки.
    Сентябрь и октябрь шло тестирование, в ноябре ЦОД запустили в коммерческую эксплуатацию.

    Сертификат Uptime Institute решили не получать, так как никто из потенциальных клиентов им не обеспокоился. В будущем, если понадобится, ЦОД легко получит Tier III по Uptime Institute, утверждают коллеги из управляющей ЦОДом компании.

    Специально для Хабра


    Так уж случилось, что коллеги из кластера ЦОДов в Каяни решили, что для Хабра можно предоставить уникальные условия, и предложили вариант: они внимательно выслушают наше сообщество, прежде чем утверждать цены для новых клиентов.

    Технически финский дата-центр в Каяани может предложить любые услуги для действительно широкого спектра клиентов (от места под строительство отдельного ЦОДа до дешевых VPS в аренду), однако мне кажется, что интереснее всего может быть аренда стоек и выделенных серверов (хоть с обслуживанием, хоть без). Поправьте меня, если я неправ.

    Разумеется, якорные арендаторы, заключающие контракты на 10 и больше лет и арендующие сразу десятки стоек, получают специальные цены. Есть предположение, что на Хабре есть люди, которым три сотни стоек пока незачем, а вот одна-две-три стойки или даже один-два-три сервера в Финляндии были бы по делу.

    Задержки и ширина канала до Каяни обещают быть лучше, чем до Hetzner и LeaseWeb для значимой части Рунета, так что смысл в размещении серверов в новом ЦОДе есть. Если точнее, то до точки обмена трафиком в Хельсинки — 4 мс, до Оулу — 3 мс, до MSK-IX — не более 30 мс. Отметим для сравнения, что ping с моего сервера, стоящего в Hetzner, до MSK-IX — 60 мс.

    Суть предложения для Хабра: мы рассказываем, что бы мы хотели получить от оператора ЦОДа в Каяни, и сколько хотим платить. Коллеги из кластера ЦОДов в Каяни стараются это обеспечить. «Стараются» — потому что исключить желание арендовать стойку за $99/мес. исключить нельзя, а удовлетворить его будет нереально. То есть выслушают они все пожелания, а удовлетворять готовы те, которые в ладу со здравым смыслом.

    Предложения можно оставлять в комментариях к посту, писать мне в личных сообщениях, а также (только по-английски) отправлять электропочтой Карлу Вайдмэну (Carl Wideman) по адресу из раздела «Контакты» на сайте кластера ЦОДов (он там первый в списке).

    Бонус для терпеливого читателя (или нетерпеливого нажимателя клавиши End)


    Коллеги из Каяни приедут на Datacentre Summit 2013 в Москву 18 марта. Мероприятие платное, и если кто-то из читающих эти строки захочет его посетить не из праздного интереса, а с желанием обсудить конкретные планы и совместный бизнес с управляющим ЦОДом в Каяни (заказ стоек, серверов, продажу их услуг в России и т.д.), то компания, управляющая кластером ЦОДов, готова оплатить билеты на Datacentre Summit первым пяти желающим. Желание можно выразить в личных сообщениях мне, а также электропочтой Карлу Вайдмэну (Carl Wideman), см. адрес выше.

    Важное уточнение про бонус: билеты — на конференцию, а не в Москву! Дорога до Москвы — за свой счет.

    UPD: «приподнятые полы» -> фальшполы. Спасибо за поправку, а то когда писал, забыл, как правильно называется.

    Похожие публикации

    Реклама
    AdBlock похитил этот баннер, но баннеры не зубы — отрастут

    Подробнее

    Комментарии 26

      +12
      Зашел полюбоваться на красивые пейзажи под конец рабочего дня, а он только один… :(
        –14
        Нужно давать расшифровку сразу. Не все знают, что такое «ЦОД».
        • НЛО прилетело и опубликовало эту надпись здесь
            0
            Вы не правы. В данном случае заставлять гуглить просто неприлично. Это как зайти в советский магазин и тебе нахамят и скажут, что книга жалоб в туалете за крышкой.
              0
              если бы не хаб «ИТ-инфраструктура», куда я изначально определил эту статью, я бы обязательно расшифровал аббревиатуру ЦОД (центр обработки данных, он же datacenter): веб-разработчики не обязаны знать термины из области ИТ-инфраструктуры (хотя незнанием этих терминов, конечно, гордиться тоже незачем). И тут НЛО перенесло статью в другой хаб, так что уж простите — автор вас обидеть не хотел (и гуглить, кстати, не предлагал).
                +1
                Предлагал погуглить другой товарищ.

                На самом деле сколько бы не минусовали, но в любом тексте и любой направленности расшифровку аббревиатур желательно давать. Это просто норма и правило хорошего тона.
                  0
                  Вопрос к профнепригодным: может еще хорошим тоном будет расшифровывать такие аббревиатуры как JS, HTML, SQL, OS, QA и т.д. и т.п.?
                    0
                    Да. Читают хабр очень разные люди и некоторые аббревиатуры стоит упомянуть в развернутом виде. Тем более, что ЦОД встречается намного реже чем HTML, SQL, OS. Я не знаю, но этому правилу учат в университетах, почему местные воспринимают в штыки — загадка.
                      0
                      Потому что если ты не знаешь таких аббревиатур, то значит эта не твоя предметная область или человек является проф. непригодным. Если человек проф. непригоден — иди и учись. Хоть в университет, хоть куда. Кстати я вот думаю как Вы в университетах конспекты писали если все сокращения расшифровывали? В университете обычно не диктант пишут а лекции читают…
                        0
                        " то значит эта не твоя предметная область или человек является проф. непригодным."

                        Нет, это еще значит, что человек учится.

                        «непригоден — иди и учись. Хоть в университет, хоть куда.»

                        В университете учили правильно оформлять выпускные дипломные работы и конспекты здесь абсолютно не при чем. Если человек только начинает, то просто некрасиво делать сложным то, что можно сделать проще. Короче это проблема автора в том, что можно грамотно преподнести материал, а вы посылая в университеты абсолютно неправы.

                        «Сделай настолько просто, насколько это возможно, но не проще.»

                          0
                          как вы пишете выше,
                          этому правилу учат в университетах, почему местные воспринимают в штыки — загадка.


                          В штыки воспринимают потому, что:

                          1) в обществе профессионалов ценится, когда тот, кто учится, прилагает к обучению усилия, а не ждет, что ему все принесут на блюдечке. Статью, где гуглить надо каждое второе слово, следует признать либо узкоспециальной и ошибочно предложенной широкой аудитории, либо недостаточно качественной. Про статью, в которой вам был незнаком только один термин, который мало того что общепринят, так еще и легко ищется что в Гугле, что в Википедии, что прямо здесь на Хабре, не стоит писать
                          проблема автора в том, что можно грамотно преподнести материал


                          Это выглядит смешно.

                          2) вы упорствуете в заблуждении, и этим можете вызывать негативные чувства у собеседников. Возможно, вас не учат этому в университете, и я надеюсь, что вы мой ответ воспримете не как наезд, а как добрый совет: если в каком-то обществе вы еще не обладаете безупречной репутацией и там не одобряют того, что вы делаете, худшее, что вы можете сделать, это сообщить окружающим, что они все неправы. И, пожалуйста, прочтите мое объяснение выше внимательно. В хабе «ИТ-инфраструктура» термин «ЦОД» столь же уместен, как слово «билет» в поезде. Вы же не просите проводника объяснить, что такое «билет», когда он у вас его спрашивает?
                            0
                            Я видел ваше объяснение и к вам претензий не имею. Проблема в том, что есть другие, что отрицают необходимость очевидного разъяснения неких аббревиатур.
            +14
            Расшифровка «ЦОД» на Хабре?
            о_О WTF?!
            +5
            Хотелось бы хороших дедиков по цене Хетцнера :)
            +1
            впечатляет оперативность!

            p.s. надеюсь, что успешный финский пример станет заразительным и соседствующих регионов по эту сторону границы
            и что будет народ жаловаться, что всю Карелею ЦОДами буржуйскими заставили (мечтать не вредно)
              +1
              «приподнятые полы», он же raised floor, он же фальшпол.
                0
                спасибо, я поправил.
                0
                AJAX failure :(
                  +2
                  Неплохо. Из хотелок — «абузоустойчивость» от претензий СНГшных властей, адекватные цены, канал в Украину:)
                    –2
                    Странное размещение ЦОД на берегу реки, я не эксперт, но если река выйдет из берегов и будет подтопление, то все сервера поплывут? На фото не вижу защиты от данной стихии => Я бы в этом ЦОД не разместил ни свое оборудование, ни тем более свои данные.
                      +1
                      Ну вот, а эксперты пришли к выводу что все безопасно и даже построили там целлюлозно-бумажный комбинат, здание которого стоит и по сей день
                        +1
                        ЦОД построен в здании бывшего СКЛАДА БУМАГИ бумажного комбината. Есть подозрение, что склад был рассчитан так, чтобы паводком готовую продукцию не заливало.

                        Кроме того, на реке рядом есть ТРИ гидроэлектростанции (они обозначены на карте в посте), а значит есть и шлюзы, через которые легко спустить избыток воды.

                        И еще есть опыт наблюдений, который говорит о том, что на высоту пола ЦОДа в Каяни вода никогда не поднималась.

                        Т.е. вероятность затопления не больше, чем у Leaseweb в Голландии, которая вообще местами защищена от моря дамбами, чтоб не подтапливало.
                        +2
                        > что бы мы хотели получить от оператора ЦОДа в Каяни

                        Имхо, отраслевые «стандарты» понятны — хетцнер, ovh. И, скорее всего, мы бы хотели получить либо то же самое по меньшей цене, либо по той же цене, но больше.
                          +1
                          Я маленькая мушка по сравнению с потенциальными клиентами, но позволю прожужжать, что мне бы хотелось low-cost дедики типа kimsufi (от 10 евро) и (присоединяюсь к комменту выше) абузоустойчивости к маразму российских властей.
                            0
                            А вообще, глядя на первое фото, хочу там жить и работать. Можно за еду :)

                            Только полноправные пользователи могут оставлять комментарии. Войдите, пожалуйста.

                            Самое читаемое