Как я строил свой датацентр — часть третья. Волшебство электричества и холода

    Гермозона у меня есть, осталось нашпиговать ее по последнему слову техники. Начнем с электричества.
    Ведь куда датацентру без электричества?

    Прямо в помещении столько электричества, конечно, нет. Но есть в трансформаторной. Прокладка кабеля за счет арендатора.

    Итак, копаем канаву по всему заводу.
    image

    Привозим кабелюку, бронированную, чтобы ей в земле хорошо лежалось.
    Реклама Чувашкабеля детектед
    image
    Закопали. Положили, тремя слоями сверху, каждые полметра, ленту с надписью «осторожно кабель».

    А в гермозону привезли вентиляционные решетки, материалы для воздуховодов.
    image

    И водо — фреоно водов. А также накрыли пол, чтобы очень его не загадить
    image

    Начали прокладывать разные трубки загадочного назначения
    image
    Подсказываю, черные — фреон, серые — слив сконденсированной влаги, белые — забор воды в увлажнители.

    Тут и пожарные подоспели, привезли балоны с хладоном. Хорошие такие огнетушители
    image

    И давай монтировать систему пожаротушения.
    image

    Между делом привезли рамы для кондиционеров.
    image

    А вот и сами кондиционеры приехали.
    image
    Кондиционеры, конечно, прицензионные, Emerson Liebert HPM, с выдувом холодного воздуха под фальшпол. Всего запланировано 60 серверных шкафов не более чем по 6 kW каждый (Больше охлаждать воздухом не получается). Итого на 360 kW вероятной чистой мощности у нас 9 кондиционеров по 56 кW холода каждый.

    Тем временем, систему пожаротушения доделали image

    Поставили внешние блоки
    image
    Картинка, вполне, в духе стимпанка.

    Поставили щиты управления вытяжкой — приточкой.
    image

    Привезли серверные шкафы и начали собирать. И приточку вытяжку тоже.
    image

    Собрали шкафы
    image
    Шкафы Knürr 42 юнита, 900мм глубиной 600мм шириной. Шкафы шириной 800 мм роскошны, но увы, у нас места на 800 мм не хватило.

    А вот и электричество.
    Встречайте. UPS
    image

    И электрические шкафы.
    image

    Упсы Emerson Liebert, как ни странно. На 160 kVa, это 128 kW, тоже включены по схеме N+1 и питают чистое до запуска дизеля. Должно хватить на 15 минут при полной нагрузке, но дизель стартует куда раньше.

    Поставили упсы на рамы
    image

    Чтобы было не скучно, сделали, наконец, освещение.
    image

    Закатили кучу проводов.
    image

    И давай их подключать
    image

    Чтобы время взря не терять, прикатили циску
    image

    Сделали комутационный шкаф и по всем шкафам протащили оптику
    image

    Смотрим налево
    image
    электричество подключили.

    Смотрим направо, чего то не хватает? Конечно, дизеля не хватает. Грустно без дизеля.
    Дизель едет-едет и приехал
    image
    Знатная зверюга на 730 kVa. 6 горшков, 2 турбины. 2 глушителя. Именитой итальянской фирмы Сoelmo. А как ревет…

    Ну все, пора запускать все системы
    image

    И снимать красивые фотографиии
    Типа таких.
    image

    Или таких
    image

    Открыть сайт www.webdc.ru Звать инспектора минсвязи и покупать мебель в офис.
    Поделиться публикацией

    Комментарии 355

      +7
      Класс, — интересно :-) Спасибо. Как раз подыскиваем себе хостера))
        +54
        В самом деле, потрясающая качественная реклама! В самом положительном смысле.
          +4
          так и просится слоган в стиле «наши серверные собраны заботливыми руками сисадминов из экологически чистых зарубежных комплектующих!» ;)
            +2
            Абсолютно согласен. Руки прямо-таки потянулись к телефону, чтобы заказать себе стоечку.
          +10
          Спасибо за рассказ! Осталось вам только газон вокруг посадить =)
            +1
            насчет газонов это мысль. Пока только гравием грязь вокруг посыпал.
              +3
              еще бы над логотипом поработали, страшненько он выглядит=)

              Буду болеть за вас, желаю удачи!
                0
                Тоже за ребрендинг. Не хостерский какой то что ли.
                Надо смотреть в сторону западных лидеров. Зашел на сайт и первого мгновения должно быть ясно, чем занимаетесь.
                Удачи! Успехов! Всего!
                +1
                кстати, если посадите несколько деревец, то будете платить меньше налогов. законодательно так есть, по крайней мере, в Украине.
              +9
              Да, все три части супер. Как говорится от А до Я.
              Очень познавательно и полезно.
              Удачи и успеха в вашем начинании!
                +3
                спасибо.
                +3
                как же всё просто выглядит по таким статьям :))))
                сколько времени на всё ушло?
                  +6
                  9 месяцев. От договора аренды, до запуска.
                    +10
                    доношенным родился =)
                      +1
                      А сколько из этих 9 месяцев ушло на предварительную подготовку (документы и прочее)?
                        +3
                        Три месяца
                      +1
                      ой не просто, многого не видно.
                      Несколько раз проект был на грани срыва.
                        +11
                        Статьи действительно «по верхам». Мало рассказано про работу инженеров, проектировщиков, монтажников, а ведь запустить даже небольшой датацентр на таком уровне — это по мимо финансов огромная работа. В этом центре действительно все сделано качественно и надежно — был у них месяц тому назад и лично все видел. После увиденного было принято решение о переносе к ним одной стоки серверов и большого блока IP адресов.
                        Процесс переноса прошел на удивление гладко и без лишних заморочек. Очень понравилось отношение Ивана и его сотрудников, желание понять и помочь клиенту.
                        За месяц работы проблем с электричеством и каналами замечено не было, тех поддержка оперативная.
                        Удручает только быстрая скорость заполнения стоек, надеюсь, через пару месяцев нам еще хватит там места.
                          +4
                          После такого обзора — врядли хватит :)
                            0
                            Ребята конечно супермолодцы, Ивану отдельный пламенный респект, НО…

                            … но давайте обманывать не будем, увы, эта фраза — ложь:

                            > За месяц работы проблем с электричеством и каналами замечено не было

                            могу показать аптайм-отчет. Ребята хорошие, но давайте по-честному!
                              +1
                              Покажите.
                              С электричеством не было. С каналами тоже.
                              Злобный нок наш, проключая каналы клал циску пару раз на 30 минут и один раз на 40.
                                +1
                                Пожалуйста:

                                Первая ошибка обнаружена в 2009-10-29 17:14:35.
                                Последняя ошибка обнаружена в 2009-10-29 18:17:48.
                                Время простоя: 1 hour(s) 3 min(s) 14 sec(s).

                                Первая ошибка обнаружена в 2009-10-29 13:41:04.
                                Последняя ошибка обнаружена в 2009-10-29 14:12:29.
                                Время простоя: 31 min(s) 25 sec(s).

                                Первая ошибка обнаружена в 2009-10-26 12:30:37.
                                Последняя ошибка обнаружена в 2009-10-26 13:37:41.
                                Время простоя: 1 hour(s) 7 min(s) 4 sec(s).

                                Первая ошибка обнаружена в 2009-10-24 18:32:46.
                                Последняя ошибка обнаружена в 2009-10-24 19:06:44.
                                Время простоя: 33 min(s) 58 sec(s).

                                Первая ошибка обнаружена в 2009-10-18 23:18:30.
                                Последняя ошибка обнаружена в 2009-10-18 23:49:27.
                                Время простоя: 30 min(s) 57 sec(s).

                                Первая ошибка обнаружена в 2009-10-18 00:01:39.
                                Последняя ошибка обнаружена в 2009-10-18 00:32:44.
                                Время простоя: 31 min(s) 5 sec(s).

                                Первая ошибка обнаружена в 2009-10-12 14:17:16.
                                Последняя ошибка обнаружена в 2009-10-1215:18:33.
                                Время простоя: 1 hour(s) 1 min(s) 16 sec(s).

                                Первая ошибка обнаружена в 2009-10-09 23:48:36.
                                Последняя ошибка обнаружена в 2009-10-10 00:51:42.
                                Время простоя: 1 hour(s) 3 min(s) 6 sec(s).

                                Первая ошибка обнаружена в 2009-10-08 16:47:20.
                                Последняя ошибка обнаружена в 2009-10-08 17:17:48.
                                Время простоя: 30 min(s) 27 sec(s).

                                — С наилучшими пожеланиями,
                                host-tracker.com/ cлужба поддержки
                                  0
                                  Чего вы там мониторили то?
                                    0
                                    один из своих сайтов… даже два… на ip 188.120.36.40
                                      0
                                      ну дык. Брать Петю Костенко и трясти за низкий аптайм.
                                        +5
                                        подскажите где у Пети аптайм. обязательно потрясу! :D
                                0
                                Учитывая стадию (первый месяц работы, отладка, тестирование, запуск нового оборудования, ночные переезды клиентов каких как мы), я рассчитывал на гораздо большее проблемы. На удивление отключений по питанию не было не разу, отключения по каналу были практически незаметны по времени, а соответственно проблем не было — идет нормальная работа. Возможно «аптайм-отчет» — это Ваш частный случай, а случаи бывают разные и не всегда виноват ЦОД. Думаю не стоит судить настолько строго на данном этапе, посмотрим пару месяцев хотя бы.
                                  0
                                  Так я ж не против, просто у меня повышенное чувство справедливости)) Когда говорят, что простоев не было, ну не могу я молчать))

                                  А так я с Рувебом работаю уже довольно давно и работой удовлетворен. Кроме «летних охладительных проблем» и вышеописанных даунтаймов…
                                    0
                                    доунтаймов чего? Рувеба? По дороге к рувебу стоит руотер рувеба, свитч рувеба, железка рувеба на которой стоит софтина рувеба.
                                    Это и падало.
                                      0
                                      согласись, слабое оправдание для десятков негодующих клиентов…
                                        0
                                        У меня есть десятки клиентов?

                                        Повторяю. С запуска электричество было всегда.
                                        Сети были всегда. Циска падала три раза. Все.
                                          0
                                          дело в том, что «Петя Костенко» и другие писали:

                                            0
                                            блин

                                            В общем, хорошо, снимаю свои претензии, во всем виноват Петя :)
                                      0
                                      Возможна это ситуация RUWEB-а в процессе переезда, у E-Planet такого количества падений не наблюдалось.
                                0
                                по каким причинам проект был на грани срыва?
                                (если не секрет разумеется)
                                  0
                                  Организационным. Нам было нужно одно — заводу другое.
                                    +5
                                    я так понимаю, что сейчас у вас договор на 5 лет, 9 месяцев из которого он строился.
                                    не боитесь, что через 5 лет договор не будет продлен? успеет проект окупиться?

                                    а вообще — здорово, очень рад, что ваш проект запустился, удачи вам.
                                      +1
                                      раз ребята искали договор на 5 лет видимо, рассчитали, что этого времени хватит на то чтобы окупить затраты и заработать достаточную по их мнению сумму.

                                      я бывал в нескольких датацентрах в Киеве, такого видеть не довелось…
                                        0
                                        да я тут просто по ссылкам почитал, что сибирьтелеком недавно построитл свой ДЦ, вложил около 4 льенов баксов, и планирует окупить его за 8 лет.
                                        понятно, что в географии своя специфика.
                                        но даже если окупят — все равно рисковано. это же не офис перевезти в новое здание.
                                          0
                                          Из предыдущих постов — планируют 60 шкафов; из комментариев — половина уже занята; из их сайта — открылись в сентябре, то есть работают всего 2 месяца а занята уже половина, и стоимость аренды стойки там же. Можете провести калькуляции…
                                            +2
                                            лично я надеюсь, что проект окупится и не один раз ибо такой труд просто обязан быть вознагражден.
                                            но ставя себя на место того, кто это построил, я бы очень расстроился, если бы мне отказали в продлении аренды через 5 лет.
                                              +1
                                              >Можете провести калькуляции…

                                              60 стоек * 60 000 рублей в месяц / стойку = 3 600 000 рублей в месяц
                                                +2
                                                Ну тут наверное стоит вычесть большие коммунальные расходы типа электричества, связи и пр.
                                                  0
                                                  Плюс добавить доп. услуги. IP, увелечение каналов для клиентов и т.п
                                                    0
                                                    Насчет ip — в такие места люди едут, обычно со всоими as.
                                                    А канал и так 1000.
                                                0
                                                вот ехал я седня на работу и вспомнилось мне это обсуждение. В плане того, что 3 ляма баксов планируется окупить меньше чем за 5 лет. Причем не просто окупить, но и выйти в плюс. Начал считать…
                                                2 килобакса за стойку. 60 стоек. 120 килобаксов в месяц, 1.4 лимона в год. Дохода. Минус налоги. Минус операционные расходы. По очень примерным прикидкам на одни зарплаты пол лимона в год уйдет. А 300киловатт — это под двести килобаксов в год. И еще охлаждение. И аренда. В общем, что-то я не насчитал как это дело может за 5 лет окупиться.
                                                  0
                                                  С чего вы взяли что 3 «ляма», на что там это все тратить в 400 кв м датацентре. Я думаю гадать бессмысленно, люди все посчитали и открыли, в убыток никто бы ничего не делал.
                                                    0
                                                    A я знаю на что? Я датацентры не строил пока.
                                                    3 ляма звучало где-то в комментариях. Автор точной цены не указал, но на сколько я понял уровень цен именно такой.

                                                    Вот ниже ссылочку дали — telecombloger.ru/1213#more-1213
                                                    Там внизу есть кап.затраты на датацентр на 50 стоек — 2.5 лимона баксов. Так что всё сходится.
                                                      0
                                                      2.5 это третий тьер. Второй подешевле. Да и в кризис были интересные скидки на строительство и оборудование в нелеквидах со скидками.
                                                    0
                                                    По зарплатам вы сильно превысили — нам бы такие зарплаты чесслово. Налоги при усложненой системе налогообложения не такие высокие на инвестиционные проекты. 300 киловат это меньше 100 к баксов.
                                                    И кто сказал про 3 лимона? Вот тут честные цены telecombloger.ru/1213#more-1213

                                                      0
                                                      честные цены — это 2.5 лимона на ЦОД на 50 стоек. И что, мы будем за пол лимона бороться? :) Разница между Tier-2 и Tier-3 по той-же статье в 25% (если от 3-го). То есть Если там 2.5 за Tier-3, то Tier-2 обойдется в 1.9. Да, лимон скинули. Но все равно далеко не бесплатно :)

                                                      Зато в том-же обзоре говорится о том, что цены упали с 2500 за стойку до 500 за стойку. При цене в 500 за стойку я вообще не вижу рентабельности ЦОДа такого размера.

                                                      Про налогообложение я ничего сказать не могу. Я и в местном-то не разбираюсь. Но то, что родное государство не захочет откусить по максимуму я не верю. А это не лоток с пирожками, тут особо не спрячешься.

                                                      А с зарплатами — тут ведь не от зарплат зависит скорее, а от количества народу. Как ни крути, а дежурные нужны, бухгалтер нужен, электрик нужен… ну и т.д.
                                                      и каждому зарплату заплати, налоги за него заплати.

                                                      Не, я не спорю, естественно, проект окупится. Причем не через 20 лет, а раньше. Но чтоб он за 5 лет принес прибыль… Боюсь, что если-бы все было столь радужно, то проблем с датацентрами не стояло-бы.

                                                      Но успехов вам в любом случае.
                                                        0
                                                        Спасибо. По 500 продавать не буду, сам себе оставлю и дедикайтед продам. :)
                                    +1
                                    Главное на промо-сайт не вешать первую фотку (а лучше её и в статье заменить), уж больно она «реальная»
                                      0
                                      Стимпанковская фотка с кондиционерами страшней. Хотя, сейчас там убрались.
                                    • НЛО прилетело и опубликовало эту надпись здесь
                                        +2
                                        За стандартную, за такой проект сумму. Цифр назвать не могу, связан бумагами.
                                          +12
                                          ох, уж эти девичьи секреты.
                                          • НЛО прилетело и опубликовало эту надпись здесь
                                          +1
                                          «Обычно» это стоит примерно от 10 тыс. долл. за кв. метр.
                                          Т.е. цифра должна быть примерно семизначной, как хорошая многоуровневая квартира в центре со всеми наворотами.
                                        • НЛО прилетело и опубликовало эту надпись здесь
                                            +20
                                            Ужасно. Злой смошник в лице меня пробрался в наши ряды. Иду самоуничтожаться.
                                            +2
                                            Хорошо рассказали. А дизель просто припарковали возле входной двери или смонтировали как-то?
                                              +2
                                              Припарковал. Вдруг, сломается.
                                                0
                                                а если сломается, запасной есть?
                                                  +1
                                                  Береться в аренду. Срок 3-5 часов.
                                              0
                                              Спасибо за рассказ, очень интересно было )
                                              Вы говорили также что хотите чтобы в датацентре был вышколенный персонал. Где брать будете? ) Если сами занимались обучением то тоже было бы интересно почитать про процесс.
                                                +1
                                                Кадры отдельная тема. Ну вообще, Корбина свой dc разогнала и помогла кадрами. А так, долгими беседами.
                                                +6
                                                Осталось только завезти блэкджек и шлюх.

                                                ДЦ роскошный!
                                                  +1
                                                  К ссылке точка лишняя прицепилась.
                                                    –1
                                                    Ссылочку на сайт поправь, там точка лишняя просочилась.
                                                      0
                                                      Ссылку поправьте на сайт, там точка в конце лишняя.
                                                        +3
                                                        Что-то сайтик ваш тормозит :)
                                                          0
                                                          А точнее лежит :-(
                                                          –4
                                                          В ссылке в конце — лишняя точка. Сайт тормозит, надо что-то делать.
                                                          Даешь colocation неттопов у вас без соотношений :-)
                                                            0
                                                            гм…
                                                            Один хосттер внутри нас дает дедикетед неттопов. Без соотношение но всего 3 мбит.
                                                            Мы пока не готовы заняться коло неттопов, мы и юниты не продаем.
                                                              0
                                                              А можно как то получить информацию по неттопам, очень интересует этот вопрос.
                                                                0
                                                                https://ruweb.net/?page=server
                                                            0
                                                            Это все за свой счет, или инвестор?
                                                              +1
                                                              Инвесторы.
                                                              +7
                                                              Чувашкабель решает.
                                                                +2
                                                                А то :)
                                                                +1
                                                                Даешь в конце фотки «ДО» — «ПОСЛЕ» :)
                                                                замечательный сериал вышел, очень интересно. большое спасибо
                                                                  0
                                                                  Молодцы!
                                                                    0
                                                                    А какая цена трафа и какие условия? Не нашел быстро…
                                                                      0
                                                                      370 р мбит без соотношений по 95% usage пока.
                                                                        0
                                                                        Т.е. оплата по факту использования определенной полосы?
                                                                          0
                                                                          да
                                                                      –7
                                                                      Я не понял! Yahoo переезжают штоле??
                                                                        –4
                                                                        Берите больше. Google и Яндекс переезжают. :)
                                                                        0
                                                                        Кстати, хабраэффект разорвал новую серверную.
                                                                          +3
                                                                          дым пошел из сервера…
                                                                            +4
                                                                            попробуйте ник поменять ;)
                                                                        0
                                                                        а электрическая ввод только 1? :) а как же резервирование и авр система? Хотя наверное с дизелем и 1ой кабелюки хватит :)
                                                                          0
                                                                          что-то к вечеру у меня с окончаниями плохо :) электрическИЙ ввод*
                                                                            0
                                                                            Два. Там же нарисовано img-fotki.yandex.ru/get/26/piroman99.25/0_2e607_aee3134_L.jpg. И дизель.
                                                                              0
                                                                              по схеме они как будто с одного места идут, вот я и усомнился :)

                                                                              Зачет.
                                                                              Сам когда-то принимал участие в построении похожего дата-центра, понастольгировал.
                                                                                0
                                                                                эти 2 фидера от одной ТП?
                                                                                  0
                                                                                  Увы. Но с разных трансформаторов и с разных высоких.
                                                                            • НЛО прилетело и опубликовало эту надпись здесь
                                                                                +9
                                                                                Нет, друпал :-)
                                                                                  +1
                                                                                  Его готовить надо, в сыром виде вполне может тормозить
                                                                                +19
                                                                                Теперь на хабре есть руководство а-ля «Строим датацентр своими руками» в 3-х частях. Замечательно. Что нам еще нужно? Нам нужно руководство а-ля «Строим космодром своими руками» — и мы наконец-то сможем свалить с этой гребаной планетки!

                                                                                Если серьезно, то я не совсем понял, зачем поделили на 3 части. Могла бы получиться одна, но мега- статья.
                                                                                  +17
                                                                                  Маркетинг.
                                                                                    +4
                                                                                    Работает. Я на первые две части не успел, но 3-ю увидел, и пойду сейчас читать первых две.
                                                                                  +4
                                                                                  А как быть, если по прошествии 5 лет, когда закончится срок аренды, владелец здания не захочет продлевать договор?
                                                                                    +5
                                                                                    владельцу не выгодно разрывать договор, тут же неиссекаемый стабильный поток бабла :)
                                                                                      +2
                                                                                      Dc к тому времени окупиться несколько раз. Но не думаю, что мы им так нодоедим.
                                                                                      +2
                                                                                      Расскажите, пожалуйста, про организацию интернет-канала
                                                                                        +2
                                                                                        Два линка
                                                                                        Один Бигтелеком, Один Комстар плюс один резерв к тому же Бигтелекому.
                                                                                        Сейчас включены на 1Gb, в любое время можно проапгрейдить до 10 ки.
                                                                                        К весне ожидаеся третий провайдер, к следующей осени свое темное волокно до девятки.
                                                                                          0
                                                                                          свое темное волокно


                                                                                          ЕМНИП, темное волокно — это неиспользуемые волокна в чьих-нибудь кабелях?
                                                                                            +1
                                                                                            А также в принципе неиспользуемые оптоканалы.
                                                                                              0
                                                                                              смущает слово «свое» темное волокно.
                                                                                              Просто я слышал, что сейчас волокна не продают. только сдают в аренду.
                                                                                                0
                                                                                                Ну да, в аренде.
                                                                                        +4
                                                                                        > «Удаленные Руки». Удобный сервис для тех, кому не хватает собственных рук…
                                                                                        да вы там еб*нулись
                                                                                          0
                                                                                          На последней фотке мачты гармонично смотрятся.
                                                                                            +1
                                                                                            Побольше было бы по РФ датацентров.
                                                                                            Но и за это спасибо!
                                                                                              0
                                                                                              На каком уровне у вас реализована безопасность и как обстоят дела с охраной?
                                                                                              [irony]Какие гарантии что ночью не придёт к вам дядя Вася и не заберёт сервер?[/irony]
                                                                                                +12
                                                                                                Дверь не откроют, у дежурного кнопка вызова масок шоу.
                                                                                                  +9
                                                                                                  лучше была бы кнопка «не пускать маски шоу»
                                                                                                    +1
                                                                                                    Приехали одни маски шоу, приехали другие маски шоу. Веселуха.
                                                                                                  • НЛО прилетело и опубликовало эту надпись здесь
                                                                                                      +6
                                                                                                      Боимся. Предпринимаем меры.
                                                                                                      К тому же, смысл захватывать ДЦ? Кто нибудь станет в ДЦ с непонятным правовым статусом?
                                                                                                      • НЛО прилетело и опубликовало эту надпись здесь
                                                                                                          +2
                                                                                                          Там оборудование не сильно ликвидное.
                                                                                                  0
                                                                                                  Вот и сказке конец, а сказка то какая былаа…
                                                                                                    0
                                                                                                    Зато какая интрига.
                                                                                                    +2
                                                                                                    Класс, спасибо, подобные вещи действительно инетересно читать.
                                                                                                      0
                                                                                                      Дааа… интересно во сколько это всё встало :-) цифры, наверное на сотни тысяч долларов с техникой
                                                                                                        0
                                                                                                        Берите выше.
                                                                                                          0
                                                                                                          примерно 200кв. метров X 15000 у.е = 3 000 000 у.е.

                                                                                                            0
                                                                                                            Откуда такие познания? )
                                                                                                              0
                                                                                                              Видимо, уже заходил
                                                                                                                0
                                                                                                                Так автор на сайт производителя ссылку давал, оттуда и цены )
                                                                                                          • НЛО прилетело и опубликовало эту надпись здесь
                                                                                                              0
                                                                                                              Маштабно -)
                                                                                                              +1
                                                                                                              Странно, что под фальшполом вы не сделали «чистый пол», нагнетаемым воздухом пыль будет в шкафы задувать. А судя по фотографиям бетонной пыли от бурения отверстий под крепеж стоек фальшпола там много :)

                                                                                                              Мы когда монтировали такую систему — пол покрывался какой-то специальной краской, которая как резиновый слой после высыхания становится. То есть он и изначально чистый полностью и даже при возникновении какого-то количества пыли оно не будет так свободно летать, а липнет к полу.
                                                                                                                +5
                                                                                                                Упустил, мы тоже покрыли этой краской, конечно.
                                                                                                                +3
                                                                                                                Масштабно, последняя фотка так и заставляет сказать, что у вас там теперь можно фильмы снимать про захват мира и красную кнопку :)
                                                                                                                  +3
                                                                                                                  Расскажите про СОРМ оборудование
                                                                                                                    0
                                                                                                                    Его не существует. Это глупый вопрос и сейчас вы услышите сказку про якобы его подключение.
                                                                                                                      0
                                                                                                                      Что значит не существует?
                                                                                                                        +1
                                                                                                                        Ну расскажите нам про гигабитный оптосорм и маньяков, которые его ставят. Я уже попкорн купил.
                                                                                                                          +2
                                                                                                                          За тобой уже выехали.
                                                                                                                            0
                                                                                                                            Я, Вань, наверное экстремист. Но вот это богобоязнь существующей проблемы меня выбешивает. Я, кстати, не против мероприятий как таковых. Даже на порядок или два чаще чем они есть. Было бы у кого желание их проводить. И у кого оно появляется — я с удовольствием этим оборудованием для них и работаю. Но рассказывать про страшные шкафы СОРМ, которых ни у кого из вас нет — наглише показухен, непонятно для кого и для чего.
                                                                                                                              0
                                                                                                                              что касается ДЦ — не скажу.
                                                                                                                              но в АТС — оборудование СОРМ обязательно.
                                                                                                                                0
                                                                                                                                Ну так в АТС там СОРМ-1. А тут — 2. При том что телефония — исконно-монопольная деятельность государства.
                                                                                                                                  +4
                                                                                                                                  И в ЦОД СОРМ, но в состояние внедрения. Перманентном.
                                                                                                                                    0
                                                                                                                                    В точку. Лучший комментарий! :)
                                                                                                                      +1
                                                                                                                      А зачем в дата-центре СОРМ? Если по бумагам все правильно оформлено, то СОРМ как стоял у провайдеров, которые в этом ДЦ присутствуют, так и продолжает там стоять и всех видеть. А в самом ДЦ-то ставить его какой смысл?
                                                                                                                        0
                                                                                                                        Это для провайдеров, не для ДЦ, afaik.
                                                                                                                        +4
                                                                                                                        был бы здорово еще так сделать… UPS — цена, Дизель — цена, Циска — цена… ну так округленно приблизительные)) Для развития, ведь далек от этого)
                                                                                                                          0
                                                                                                                          думаю порядок цифр в районе 2 — 2.5 М зелени
                                                                                                                            0
                                                                                                                            На весь DC?
                                                                                                                              0
                                                                                                                              без оборудования :D
                                                                                                                            0
                                                                                                                            Звонок в Радиус Вип или Теледом и весь прайс.
                                                                                                                            0
                                                                                                                            Кто-то делал проект ДЦ? Или сами?
                                                                                                                              0
                                                                                                                              Радис Вип. rvip.ru
                                                                                                                                0
                                                                                                                                солидно, судя по клиентам.
                                                                                                                                  +4
                                                                                                                                  Пойду просить процент
                                                                                                                              +4
                                                                                                                              ДЦ хороший, а сайт то какой то не очень :(
                                                                                                                                0
                                                                                                                                А какова цена вопроса? Зная примерный ценник на некоторое оборудование я прифигел:) Если не секрет конечно :)
                                                                                                                                  0
                                                                                                                                  Скидка хабрапользователям будет? :)
                                                                                                                                    +2
                                                                                                                                    На стойку? Ну стучитесь.
                                                                                                                                      +3
                                                                                                                                      И так получается дешево 42U — 60000 рублей, поставить сервер на co-location в среднем 3500р. за юнит(бывает и дороже). В итоге получаем 147 000р.
                                                                                                                                      Стоимость получается больше чем на 50% дешевле чем у среднестатистического хостера. Надо собирать народ на стойку =)
                                                                                                                                        0
                                                                                                                                        вы к этим 60000 еще прибавьте стоимость 4х гигабит (чтобы на каждый сервак по 100 мбит было) и начинайте собирать народ
                                                                                                                                          0
                                                                                                                                          Не всякий сервак генерит 100 мбит 5% времени…
                                                                                                                                          Реально, стойка с серверами генерит 30-150 мегабит, если не держишь какой либо супер трафикогенерящий проект
                                                                                                                                            0
                                                                                                                                            ну ладно, 200 мегабит докупать, цена получится среднестатистическая :)
                                                                                                                                              0
                                                                                                                                              Мы не планировали заниматься демпингом. Хотя путь продать стойки по 700, а потом взвинтить цены до 2500 тоже имееет право на существование.
                                                                                                                                                0
                                                                                                                                                да я про вас ничего не говорю, просто чтобы человек не грезил что все так просто :)
                                                                                                                                            +1
                                                                                                                                            Аренда дополнительного порта 1Гбит/с — 1500р./мес, получаем + 4500р в месяц, мелочи, по сравнению с конкурирующей суммой :)
                                                                                                                                            Может еще что-нить не посчитал?
                                                                                                                                            Получается примерно ~1615р./мес с человека, если подарить 2U организатору того счастья за его организаторские услуги :)
                                                                                                                                              –1
                                                                                                                                              ну ну, сквозь пальци смотреть не надо
                                                                                                                                              > Доп. трафик без учета соотношений (полоса) 1Мбит/с 370р./мес.
                                                                                                                                              www.webdc.ru/frames
                                                                                                                                                +1
                                                                                                                                                Если не размещать публичное файловое хранилище это не пригодится.
                                                                                                                                                  –1
                                                                                                                                                  на 10 мегабитах 40 серваков? :D а на серваках хомпаги? :D
                                                                                                                                                    0
                                                                                                                                                    Я как понимаю если соблюдать правило 1/4 то канал будет 1Гбит/сек, 10мбит это канал без ограничений на это соотношение. Если я ошибаюсь разуверьте.
                                                                                                                                                      0
                                                                                                                                                      неправильно понимаете. Не продаем трафик по соотношениям.
                                                                                                                                                        0
                                                                                                                                                        По сути я смотрю в основном все подключают к 100Мбит каналу (тот же самый TrueVDS).
                                                                                                                                                        А установка оборудования в стойку денег стоит или нет? (hc берут 1500 за установку 1U в стойку, и за аренду 90 000, и трафик 1/4).
                                                                                                                                                        Тут получается 93 300 рублей, при подключении к 100Мбитам, с трафиком без соотношений.
                                                                                                                                                          0
                                                                                                                                                          Не берут за установку.

                                                                                                                                                            0
                                                                                                                                                            А если в 6 КВт не укладываемся, дополнительное питание можно купить или надо уже отдельную стойку?
                                                                                                                                                            У меня сервер 550Вт, смотрю продают сервера с 650Вт и т.д, как уложиться в лимит питания? (Получается 10 серверов поставил и все..) Или я не правильно что то считаю :)
                                                                                                                                                              0
                                                                                                                                                              Вы попробуйте померить потребляемую мощность. 20 дуалквадксеонов с блоками на 750Вт у нас кушают меньше трех кВатт
                                                                                                                                                                0
                                                                                                                                                                Ээээ… Это что за сервер такой?! Или там просто блок питания 550 Ватт?
                                                                                                                                                                  0
                                                                                                                                                                  dell 1950 и интелы
                                                                                                                                                                    0
                                                                                                                                                                    По спекам в DELL 1950 идут зионы жрущие до 65 ватт, 2х65 Ватт, вероятно порядка 30 Ватт мать, харды немного жрут, им только на раскрутку нужно побольше… Там и двухсот ватт с розетки не сожрут, блоки питания там с вполне приличным КПД, 80+ уж точно.
                                                                                                                                                                    0
                                                                                                                                                                    Да, блок питания 550Вт. А как померить реально потребляемую мощность?
                                                                                                                                                  +1
                                                                                                                                                  Самое сложное получается заставить 40 человек(если конечно кто то по 2-3 сервера не размещает) своевременно платить, поэтому получается со всех надо сразу оплату за полгода-год брать, чтобы организатор на свои бабки не попал.
                                                                                                                                                    0
                                                                                                                                                    организуйте хостинг, арендуйте стойку, можно шаред предоставлять
                                                                                                                                                      +1
                                                                                                                                                      Представляешь какие на это средства нужны? Оборудование, админы, суппорт, офис.
                                                                                                                                                        –1
                                                                                                                                                        ага, а в твоем варианте нервов не оберешься и будешь только и заниматься тем, что напоминать про оплату за сервак, тоже на тоже получается
                                                                                                                                                          +1
                                                                                                                                                          Долго напоминать не надо будет, не заплатили вовремя сервак офф.
                                                                                                                                                          А так надо 10 друзей, и брать 1/4 стоийки за 17000 (по 1700 на каждого), не велика разница получается :)
                                                                                                                                                            –2
                                                                                                                                                            да не получится так :D слишком много амбиций, да и с физиком думаю договор не заключат :)
                                                                                                                                            +1
                                                                                                                                            Тоже интересует бюджет всего мероприятия.
                                                                                                                                              0
                                                                                                                                              Не пытайте. Не могу.
                                                                                                                                                0
                                                                                                                                                а если паяльником? (шутка)

                                                                                                                                                Ну серьезно, хотя бы порядок числа? Сколько нулей и в какой валюте? :)
                                                                                                                                                  +1
                                                                                                                                                  шесть нулей в зеленых.
                                                                                                                                                    0
                                                                                                                                                    а первая цифра 3?
                                                                                                                                              +3
                                                                                                                                              на крыше много места — можно солнечные батареи налепить и напичкать генераторов — пусть накапливает, тогда вообще можно спать спокойно :)
                                                                                                                                                +3
                                                                                                                                                угу в россии где они полгода будут под снегом и от дождей им тоже не похорошеет это просто суперудачное вложение денег:) ещё можно ветрогенераторы поставить!
                                                                                                                                                  +1
                                                                                                                                                  На крышу нас не пустили. Мы там блоки кондеев хотели разместить.
                                                                                                                                                  0
                                                                                                                                                  Два вопроса:
                                                                                                                                                  1. А чего с АРЩ? Как завязано?
                                                                                                                                                  2. Главный вопрос — а почему шкафы, а не рамы?
                                                                                                                                                  3. А с каналами? 1-2-3? Я про физику.
                                                                                                                                                  4. Две линии питания к стойкам? Одна?
                                                                                                                                                    0
                                                                                                                                                    1) АВР
                                                                                                                                                    2) Что бы патчкорды никто не задел.
                                                                                                                                                    3) Пока 3. То бишь палок до завода 2, наружу завода 3.
                                                                                                                                                    4) Одна.

                                                                                                                                                      0
                                                                                                                                                      1. так это… входы-выходы. тезисно. просто любопытно.
                                                                                                                                                      2. действительно проблема? просто как-то мне казалось шкафы дороговато… возможно их охлаждать конечно кошернее…
                                                                                                                                                      3. угу. нормально. ну ты понял на кого я намекал :)
                                                                                                                                                      4. а почему, кстати? не, без иронии. у всех одна. просто интересно почему две никто не делает.
                                                                                                                                                        0
                                                                                                                                                        а зачем 2 линии к стойкам, если бесперебойность обеспечивают УПСы и ДГА?
                                                                                                                                                          0
                                                                                                                                                          Чтобы можно было вести регламентные работы по одной из линий. Это такое требование.
                                                                                                                                                            0
                                                                                                                                                            Гаси сервера. Кстати, такой регламент там раз в год на 5 минут.
                                                                                                                                                              0
                                                                                                                                                              Не, ну ты понимаешь — я переживу. А ведь многие теряют 10000$/мин
                                                                                                                                                                +1
                                                                                                                                                                Ну, когда нибудь, если доживем, построим треттий тьер.
                                                                                                                                                                Кста не вопрос, если у тебя такие проблемы принести тебе на время переключения юпс, включить в него второй блок питания, и переживай на здоровье.
                                                                                                                                                          0
                                                                                                                                                          2) Понты.
                                                                                                                                                          3) Пытаюсь.
                                                                                                                                                          4) Вдвое больше меди. Ну потому что ДЦ не под business critical.
                                                                                                                                                            0
                                                                                                                                                            2-4) я воль :)
                                                                                                                                                            3) у стека долгое время был проброшен один кабель на м10.
                                                                                                                                                            0
                                                                                                                                                            Если шкаф гамотный, он все тепло выдувает взад, снизу, с фейкпола идет холод, и согласно етицкой силы законов физики, горячий уходит в отвестие теплозаборника

                                                                                                                                                            Впрочем, это мегосистема для 32-х ядерных монстров, которые умеют жарить яичницу
                                                                                                                                                        +3
                                                                                                                                                        Неплохо бы линки на 1-ю и 2-ю части прямо в тексте (точнее перекрестные линки во всех частях), не все их читали, а отложив могут и не вспомнить…
                                                                                                                                                          +1
                                                                                                                                                          у Вас в компании вакансии есть?
                                                                                                                                                            +1
                                                                                                                                                            Увы. Уже нет.
                                                                                                                                                            +3
                                                                                                                                                            Вы, конечно, молодец и сделали большую работу, но «что бы» пишется слитно.
                                                                                                                                                            Да, я зануда.
                                                                                                                                                              +3
                                                                                                                                                              Я поправил, извините пожалуйста.
                                                                                                                                                                0
                                                                                                                                                                И картинка вполне в духе стимпанка (за который респект, только меди/латуни/ржавчины не хватает) — без запятых.
                                                                                                                                                                  0
                                                                                                                                                                  И вообще там не стимпанк, а вполне киберпанк, в духе «Моны Лизы овердрайв» :)
                                                                                                                                                              0
                                                                                                                                                              Что тут скажешь… круто!
                                                                                                                                                                0
                                                                                                                                                                Примите конгратуляции. Первый рассказ(другой автор) так и не окончился?
                                                                                                                                                                Читаются статьи, как повесть=)) интересно и понавательно!
                                                                                                                                                                Спасибо Вам! Успехов!
                                                                                                                                                                Возьмите на подработку ;))))
                                                                                                                                                                  0
                                                                                                                                                                  Интересно, спасибо
                                                                                                                                                                    +3
                                                                                                                                                                    у нас в РЖД вообще смешно.
                                                                                                                                                                    аккумуляторный резерв должен обеспечить 2 (иногда 8 часов) часа режима работы оборудования.
                                                                                                                                                                      0
                                                                                                                                                                      Что, и кондеев?
                                                                                                                                                                        0
                                                                                                                                                                        нет, только оборудования связи всех видов.
                                                                                                                                                                        но и там 20-40кВ
                                                                                                                                                                          0
                                                                                                                                                                          кВт.
                                                                                                                                                                            +3
                                                                                                                                                                            как раз на тему охлаждения сегодня комикс попался (: