Pull to refresh

Comments 72

Что вы думаете о строительстве дата-центра в Магаданской области? Там холодный климат и много дешевой электроэнергии (Две ГЭС).
Для эффективного ДЦ необходимо также учитывать наличие высокоскоростных оптоволоконных линий достаточной полосы пропускания и развитой экосферы сервиса, например, квалифицированных специалистов для обслуживания, наличия представителей компаний-поставщиков оборудования, заинтересованности представителей региона в развитии и так далее. Не забывайте, также, что чем дальше отдельно стоящий ДЦ от своих собратьев, тем больше микросекунд понадобится на общение между ними, что, в конечном итоге, приведет к увеличению времени отклика на запрос пользователя.
Да, если выбирать только по климату, подойдет почти вся Россия. Мы рассматривали много потенциальных мест. К сожалению, количество регионов гораздо больше, чем число ДЦ, которые мы планируем построить.
По Вашим ощущениям, в процентном отношении, помимо перечисленных факторов, насколько существующие политическая, силовая и экономическая составляющие России повлияли на выбор региона?
Хочется понять, как живется сейчас крупному бизнесу.
Тогда это вопрос не к нам :). Из перечисленных мы рассматриваем только ТСО — совокупную стоимость владения. События начала года, конечно, оказали влияние на этот показатель, но проект, по-прежнему, остается привлекательным.
Как видно и из других комментариев, многие ищут политическую подоплеку, но мы рады тому, что можем сконцентрироваться на инженерных задачах, а размер бизнеса позволяет для достижения лучших решений перешагнуть за границы государства. Не наоборот.
Дело, наверное, в том, что на непрофессиональный взгляд непонятно, почему ТСО в России (средняя зарплата 1135 долларов на 2012 год) может быть выше, чем в развитой Финляндии (2925 долларов). И хочется понять причины.
На это еще накладываются ожидания, что российская (условно голландская) компания будет развивать российскую экономику. Понятно, что рынок и свободное движение капитала, однако, жаль.
Заработная плата специалистов не составляет значительный процент от стоимости владения. Основная доля приходится на цену электроэнергии. Именно поэтому мы инвестируем в собственные высоковольтные подстанции: при значительных вложениях они, тем не менее, быстро окупаются. Это не только Финляндия. В Рязанской области мы поступили так же, и в нашем следующем ДЦ мы снова будем строить собственную подстанцию.
Вся наша команда, построившая ДЦ в Финляндии будет развивать российскую экономику. Следите за новостями о новых проектах.
ЗП можно рассматривать не как прямые затраты для собственных специалистов, а как общий показатель стоимости стоительства, основных средств и материалов, в том числе инвестиций в собственные высоковольтные подстанции. По логике одну и ту же подстанцию дешевле построить в стране с более низкими зарплатами. Опять таки взгляд непрофессиональный. Я не понимаю пока, в чем ошибка.
В нашем случае мы, скорее, похожи на розничных покупателей, которые рублем выбирают магазин, в котором тот же самый товар стоит дешевле, а квалифицированно ответить о разнице в ценообразовании смогут, наверное, аналитики и экономисты.
Теперь апдейты будут чаще чем раз в месяц?)
Сказка про лося порадовала. Хотя сами сотрудники Яндекса говорят что бы подальше от «кровавого Путина». Даже не знаю кому верить…
Ваш комментарий уникален — он получил больше всего оценок (на данный момент 18),
причем они поделились строго пополам — 9 за кровавого Путина, 9 против :-)

Даже если в кулуарах сотрудники Яндекса действительно говорят такое, утверждениям про минимальный TCO
это не противоречит, т.к. многие составляющие TCO являются прямыми следствиями в т.ч. политической обстановки.

Т.е. политические риски всё-таки учитывались, но не прямо, а косвенно.
Иначе трудно поверить, что ДЦ для обслуживания Рунета надо строить рядом с Хельсинки, а не на 200 км восточнее, под Выборгом.
Видимо у одних чувство юмора в детстве злые гебешники отобрали. Но в целом здравомыслие пока побеждает, как я вижу.
Вам же всяческих успехов, как в родной стране, так и за ее пределами.
Как Ваш Дата-центр планирует сосуществовать с ФЗ о хранении персональных данных на территории РФ?
В Финском ДЦ не хранятся и не будут храниться персональные данные россиян, которые, по закону, вступающему скоро в силу, должны храниться в России. Для этого у нас есть мощный ДЦ в Сасово и сеть из нескольких ДЦ поменьше, распределенная по России.
Финский ДЦ — наш флагман с точки зрения технологий, с очень высокой энергоэффективностью и КПД, поэтому мы нагружаем его ресурсоемкими задачами. Например, мощности ДЦ в проектах с зарубежными партнерами использует Yandex Data Factory,
Ни на какие компромиссы с законом мы не идем.
Скажите, а почему Яндекс не сделает дата-центр в на БЦБК (г. Байкальск, Иркутская область)? Ведь можно, раз есть такие вложения? Да и климат прекрасный (не хуже, чем у финов): у нас в регионе даже хотели сделать дата-центр, правда Иркутске и Усть-Куте, но не суть. Это было бы прекрасным стимулом для возрождения города, который находится далеко не в лучшем состоянии, т.к. многие работали на заводе.

Конечно, там есть свою нюансы, но ведь все предпосылки правовые, социальные для постройки есть. Да и главное — можно дать неплохой толчок для развития IT в регионах, которые только-только включаются в этот процесс. Про социальную ценность просто умолчу, тем более, что Яндекс — пусть и не российская компания, но вполне на эту страну ориентированная.

И главное: Иркутская область — много лет занимает первое (или одно из первых — в зависимости от года) место в мире по цене электричества, т.к. тут и ГЭС'ы есть, и Иркутэнерго сохранили от РАО ЕС.

Про Магадан уже сказали, но также есть и в этом смысле и ещё один плюс — это доступность: там и федеральная трасса рядом и ж/д. Да и спецов на самом деле хватает, просто многие едут на Запад, в большие компании, а тут бац — и Вы…

В общем: за статью — спасибо, буду трижды признателен, если ещё и ответите что-нибудь на вопросы.
В некоторых регионах стоимость прокладки или использования оптических линий связи делает проект крайне невыгодным.
Да, прочитал Ваш 1й комментарий к 1му комментарию: но все же с оптоволокном проблем в регионе не наблюдается. Да и проложить кабель по дну Байкала — вполне себе возможно (благо совсем недавно так и сделали на Ольхоне, правда, с электричеством). В общем, проект масштабный, но из перечисленного Вами — все, вроде бы, есть: а) квалифицированные специалисты; б) представителей компаний-поставщиков — понятие довольно широкое, но непосредственно близость ж.д. решает в общем-то и этот вопрос, а для оперативной закупки регионального центра вполне достаточно; в) про заинтересованность жителей я уже написал; г) и так далее — тут могу отметить общее развитие региона и особенно — центра за последние 10 лет, что отражено во всех стат. отчетах.

Два небольших вопроса:
— оборудование в основном производят все же в Азии?
— что понимается под «развитая экосфера сервиса»?

Если Вы имеете в виду серверное оборудование, то да, в большинстве своем в Азии.
Инженерное оборудование выпускается по всему миру. В рамках этого проекта большая часть инженерки произведена в Европе.
Развитая экосфера сервиса, это когда все компании, осуществляющие контрактное обслуживание ДЦ, а таких контрактов может быть ориентировочно от 20 до 50, находятся в непосредственной близости и, в срочном случае и специалисты и запчасти прибывают на площадку не позднее чем в 24 часа.

Что касается регионов России, эта информация может быть полезна для других, однако, честно и просто отвечая на Ваш вопрос, Яндекс не сделает ДЦ на БЦБК, потому что в настоящее время у нас нет открытых проектов по выбору новых площадок.
Есть еще одна причина, по которой строить датацентр в Иркутске — это плохая идея. Так уж сложилось, что большинство пользователей интернета и Яндекса находятся в центральной части России, а от, скажем, Москвы до Иркутска — 4211 км по прямой, которые сигнал в оптическом кабеле проходит за 20 миллисекунд (это еще не учитывая задержек во всяких потрохах сетевого оборудования и проч). Таким образом, если у вас, скажем, бэкенд веб-приложения живет в иркутском ДЦ (или ходит в какой-то другой сервис там), пользователи из Москвы автоматически получат минимум +40 мс ко времени ответа (а скорее всего, еще больше — бэкенд в одно место сходил, в другое записал/прочитал с кворумом и т.д.). Так что даже при условии наличия идеальной инфраструктуры, бесплатного электричества, удаленные ДЦ — это большая головная боль для архитектуры и эксплуатации приложений, который в этих ДЦ крутятся.
Да, конечно. Это как раз фактор понятный и объяснимый: но недавно Яндекс.Деньги (понимаю, что это уже не совсем, а точнее — совсем не — Яндекс, но сервис все же связанный) анонсировали крупнейшую торговлю с Китаем. Да и вообще регион этим и жив, и развит. Можно было бы совместить приятное с полезным. Хотя, наверное, это уже совсем другая история.

В любом случае — спасибо за ответы. Пойду читать, как про персональные данные ответили :)
Яндекс — пусть и не российская компания, но вполне на эту страну ориентированная

Как когда-то говорил iseg: «Есть компания, созданная русскими людьми на русские деньги, которая работает в Москве, в которой 2500 работникам платят зарплату, платят налоги с этой зарплаты; работающая в России и создающая продукт для России. Эта компания называется российской».
Это как раз аргумент за, аргумент против. поэтому Яндекс — не совсем российская компания.

P.S. Ссылку не дает мне вставить _http://cache-novosibbln03.cdn.yandex.net/download.cdn.yandex.net/company/dopusk.pdf_
Очень жаль, что русские деньги ушли финскому заказчику.
Хорошо, что успели. Рад за Яндекс. Молодцы!
Гораздо печальнее то, что «русский» подрядчик теперь, вместо работы над ошибками, зашлёт бабла в госдуру, чтобы такие случаи были в дальнейшем запрещены каким ни будь очередным идиотским законом «во благо или в защиту чего-то».
Мы готовы работать с российскими партнерами. Это даже было бы гораздо приятнее с точки зрения языка. Однако, наши дата-центры на сегодняшний день — это технологичные предприятия с высокими требованиями по качеству материалов, монтажа, пуско-наладки и последующего сервиса. Не будем стесняться — по уровню технологии это один из лучших ДЦ в мире. Компании, способные работать на таком уровне в России есть, но их количество исчезающе мало.
Хорошо, что успели.

Героям слава!!!
интересно кто минусует этот коммент и почему? что такого в том чтобы поддержать отечественного производителя? Яндексом пользовался только пробками, после финского ДЦ принципиально перехожу на Waze
Лоси, говорите? На той же точно географической широте, что и Мянтсяля, есть посёлок Лосево. Расположен он примерно на таком же расстоянии от Петербурга, что и Мянтсяля от Хельсинки. Почему же не там?
Смотрите ответ на первый комментарий от автора статьи.
А я не про Магадан, я про 50 км от Питера. Там всего перечисленного вполне хватает, как мне кажется.
Интересно было бы услышать, каким образом осуществляется управление уровнем влажности при такой схеме охлаждения?
Опыт эксплуатации всех предыдущих ДЦ показал, что управление влажностью вообще не требуется, поэтому и в этом, и в последующих проектах наши проектировщики сознательно не указывают никаких требований. Оборудование без каких-либо проблем переживает как пониженную, так и повышенную влажность.
скажите пожалуйста, а что будет происходить почти при 100% относительной влажности, что судя по историческим данным для этого региона далеко не редкость? так и до появления конденсата недалеко :)
Конденсат образуется при смешивании теплого влажного воздуха с холодным сухим (или поверхностью). Проект основывался на многолетней погодной статистике в данном месте. Таких условий в Финляндии не бывает. Серверное оборудование всегда теплее обдувающего воздуха, поэтому условий для достижения точки росы нет. В тех режимах, где достижение точки росы теоретически возможно, (зимой при сухом холодном воздухе снаружи ДЦ работает на переиспользовании теплого воздуха, и роса могла бы образовываться в гидроизолированной камере смешения), нам помогают два фактора: собственно движение воздуха, и то, что, в таком случае, абсолютная влажность не может повышаться по принципу работы — воздух внутри ДЦ дополнительно не увлажняется), соответственно абсолютная влажность горячего воздуха в камере смешения не никогда не выше абсолютной влажности внешнего воздуха.
Очередное качественное подтверждение того, что серьезный бизнес любит стабильность, а уж потом рискованные авантюры. Спасибо, было очень интересно.
специалист по «серьезному бизнесу»?
Смотрите статистику и аналитику, тоже станете. :-)
Скажите, почему везде в других ДЦ применяется «окно ASHRAE», а у вас более широкий коридор? У вас другое оборудование, или в других ДЦ «сидят дураки», которые зря придерживаются 20-24градусов?
Да, Яндекс использует специальное оборудование.
Использование стандарта вызвано какой-то целью. Те, кто его применяют лучше ответят, зачем они это делают. Скорее всего, чтобы было «как у людей», и, если ДЦ коммерческий, не добавлять заказчику страхов за его оборудование, если оно будет эксплуатироваться при +30. У нас таких страхов нет, сертифицироваться нам не надо, поэтому любые ухищрения для попадания в окно ASHRAE для нас не имеют смысла.
Откровенно говоря, мы не следим за развитием документов этой организации, однако, как нам известно, они выпустили (или собираются) обновленную версию стандарта, в котором это окно расширено.
Мы можем позволить себе использовать более широкий коридор, потому что совместно проектируем и дата-центры, и сервера. Наши сервера проектируются и тестируются под более высокие температуры, чем это обычно принято.

Коммерческие дата-центры имеют гораздо меньше влияния на оборудование, которое будет впоследствии установлено у них в машинном зале. Не думаю, что они могут позволить себе потерять клиента из-за того, что климат в ДЦ вдруг не будет соответствовать требованиям производителя оборудования.
Поддержу ораторов выше, даже тут на хабре статья (к сожалению, не нашёл) как то была на тему того, что серверам и в «бане» при +30-35 окружающей среды хорошо, при этом жёсткие диски, а именно из-за них вся шумиха вокруг температуры, даже дольше работают в таких условиях. В тоже время стандарты нарабатываются годами (некоторые так вообще десятилетиями), а значит и изменения в них происходят не быстро.

P.S. с дисками ситуация в том, что деградации пластин при такой температуре всё равно не происходит, а вот механике, на которую и приходится большая часть фатальных отказов (плату то заменить можно даже в полевых условиях), работается гораздо лучше.
UFO just landed and posted this here
Мы действительно проектируем и используем специальное серверное оборудование. Рассказ, какое оно и почему именно такое, требует отдельного поста. Когда будем готовы, опубликуем.
Вконтакт сначала тоже переехал на зарубежные сервера, потом стремительно поменял владельца и вот, наконец, у владельца таки отжали мобилу в США.

Сдаётся мне, некоторые аналогии провести можно. Good night, sweet prince.
UFO just landed and posted this here
IMHO никто не запрещает заказать _в Россию_ то, что захочет заказчик.
Да, причём, во всех трёх смыслах — и принадлежащие российским резидентам, и производимые под российскими брендами, и спроектированные в России.
UFO just landed and posted this here
Доля рынка или доля локализации? Первым даже не интересовался, второе — по-разному. Например, в статье по ссылке выше пишут «Все платы и все железо кроме процессора произведено и спроектировано в России!»
Не вдаваясь в подробности, думаю, что самый низкий для подобных проектов в России в пересчете на 1 мегаватт IT-мощности.
а сколько всего получилась мегават мощность?
В проекте четыре здания, каждое здание состоит из 5 модулей. Каждый модуль держит честные 2 МВт IT-нагрузки. Тут стоить отметить, что, в отличие от большинства (в основном коммерческих) ДЦ, КПД использования у нас очень высок. 80% мы считаем нормой.
фу в Финляндии. В топку Яндекс, теперь уж точно только гугловым буду пользоваться
Т.е. один ДЦ, построенный в Финляндии — вас смущает, а то что гугл из США — не смущает? 0_о
К слову, не забывайте, что и у компании на букву Г есть большой ДЦ в Финляндии, что подтверждает привлекательность региона. Финляндия в последнее время активно зазывает именно больших игроков ДЦ. Они прекрасно понимают свои преимущества для этой индустрии и учатся как их правильно подать.
«Работаю: Mail.Ru Group» в профиле многое объясняет, если не все :)
А 3D на картинке с газоном — это модель, выполненная в SketchUp?
Как основной инструмент во время проекта использовался revit. В начале работы проектировщики, действительно, пользовались sketchup-ом.
На какое количество стоек рассчитан данный датацентр?
В каждом модуле 144 стойки. 5 модулей в здании.
А зданий всего 4. насколько я понял. То есть 2880 стоек во всём ЦОДе, правильно?
Оценочно, да. Однако, стойки меняются, и в следующих зданиях, возможно, количество изменится. Количество стоек на модуль определяется подведенной электрической мощностью, выбором вентиляторов (чем больше мощность, тем более громоздкой будет система охлаждения), и архитектурой построения внутренней сети. Так как проектируем с чистого листа, то с местом проблем нет. На сегодняшний день 144 стойки на модуль — оптимальное значение.
семи утра до трех-четырех дня. Представьте наше недоумение, когда российская команда, возвращаясь с обеда, видит дружную толпу строителей, уже закончивших на сегодня трудовую вахту.

Странно удивление этим фактом. 8 часов рабочий день + 1 час перерыв. Учитывая их широту — они эффективно используют световой день.
А в чем особая эффективность?
Учитывая их широту (на примере Хельсинки) у них самый короткий день длится 5ч 49м 22с (с 9:23 до 15:13), а гражданские сумерки продолжаются с 8:25 до 16:11, так что любой рабочий день, перекрывающий этот диапазон будет практически одинаково оптимальным с точки зрения работодателя по затратам на освещение. Как ни крути, в самый короткий день в помещениях 3 часа 11 минут искусственного освящения будут необходимы, не зависимо от того, с какой стороны светового дня их пришивать.
Речь о строителях и работе на улице.
А на что это влияет?
Все равно суммарная протяженность светового дня и гражданских сумерек (в России считается, что во время гражданских сумерек при работе на улице допустимо не использовать дополнительное освещение, как у них не знаю) у них зимой меньше, чем рабочий день и требуется искусственное освещение, а затраты на него не зависят от того, в начале или в конце рабочего дня оно используется. А севернее и день будет короче.

Летом же у них световой день по 18-20 часов и что график с 6 до 15, и что с 10 до 19 — все при свете будет.
На многое влияет. Попробуйте встретить рассвет и встретить закат. По-моему опыту было начинать работу до рассвета намного продуктивнее, чем заканчивать после заката.
А что мне пробовать, если в наших краях только так работать и можно?
Рабочий день 9 часов, а самый короткий световой день — 6ч 27м 34с. К слову, даже гражданские сумерки — это уже время до и после заката.
Так что, в любом случае в наших краях несколько недель приходится жить в таком ритме.

Но везде есть свою плюсы, например, гости из Ваших краев удивляются, как это так, март-апрель на дворе, снег кругом, но в 7 утра уже светло, а в 8 вечера еще светло :)
Sign up to leave a comment.