Это абонент коло, крупный трафикогенерирующий проект, фотографии делались еще в момент ввода в эксплуатацию площадки, именно потому изначальный канал 100 Гбит / с был взят. Под абонентов аренды серверов мы такое железо не закупаем и закупать пока не будем — слишком дорого, перепродать нереально сложно, если клиент уйдет, простаивающие подобные серверы нам не интересны, сейчас тем более в РФ и Украине кризис. Но мы согласны рассмотреть вариант предоставления такого сервера / серверов с необходимым каналом, если клиент купит оборудование за свой счет (по сути предоставить коло) с каналом хорошей связности по цене порядка 5000 евро за 10 гигабит, +- в зависимости от связности и объема.
Это отличная цена для канала того уровня, который обеспечивается, однако мы понимаем, что большинство русскоязычных абонентов не делают проекты с такой хорошей степенью монетизации, чтоб окупить подобные затраты и еще выйти в прибыль (тем более сейчас), именно по этой причине подобные кастом решения не пользуются спросом на нашем рынке.
Для нашего рынка гораздо выгоднее арендовать 10-гигабитный сервер с 12-дисковой платформой за меньшие деньги.
Возможно, вариант аренды подобных платформ появится через несколько месяцев, не исключаю, но это будет однозначно после того, как мы полноценно выйдем на международный рынок, работа в этом направлении ведется в данный момент.
36-дисковых платформ у нас мало, только 24 в основном, под заказ. Все серверЫ (прошу обратить также внимание на то, что множественное число именно серверЫ, а не сервера (кого? чего?), что является единичным числом) монтируются в стандартные шкафы.
Для генерации 10 гигабит кстати маловато текущих 2 ссд для кеша, все зависит от проекта. Более того сами 2 диска ссд не позволят отдать 10 гигабит. Не более 2-3-х гигабит с ссд при случайном чтении удается получить. Сгенерировать 10 гигабит возможно, если в сервере 4-6 ссд под кеш или если отдавать с RAM. Еще важно правильно распределить прерывания по ядрам.
250+ Гбит / с — это общий трафик всех наших абонентов в ЦОДе EvoSwitch в Нидерландах, подробнее о ЦОДе Вы можете узнать из нашей статьи habrahabr.ru/company/ua-hosting/blog/180851/, там есть информация и об апстримах. Ядро ЦОДа на основе Cisco и Juniper и обрабатывает около 3,5 Tбит / с трафика.
Да, львиную долю трафика у нас генерируют абоненты с проектами онлайн-стримминга, в основном это абоненты с серверами с каналом 10 Гбит / с.
Эффективная конфигурация, которая однозначно позволяет генерировать 10 Гбит / с — это двухпроцессорный сервер, минимум 96 ГБ оперативной памяти и 12 ssd-дисков в нем, ну и граммотна настройка распределения прерываний по ядрам, иначе также генерировать столь большой трафик одним сервером будет затруднительно. Подобрать конфигурацию можете через наш веб-сайт при помощи конфигуратора. Использования SATA-дисков допустимо только в том случае, если Вы сумеете настроить граммотное кеширование на SSD или в оперативной памяти.
В данный момент есть 4 десятигигабитных сервера в наличии (клиент переезжает на более производительное оборудование, проект вырос) доступные к заказу по старой очень выгодной цене не позднее последнего дня текущего месяца:
NL — 2 x Intel Hexa-Core Xeon E5-2420 / 96GB DDR3 / 10x4TB SATA2 / 2х480GB SSD / IPMI / 10Gbps Unmetered — 2719 / месяц
Оформить можно через наш веб-сайт ua-hosting.com.ua/nl-servers.html. Разумеется этими конфигурациями отдать 10 гигабит весьма затруднительно (нужно больше ссд, хотя бы 6, а не 2), тем не менее можно приблизится к этому, ценник очень хорош. Все зависит от проекта.
IP площадки можете посмотреть пропинговав наш сайт.
В МСК так плохо с Интернетом? Разница в стоимости между 10 Мбит / с и 100 Мбит / с смешная. Во всяком случае в Киеве такой канал стоит около $10 / месяц, на целых 5 долларов дороже, чем канал в 10 мегабит :)
10 Мбит на 20 человек для всего? ну если ютьюб никто не включает и идет исключительно работа — то реально. Только вот такое нереально в реальности :)
«И кстати, причем тут объем трафика, когда важно количество железа для оценки релевантности статистики?» — так это и есть показатель количества железа, для того, чтоб маршрутизировать 3,5Тбит / с нужна далеко не одна железка, там не менее это ничтожно малый процент, от всего железа.
«Я — сетевик. Для меня есть «сетевое оборудование», и есть «прочее» :)» — тогда понятно, ну есть же что-то другое в ЦОДе, кроме сети :)
«3тб/с трафика способно вытянуть одно шасси в несколько юнитов высотой, например. » — но у нас же задача не просто вытянуть, а построить нормальный meet-me-room для операторов, реально занимает 2 шкафа все железо, что там и как я не вникал. Само «ядро» ЦОДа на этой фотке:
Факт в том, что сеть — крайне малая составляющая ЦОДа и я не говорил никогда, что ее нужно охлаждать в минеральном масле.
«Одна железка может стоить как годовой оклад высокооплачиваемого сотрудника, а то и как целый отдел» — не имеет смысл погружать в масло такое оборудование. Речь о серверах, а не о корневых маршрутизаторах и дорогостоящем сетевом оборудовании.
Они выделяют ничтожно малый процент тепла, на фоне остального оборудования.
На счет Cisco, уже более 2-х лет работает без сбоев у нас на нашей старой площадке в Utel. Juniper в Нидерландах также не отваливается, как и дорогостоящие Cisco.
Может Вы просто не у тех поставщиков закупаетесь, либо берете подделки. Оборудование высшей степени надежно, так как на основе Cisco/Juniper успешно маршрутизируется 3.5TB трафика и там ничего не отваливается так часто, как Вы рассказываете.
По поводу железа — HP/Dell/Supermicro хороши. Это наше реальное наблюдение, так как наши абоненты арендуют у нас свыше 1000 серверов от этих производителей. В этом году у нас не вышел из строя еще ни один сервер, даже жесткий диск не полетел или память. Причем большинство серверов не самые новые и в работе уже по году и более.
«И вы всерьез будете выбрасывать плату стоимостью в много десятков тысяч евро вместо замены?» да что Вы прицепились к плате за десятки тысяч евро? Это что основная составляющая ЦОДа, что там железа другого нет, которое стоит копейки и которое реально выбросить проще? Еще раз повторюсь, что охлаждают в масле серверы, а не корневые маршрутизаторы, которые составляют незначительный процент всего оборудования и их тепловыделение на фоне остального оборудования мизерно, так как их небольшое количество. В EvoSwitch все ядро, которое обеспечивает маршрутизацию 3.5 Тбит трафика, занимает 2 шкафа по 42 юнита. На 100 000 серверов там 2 таких ядра.
Погружать ядра в масло — ну никакого смысла и даже дебильно, ибо должен быть оперативный доступ для коммутации.
Вопрос интересный, скорее всего так и есть, что использовать в воздушной среде без проведения специальной очистки, сервер не выйдет. Очистить возможно, но очень затратно. Но какой в этом смысл? Если Вы построите ЦОД с возможностью охлаждения серверов в минеральном масле, Вам перемещать их из масла в воздух не будет ни малейшего смысла. Да и серверы — совсем небольшая статья затрат в ЦОДе. Дешевле купить будет новый сервер, если возникнет необходимость использовать его в воздушной среде по каким-либо причинам, но причины эти представить мне сложно, так как это лишено всякого смысла.
Когда Вы строите Дата Центр, то затраты на железо составляют очень небольшой процент, также, как и на его амортизацию. Экономия благодаря использованию охлаждения в жидкости превосходит расходы на закупку железа и амортизацию во много раз. Кроме того, гарантия железа Вас волнует редко, Вы закупаете серверы тысячами, Вам проще выбросить сервер, чем отправлять его по гарантии на замену. К тому же хорошее железо крайне редко выходит из строя, потому поставщик у которого Вы закупаете серверы на сотни тысяч и даже миллионы евро за раз, вышедший из строя даже по Вашей вине сервер может заменить без вопросов (не говоря уже о сервере побывавшем в масле), но на практике Вам самим не интересно проводить такие замены, проще выбросить вышедшую из строя комплектующую или даже сервер, чем тратить время и средства на его отправку в гарантию и получение назад. Это ведь время сотрудников, а оно гораздо дороже железа.
Конвекция важна везде, не спорю, только теплоемкость более важна, нежели теплопроводность. Вы же сами сказали, что воздух нужно более интенсивно перемешивать. Вот как раз в случае с маслами благодаря большей теплоемкости перемешивание может быть гораздо менеее интенсивным.
Воду для охлаждения серверов не применяют, так же как и перемешивают охладитель не воздухом, а при помощи насосов, так что случаи кавитации воздуха в маслах не думаю, что стоит рассматривать. Разве что в том ПК, который на картинке, но там я не думаю, что масло сильно греется :)
Это не интересный рынок, заработок денег из воздуха лично меня не интересует, мне вообще пофиг на деньги. Они не стоят ничего. Важно то, как мы живем и проживаем жизнь. Жить надо интересно, а не расходовать время на всякую ерунду.
Кстати на счет майнинга, если Вы посчитаете, то электричество обходится дороже тех BitCoin, что Вы получите по итогу. Разве что с учетом этой технологии будет профит, но только в больших масштабах. Но дело в том, что деньги не стоят ничего. Это лишь инструмент, не более. И тратить природы ресурсы на то, чтоб добыть «циферки», как то не здраво.
Давайте создавать реально классные и полезные проекты, а не искать во всем шару и возможность получить средства на шару.
Процессоры охлаждают не водой, а минеральным маслом, вода используется только в контурах с холодной водой для отвода тепла уже от шкафов. Там действительно, Вы правы, преимущество за конвекцией.
Не повлияет, процесс диффузии занимает длительное время, Вы скорее замените плату по другим причинам, чем из-за того, что между контактами просочился диэлектрик. Это как он должен просочится, отпаять что ли? :)
Это отличная цена для канала того уровня, который обеспечивается, однако мы понимаем, что большинство русскоязычных абонентов не делают проекты с такой хорошей степенью монетизации, чтоб окупить подобные затраты и еще выйти в прибыль (тем более сейчас), именно по этой причине подобные кастом решения не пользуются спросом на нашем рынке.
Для нашего рынка гораздо выгоднее арендовать 10-гигабитный сервер с 12-дисковой платформой за меньшие деньги.
Возможно, вариант аренды подобных платформ появится через несколько месяцев, не исключаю, но это будет однозначно после того, как мы полноценно выйдем на международный рынок, работа в этом направлении ведется в данный момент.
Да, львиную долю трафика у нас генерируют абоненты с проектами онлайн-стримминга, в основном это абоненты с серверами с каналом 10 Гбит / с.
Эффективная конфигурация, которая однозначно позволяет генерировать 10 Гбит / с — это двухпроцессорный сервер, минимум 96 ГБ оперативной памяти и 12 ssd-дисков в нем, ну и граммотна настройка распределения прерываний по ядрам, иначе также генерировать столь большой трафик одним сервером будет затруднительно. Подобрать конфигурацию можете через наш веб-сайт при помощи конфигуратора. Использования SATA-дисков допустимо только в том случае, если Вы сумеете настроить граммотное кеширование на SSD или в оперативной памяти.
В данный момент есть 4 десятигигабитных сервера в наличии (клиент переезжает на более производительное оборудование, проект вырос) доступные к заказу по старой очень выгодной цене не позднее последнего дня текущего месяца:
NL — 2 x Intel Hexa-Core Xeon E5-2420 / 96GB DDR3 / 10x4TB SATA2 / 2х480GB SSD / IPMI / 10Gbps Unmetered — 2719 / месяц
Оформить можно через наш веб-сайт ua-hosting.com.ua/nl-servers.html. Разумеется этими конфигурациями отдать 10 гигабит весьма затруднительно (нужно больше ссд, хотя бы 6, а не 2), тем не менее можно приблизится к этому, ценник очень хорош. Все зависит от проекта.
IP площадки можете посмотреть пропинговав наш сайт.
10 Мбит на 20 человек для всего? ну если ютьюб никто не включает и идет исключительно работа — то реально. Только вот такое нереально в реальности :)
«Я — сетевик. Для меня есть «сетевое оборудование», и есть «прочее» :)» — тогда понятно, ну есть же что-то другое в ЦОДе, кроме сети :)
«3тб/с трафика способно вытянуть одно шасси в несколько юнитов высотой, например. » — но у нас же задача не просто вытянуть, а построить нормальный meet-me-room для операторов, реально занимает 2 шкафа все железо, что там и как я не вникал. Само «ядро» ЦОДа на этой фотке:
Факт в том, что сеть — крайне малая составляющая ЦОДа и я не говорил никогда, что ее нужно охлаждать в минеральном масле.
Они выделяют ничтожно малый процент тепла, на фоне остального оборудования.
На счет Cisco, уже более 2-х лет работает без сбоев у нас на нашей старой площадке в Utel. Juniper в Нидерландах также не отваливается, как и дорогостоящие Cisco.
Может Вы просто не у тех поставщиков закупаетесь, либо берете подделки. Оборудование высшей степени надежно, так как на основе Cisco/Juniper успешно маршрутизируется 3.5TB трафика и там ничего не отваливается так часто, как Вы рассказываете.
По поводу железа — HP/Dell/Supermicro хороши. Это наше реальное наблюдение, так как наши абоненты арендуют у нас свыше 1000 серверов от этих производителей. В этом году у нас не вышел из строя еще ни один сервер, даже жесткий диск не полетел или память. Причем большинство серверов не самые новые и в работе уже по году и более.
«И вы всерьез будете выбрасывать плату стоимостью в много десятков тысяч евро вместо замены?» да что Вы прицепились к плате за десятки тысяч евро? Это что основная составляющая ЦОДа, что там железа другого нет, которое стоит копейки и которое реально выбросить проще? Еще раз повторюсь, что охлаждают в масле серверы, а не корневые маршрутизаторы, которые составляют незначительный процент всего оборудования и их тепловыделение на фоне остального оборудования мизерно, так как их небольшое количество. В EvoSwitch все ядро, которое обеспечивает маршрутизацию 3.5 Тбит трафика, занимает 2 шкафа по 42 юнита. На 100 000 серверов там 2 таких ядра.
Погружать ядра в масло — ну никакого смысла и даже дебильно, ибо должен быть оперативный доступ для коммутации.
Воду для охлаждения серверов не применяют, так же как и перемешивают охладитель не воздухом, а при помощи насосов, так что случаи кавитации воздуха в маслах не думаю, что стоит рассматривать. Разве что в том ПК, который на картинке, но там я не думаю, что масло сильно греется :)
Кстати на счет майнинга, если Вы посчитаете, то электричество обходится дороже тех BitCoin, что Вы получите по итогу. Разве что с учетом этой технологии будет профит, но только в больших масштабах. Но дело в том, что деньги не стоят ничего. Это лишь инструмент, не более. И тратить природы ресурсы на то, чтоб добыть «циферки», как то не здраво.
Давайте создавать реально классные и полезные проекты, а не искать во всем шару и возможность получить средства на шару.