Хабр Курсы для админов
РЕКЛАМА
Практикум, Хекслет, SkyPro, авторские курсы — собрали всех и попросили скидки. Осталось выбрать!
Поток Администрирование доступен 24/7 благодаря поддержке друзей Хабра
Комментарии 181
Закреплённые комментарии
Дополняю. В 18:48 TimeWeb все-таки решил выйти на связь со своими клиентами и написать в чат сообщение. Ситуация следующая:
В мае были проблемы с охладом, починили, чиллер заменили. 26-о июня произошла "сетевая недоступность", которая в будущем стала "проблемой с системой охлаждения, которую не могут вывести на полную мощность". 29-о число, 8:34 утра - снова проблема с охладом. 13:53 - проблема закрыта. 21:44 того же дня - охлад пал, не ожил. 30-е число - получили новые запчасти для чиллера(но видимо не помогли). 17:07 - отправили мобильный чиллер, но кабелей для него не нашлось. Кабели для него ожидаем завтра с 12 до 14 МСК, в лучшем случае. Дай бог бедный мобильный чиллер запустится и пользователи наконец-то получат доступ к своим серверам.
На данный момент даунтайм уже почти 23 часа.
Сервак там же.
Минус — заколебало вкрай, конечно, хотя я и осознаю трёхбуквенные нюансы.
Плюс — за предыдущие такие случаи «полдня без сервака, охлаждение не осилило» они сделали перерасчёт и накинули бесплатных дней на баланс.
Не совсем понимаю, почему это считается плюсом. Перерасчет за период, когда услуга фактически не предоставлялась, это скорее минимальная обязанность провайдера, а не бонус.
Проблема ведь не в стоимости нескольких дней аренды. Пока сервер недоступен, у многих стоят коммерческие проекты: интернет-магазины, CRM, SaaS, боты, корпоративные сервисы. В этот момент теряются клиенты, деньги и репутация. Никакие несколько бесплатных дней аренды этого не компенсируют.
Поэтому для большинства важнее не перерасчет после очередного простоя, а чтобы таких простоев в принципе не происходило.
— Не совсем понимаю, почему это считается плюсом.
Потому что никуда не делись хостеры (и вообще компании), которые и за пару дней простоя не накинут дней сверху и даже не извинятся в чатике саппорта. Так что да, увы, формальное соблюдение хоть каких-то договорённостей я склонен считать плюсом.
Но в плане AMS я тоже думаю сменить провайдера. Ибо он всё ещё лежит со вчерашнего вечера.
Ну и да.
— у многих стоят коммерческие проекты: интернет-магазины
ИМХО события последнего времени в плане «давайте обрубим любые возможности юзать ***» неслабо так намекают, что держать серьёзные коммерческие проекты и прочее на нидерландских серваках — как минимум, не очень разумная затея.
Проблема ведь не в стоимости нескольких дней аренды. Пока сервер недоступен, у многих стоят коммерческие проекты: интернет-магазины, CRM, SaaS, боты, корпоративные сервисы. В этот момент теряются клиенты, деньги и репутация. Никакие несколько бесплатных дней аренды этого не компенсируют.
Тут некоторые хостеры вообще на пару недель отвалились... если рамки только отечественных хостингов за рубежом, то боюсь "надо отнестись с пониманием"... надежность вообще во многом лимитирована тем с какой ноги завтра встанет отечественный или зарубежный чинуша.
Компенсация в пару сотен рублей за сутки простоя выглядит как издевательство, когда бизнес теряет сотни тысяч на неработающих кассах
Компенсация в пару сотен рублей за сутки простоя выглядит как издевательство, когда бизнес теряет сотни тысяч на неработающих кассах
При таких суточных потерях не иметь резерва - хреновый это бизнес, и IT у него хреновая.
Единичный отказ любой компоненты инфраструктуры - это не авария! Если не так - вы неправильно погстроили инфраструктуру. Деды так учили.
Держать в 2026 кассовый софт в Нидерландах? Мсье знает толк в стрельбе себе в ногу...
Потому что можно сделать как https://the.hosting/ru/ Прислать письмо: "мы не смогли и закрываемся" и свалить в закат, вместе со всеми деньгами юзеров в личных кабинетах. При этом они отключили систему тикетов, т.е. написать им с просьбой вернуть оставшиеся на счету деньги - невозможно.
Если вам так важны клиенты, репутация, почему нельзя сделать дуплицирование в другом дата центре, в другой стране? Почему нельзя настроить автоматическое разворачивание? Почему надо жаловаться всем и вся мол это они виноваты, а мы то свое дело знаем, сидим тут и плачем как от нас клиенты уходят. "Не теперь точно от них уходим".Или у вас все гвоздями прибито?
Для критикал сервисов должна быть межцодовая кластеризация, хотя бы active-passive, ибо упал весь ДатаЦентр в Амстердаме не только timeweb затронут, другие перекупы тоже отвалились, тот же hostkey например. Я не понимаю наезда на конкретно таймвеб, а давайте всех в шеренгу поставим и расстреляем? И что с голландцами, в их сторону что-то не увидел вентиллятора.
Так я и не говорю, что виноват только Timeweb. Понятно, что если лег Qupra, то задело всех, кто там размещается.
Но проблема в том, что это уже не первый раз. Такое уже было в мае. Тогда тоже говорили, что занимаются охлаждением, обещали постмортем, обещали разобраться. В итоге постмортема нет, а спустя месяц мы снова видим практически ту же самую историю. Вот это уже и вызывает вопросы.
И если честно, меня не особо волнует, что там произошло у голландцев. Я не клиент Qupra, я клиент Timeweb. Именно Timeweb продает мне услугу, пишет про Tier III, высокий uptime и берет за это деньги. Соответственно, и вопросы у меня к Timeweb.
Если дата-центр систематически становится причиной таких простоев, значит с ним нужно что-то делать. Потому что для клиента совершенно неважно, чей именно кондиционер перестал работать. Важно только одно: сервис снова лежит.
И что с голландцами, в их сторону что-то не увидел вентиллятора.
Во-первых, голландцы предоставляют услуги не автору, а Таймвебу
Во-вторых, что более важно, голландцы на странице ДЦ нигде Tier III не обещали. И вообще слово Tier я у них не нашёл =)
Был сервер там же. Служба поддержи на мой взгяд ужасная: человек отвечает в течение суток, получается лаг между сообщениями примерно в 24 часа, что как-то многовато.
По собственной глупости завел аккаунт с указанием почты на protonmail, как оказалось, они не могут работать с этой почтой, проверяющие ссылки туда не уходят. Аккаунт оказался недоступным. А через почту до них не получилось связаться, они ее, либо не читают, либо игнорят. Только благодаря тому, что я оплатил длительный период, у меня оставался доступ к серверу. Но после того, как он отвалился (ams локация), я не думая перешел на другого провадера.
И если честно, я бы не рекомеандовал таймвеб, хотя бы из-за того, как работает служба поддержки.
46 часов простоя в Амстердаме за два месяца
В Москве ровно то же самое:
постоянно отваливается IPv6 (не реже раза в 3-4 дня) - reboot узла помогает, но почему-то reboot всегда занимает 3 минуты ровно (хотя что там VDS'у перегружаться то так долго?)
на регулярно пропадающую связь практически бесполезно жаловаться, вот цитата из того, что они отвечают:
В общем, чувствую, сделал глупость оплатив хостинг на год вперёд - придётся подыскивать другое место.
почему-то reboot всегда занимает 3 минуты ровно (хотя что там VDS'у перегружаться то так долго?)
Как минимум логи-то почитайте, это вполне может виснуть какой-нибудь ваш собственный процесс
у меня там один nginx и ничего в нём нет. а такой долгий reboot был там с самого начала
PS: там кстати сам reboot быстрый, но вот доступность машины после reboot восстанавливается каким-то cron-скриптом (кмк).
то есть я делаю reboot, затем сервер сразу отовсюду пингуется, но ни один из портов не открыт.
затем ровно через три минуты доступность есть и если зайти по ssh то в логах написано что всё загрузилось 3 минуты назад.
systemd-analyze blame
Почти наверняка там wait-online, а вам на каком то из интерфейсов не выдается ИП адрес
Почти наверняка там wait-online, а вам на каком то из интерфейсов не выдается ИП адрес
да,
systemd-analyze blame|head
2min 254ms systemd-networkd-wait-online.service
34.293s apt-daily.service
32.144s dhcpcd6.service
но так было с самого старта VDS.
поскольку на узле постоянно отваливается IPv6, то думаю, что именно его адрес и выдаётся очень долго
Ищем \etc\systemd\system\network-online.target.wants\systemd-networkd-wait-online.service и в нём дописываем к строке:
ExecStart=/usr/lib/systemd/systemd-networkd-wait-online
дополнительно --interface=ens3 (или eth0 и что там ещё главным интерфейсом). Т.е. будет так:
ExecStart=/usr/lib/systemd/systemd-networkd-wait-online --interface=ens3
Стартовать будет моментально.
Проблема на твоей стороне, и решается за 5 минут.
Удали конфиги netplan, настрой статику. Когда будешь настраивать статику, обрати внимание на секцию "routes". Секция должна выглядеть вот так:
routes:
- to: "0.0.0.0/0"
via: "xxx.xxx.xxx.1" #сюда прописать шлюз по умолчанию, см. документацию Timeweb
on-link: true
- to: "::/0"
via: "xxxx:xxxx:xxxx:xxxx::1" #сюда прописать шлюз по умолчанию, см. документацию Timeweb
on-link: true
Фишка в 'on-link: true'!
Ну и сделай "systemctl disable dhcpcd6.service". Он будет не нужен, когда статика заработает.
Если проблема системная и саппорт кормит отписками, проще переехать на другой vps и не тратить время на дебаг чужой инфраструктуры
На вашем скрине - ответ их тупорылой нейросети. Они это говно на первую линию поддержки поставили, видимо потому что модно и считают своих юзеров дебилами.
Зовите в чате оператора, ответ будет более вменяемым.
Рассматриваете ли вы смену площадки в Нидерландах?
Другой хостинг пишет, что других вариантов в общем-то и нет, с РФ готовы сотрудничать не только лишь все
При этом во втором ДЦ, где расположены выделенные сервера все работает исправно. Получается альтернативы есть, даже если есть проблема с размещением у РФ хостеров.
Не думаю что поставить пару стоек туда - большая проблема. Да и зарегестрировать юр. лицо в той же грузии тоже.
Похоже hostkey там же пасётся. Отвал вчера, пока не работает. Был и вчера утром.
Аналогично. тех.поддержка написала что напишет обновлённый ответ до "12 по Москве".
"Восстановительные работы после инцидента в дата-центре в Нидерландах продолжаются в приоритетном режиме. На текущий момент мы ожидаем доставку дополнительного оборудования, которое необходимо для восстановления стабильной работы системы охлаждения. После стабилизации инженерной инфраструктуры наша техническая команда оперативно приступит к поэтапному включению серверного оборудования и восстановлению работы виртуализации.
Подтвержденные сроки завершения работ со стороны дата-центра пока не предоставлены. Ситуация находится на самом высоком уровне контроля с нашей стороны. Наши инженеры находятся на площадке, поддерживают постоянную коммуникацию со специалистами дата-центра и готовы начать восстановление инфраструктуры сразу после появления технической возможности."
Сейчас в первопрестольной девять утра. Ждёмс.
Не похоже, а точно. Но, не исключал бы, что это голландцы "выпихивают" русских таким образом. Или, может, вторым сортом считают и соответствующее отношение.
У меня два VPS в Hostkey. Повезло в том, что они не в Нидерландах, а в Германии. Вчера обнаружил, что у обоих серверов перестал работать резолвинг DNS PTR записей. Написал в техподдержку, после чего узнал о жопе в Нидерландах. Так что Hostkey точно там обитает.
Есть сайт, где публикуется сводная информация? Коэффициент готовности реальный и плановый для разных (всех) ЦОД?
Может посоветуете хостера? я тоже от этих падений буггурчу постоянно
Забанили за название этой статьи, вот и думайте...
Вроде можно понять, но сравнив температуру за два года, не настолько уж она и выше в 2026-м.
Май 2025 Meteociel - Climatologie mensuelle de Amsterdam Airport Schiphol ( Netherlands )
Май 2026 Meteociel - Climatologie mensuelle de Amsterdam Airport Schiphol ( Netherlands )
Июнь 2025 Meteociel - Climatologie mensuelle de Amsterdam Airport Schiphol ( Netherlands )
Июнь 2026 Meteociel - Climatologie mensuelle de Amsterdam Airport Schiphol ( Netherlands )
Вывод: хостер не готов к температуре 30 градусов.
Если вы в сильную жару захотите приобрести, починить итп. кондиционер то вероятно откроете для себя "Не эластичное предложение" в виде недельной очереди...
Для себя да, а на работе люди по договору. Сегодня позвонили, самое позднее завтра пришли. Оплачено.
Ну так при "аномальной жаре" у тебя позвонили и из датацентра и из мясокомбината и из больницы какой-нибудь, а кондиционерщика/холодильщика допустим два, и далее продолжаем спускаться по ступеням - у поставщиков запасы запчастей в расчете на определенный спрос...
Да-да, кондиционерщики - они ведь банда клонов. И свой сла держат железно:)
Это всё происки американцев. Ситуация выглядит буквально следующим образом:
У других хостеров там же тоже были проблемы. Дело не столько в таймвебе, сколько в случае.
Так-то я тоже от них ушел, но просто потому что нашел то же самое дешевле. В остальном хостер как хостер.
Селектел у меня тоже регулярно проблемы вызывает, хотя считает чуть ли не эталоном.
Нейрослоп.
Я платил за обещание, а не за минимальный ценник.
Это не невезение. Это системная проблема
Даже заметку про хостинг не могут написать самостоятельно.
А для чего? Тезисы и факты мои, ИИ только помог оформить текст. Сейчас 2026 год, нет смысла тратить время на то, что можно автоматизировать. Обсуждать стоит аргументы статьи, а не инструмент, которым она написана.
по правилам хабра использование ИИ при подготовке статей запрещено, вы же знаете? )
Я читаю, как у нейросети есть претензии к хостеру.
Вот хотя бы:
Я платил за обещание, а не за минимальный ценник.
Но нейросети пока еще не могут ни за что платить.
Это просто неуважение к читателям. Зачем вы пишите этот пост? Он адресован живым читателям или поисковым механизмам с целью понижения репутации хостера? Если второе - то почему живые люди вынуждены этот видеть?
Тоже хотел писать, как можно деградировать настолько, что пост вида "Упал сервак" пишет нейросеть
Если не нравится, не читай! Можно придраться к чему угодно, но чувак потратил время и подготовил факты, на чтение я потратил 3 мин по факту. Могу только респект кинуть.
Эти факты видит каждый в панели таймвеба, описать идею статьи можно парой скринов оттуда с выводами на абзац типа "хватит это терпеть" зачем вот это вот все "история моей жизни, как я пришёл таймвебить, как мне жалко, но я все равно не стерпел" повторенное в тексте минимум два раза? И доё* до проблем с охлаждением мне тоже непонятен, дудос как раз вещь, которая хоть как-то подконтрольна действиям со стороны именно провайдера, а инфра датацентра - что таймвеб, как съемщики стоек, реально сделают из другой страны? Кондей новый высрут? Да, надо было дублировать железо, обещая аптайм три девятки, но в сложившейся ситуации от них уже мало что зависит, только от расторопности голландских петровичей с фреоном и кабелями.
Если не нравится, не читай!
"Если не нравится - не читай!"
Нейросети пока в пунктуацию не очень.
(хорошо хоть тся/ться частично могут)
Проблема в том, что "ии помог оформить текст" это по результату гребанная вода. Вашу статью можно сократить раза в 3-4, ничего не потеряет, зато читать будет легче.
Вот для чего, уважать людей, которые будут читать, а не "гы гы гы, ИИ всё напишет сама, обдумывать текст не нужно".
Осуждаю. Всё же статья - это диалог автора с читателями, где читатель ожидает увидеть живого автора, его собственный слог и стиль, а не робота, которому дали задание сгенерировать текст по указанным тезисам.
ИИ только помог оформить текст
Искусственный интеллект вам помог испортить текст. Не понимаю, откуда берётся это убеждение, будто большие языковые модели обладают хорошим стилем. Всегда одно и то же от нейросетей: штампы, повторы, общая раздутость, а если попросить лаконично — недосказанность и неупомянутые факты. Нужно наоборот, требовать от агента с БЯМ искать и анализировать информацию, а писать должны люди.
Пожалуйста, перечитайте ваш текст. Там многое несколько раз повторяется, в том числе в этом фактбоксе.
Сейчас 2026 год, нет смысла тратить время на то, что можно автоматизировать.
Если вы не удосижились потратить время на написание текста, с чего вы взяли, что мы должны тратить время на его чтение?
Сейчас 2026 год, человеческие тексты ценятся как никогда высоко.
Два дня в месяц был недоступен сервер?
У вдсина сервер был доступен два дня в этом месяце
У вдсины немного другая история.
https://habr.com/ru/news/1043210/
Я как айтишник, да и Вы в большинстве кто на этом ресурсе- должны понимать. Да аварии бывают, да мы всегда стараемся все сделать и даже лучше чем было в условиях выделенных бюджетов. Там реально проблема- жара. Такой никогда не было. Даже если писать что сегоня не жарко и все равно серверы упали. Там охлад пережил "апокалипсис" Ему и сейчас плохо. Да починят, да нарушен uptime. Но лично у меня претензий ноль. 1. я ин понимаю, и понимаю как это все устроено. 2. я покупал сервера без дублирования. И был в курсе. Допустим там цунами, торнадо, наводнение пройдёт- также будете писать во все инстанции? PS- рядовой пользователь. Отношения ни к таймвеб ни хосткей не имею
Там реально проблема- жара. Такой никогда не было.
То, что Qupra падал в январе из-за той же самой системы охлаждения, вспоминать тактично не будем)
В комментарии выше я обоснованно сомневаюсь в этой причине
Охлад, который сделан без резервов - такое. Это значит, что при нормальной эксплуатации стоит паре узлов выйти из строя и выйдет точно тоже самое.
ИМХО, здесь проблема в том, что заявлена надежность (хостером), которую не может дать площадка.
Жара в 30 градусов для Нидерландов это давно не аномалия, а обычное лето. Дата-центры обязаны проектироваться с запасом под такие пики
Ппри словах "должны понимать" у меня глаз трясет.
У меня работодатель меня трясет с релокацией. У меня мама и папа в рф. Я куда релокация даже при условии ято два гражалнства. При том я не девопс,не бэк ...я банальный математик прикладник. Что делать? У меня два проекта и мне клод нужен
Нет, не должны. Потому что:
1. Если Вы нарушите контракт из-за каких-либо обстоятельств, никто Вас понимать не будет - вздрючат согласно условиям контракта.
2. Тревожные звоночки были за пол-года, и не один, но ситуацию не пофиксали. Возможно, кстати, тоже "вошли в положение" и не вздрючили купру за проблемы с инфраструктурой, а та не пошевелилась, ибо стимула не достаточно было.
3. Если есть проблемы с инфраструктурой, нужно указывать на ограничения пользователям, а не писать золотыми буквами "аптайм 99,98%", хвалиться, какие они Дартаньяны, а потом жиденько обделываться потому что "нишмагла".
46 часов простоя в Амстердаме
Там да, достаточно зайти не в ту дверь - и "потерял" несколько дней :))
Быстрый Гуглеж не дает подтверждений, что площадка была сертифицирована как Tier III.
А значит, хостер "приврал".
А что площадка обещала хостеру, мы вообще не знаем =)
это оч круто ты молодец но банить мне ак за ролл бс айпи не стоило -_-
База аренды стоек у провайдера третьего эшелона под видом премиум-услуги. Экономия на резервных чиллерах всегда вылезает боком при первых же серьезных нагрузках на сеть
Неделю назад переехал с этой помойки на Vultr)
Тоже надоела эта ситуация.
Понимаю что в текущих реалиях не все хотят работать с компаниями из России, но все же.
После переезда подняли ценник, при этом я не могу пользоваться услугой.
Посмотрел на этот ЦОД Купрум на панорамах - располагается в складском кластере. Никаких ДГУ снаружи не нашел, внутреннее расположение тоже вряд-ли, нет выхлопных труб и приточной вентиляции. Сколько-нибудь серьезных внешних блоков систем охлаждения так же не нашел.
Натуральная шарага, не удивительно что охлаждение там постоянно отваливается.
Удивительно, то что Таймвэб решили разместиться в таком месте.
просто выпал critical miss.
понять-простить.
у меня на таймвебе есть 1 vps за лет 5 uptime 100%.
задалбали они
Моя претензия — конкретная и узкая: кластер отказов питания и охлаждения в ДЦ Qupra в мае–июне 2026 года. Это не хакеры. Это инженерная инфраструктура площадки, за которую отвечает хостер. И именно она сыпалась раз за разом.
Хостер не может отвечать за питание и охлаждение в арендованном ДЦ, хостер только размещает серваки и прочее оборудование, или арендует их. Но выбор ДЦ явно неудачный, в прошлом ДЦ такого вроде бы не было.
Хостер отвечает за услугу перед клиентами, за питание и охлаждение отвечает ДЦ.
Если ДЦ не хочет или не может соответствовать стандартам хостера, то меняют или ДЦ, или понижают стандарты хостера (что, кстати, тоже возможно).
Хостер не может отвечать за питание и охлаждение в арендованном ДЦ
Хостера никто не заставлял сочинять про SLA, который ему самому никто не гарантировал (дураков нет). Это у нас в РФ можно насочинять с три короба, а потом "ой не шмогла вот вам сто рублей", в Нидерландах за такие фокусы ответственность будет гораздо больше (в b2b-то).
Не далее чем вчера допрашивал Claude про свой сервис, говорю, "что можем сделать чтобы SLA поднять до 99.9%?" - Claude отвечает "а тебе провайдер апи выше даст такой SLA? пиши SLO" - вопрос закрыт. Почему нейронка умнее юристов у хостера - вопрос открытый, я думаю они даже не заморачивались - "все пишут и мы напишем". Ну пусть проплатят 20 баксов и проведут ревизию своих SLA и прочих условий. Явно хуже не станет.
Облачный сервер в той же зоне, ситуация такая же. За последний месяц > 30 часов простоя по разным причинам.
На том же firstbyte все прекрасно работает… или они с другим дс договорились?)
46 часов суммарно... 28 суток подряд (и всё ещё лежат!) во втором ДЦ у VDSina, и они ещё Tier IV.
Но они не говорят, в какой именно локации в Нидерландах находились VPS.
Трудно обеспечивать аптайм для обесточенного оборудования в газели
За новостями следить надо... они не "лежат", в ДЦ там пришли вежливые люди и оборудование сейчас ждет перевозки на новое место на складах.
Тоже у хостера на много дней выпал амстердам. Написали историю своих мытарств.
Рассказываем, что произошло в NL/DE, или приключение на 20 минут - вошли и вышли.
2 июня: с разницей в 30 минут отключаются локации. Ясности нет, явно что-то не так.
К вечеру получаем сообщение, что дата-центр nLighten по собственной инициативе обесточил все оборудование и заблокировал доступ к серверным шкафам. Деталей очень мало.
Деталей по-прежнему очень мало. Спустя несколько дней получаем сообщение, что процесс сдвинулся с мертвой точки, планируют назначение даты выгрузки оборудования.
С 15 июня происходит выгрузка и миграция в другой дата-центр.
Сотрудники нового поставщика, к которому мы перевезли оборудование, не были готовы к проведению большого количества работ, что вызвало длительную задержку. В связи с этим было принято решение экстренно ехать сначала во Франкфурт-на-Майне, а затем и в Нидерланды, чтобы завершить работы своими силами.
20-го числа прибыли в Нидерланды, забрали нужные компоненты со склада и прямой дорогой отправились во Франкфурт. Дорога заняла примерно 5 часов на машине с минимальными остановками. В ночь с 20 на 21 июня запустили все сервисы в Германии, как и обещали.
Обратный маршрут был в Нидерланды. Согласовали пропуск в дата-центр, подготовили все необходимое и также оперативно завершили работы: выявили компоненты, которые вышли из строя из-за резкого отключения питания, и запустили все вычислительные узлы.
Более 10 часов перелетов, 1500 километров дороги для финального решения инцидента.
Что стало причиной? Доподлинно неизвестно. Предварительно, это беспрецедентное решение руководства сети дата-центров nLighten на фоне заявлений журналистов про компанию Mirhosting, которая занимается сопровождением IT-инфраструктуры. К слову, Mirhosting на всем протяжении безупречно выполняли поставленные задачи и показали высокий уровень компетенций. Сложно назвать произошедшее чем-то, кроме поспешных решений, которые повлекли за собой такие последствия.
Потери данных? Все данные, за исключением одного гипервизора, в полной сохранности. По нему все еще ведется работа.
Компенсации: начислено 22 дня + 1 полный месяц для всех услуг в Германии и 25 дней + 1 полный месяц для всех услуг в Нидерландах.
Выводы из всей истории: ситуация была сложной и беспрецедентной, по ней было трудно принять правильные решения из-за абсурдности и нехватки деталей. Потихоньку будем формировать дополнительные площадки в тех же странах, чтобы дать возможность создавать услуги на разных площадках, но в одной стране.
Таймвеб я использовал в 2012 году и очень понравился. В то время, ИМХО, это был лучший провайдер. Поэтому и сейчас взял VPS там. По принципу "недешево, но лучшее же"... Но уже который раз авария многими часами. С утра сервер лежит... начинаю разочароваться и думать, куда перейти... ((
У меня есть проекты на обоих упомянутых хостингах - OVH и Timeweb Cloud. Склоняюсь к решению, противоположному тому, что в статье, - уйти от OVH к Timeweb. Слишком трудоемкие пляски с бубном при ежемесячной оплате хостинга зарубежной картой, которая может в любой момент накрыться.
Это проблема не хостинга, а датацентра. Зацепило многих хостеров, кстати... Интересно, что же там случилось, пока информации не вижу.
Timeweb CloudFirstVDS и кто еще в купре сидит - всем было бы гораздо легче если бы вы хотя бы писали что происходит в данный момент. Ждём новые чиллеры, налаживаем систему охлаждения, пытаемся разобраться почему всё легло. Неужели купра настолько безответственные что не держат вас в курсе происходящего?
Судя по всему, вам и манагеры купры дают разную информацию. 1вдс до 15:00 по мск обещали инфу, таймвеб до 17:00. 17:30 - у всех всё лежит. Раз уж ЧП - не может один по связям с общественностью просто вести централизованный лог событий в цоде? Хотя бы передавать что купра говорит. Иначе что, сидеть просто ждать у моря погоды?
Допустим на hostkey.ru пишут, но одно и тоже. Ждем привоза оборудования до 14-00, после 14-00 сдвигаем вправо с той же формулировкой. Я так должен понимать не доехало еще и с этим не справились или это обычный футбол?
@masasibata
Спасибо за вопросы — они закономерны после серии инцидентов.
Начнем с главного. Сейчас на площадке идут аварийно-восстановительные работы системы охлаждения. Мы на постоянной связи с ее инженерами и публикуем обновления, как только они появляются.
Теперь по тому, что вы написали.
Про майский постмортем. Он задержался, и это справедливое замечание. К сожалению, мы зависим от данных партнера, и публиковать технический разбор с догадками вместо фактов считаем неправильным. Сейчас добиваемся полного отчета. Как только он будет у нас — опубликуем постмортем с нашими выводами.
Про компенсации. По SLA компенсация оформляется по обращению: в течение 30 дней после инцидента достаточно создать тикет в панели или написать на info@timeweb.cloud. Более подробно можете ознакомиться по ссылке: https://timeweb.cloud/records.
И самый важный вопрос — останемся ли мы на площадке. После этой серии мы уже пересматриваем стратегию по локации и параллельно оцениваем альтернативы. Обещать то, что пока не можем гарантировать, не станем, но эта ситуация для нас повод принимать решения, а не ждать очередного отчета от партнера.
Понимаем, что доверие возвращают не комментарии, а стабильная работа инфраструктуры. Поэтому наша задача сейчас — завершить инцидент и добиться от площадки гарантий, которые снизят риск его повторения. Если их не будет, то мы примем меры по переезду с площадки.
А почему нет хотя бы почтовой рассылки? Приходится ползать по ЛК и мониторить отдельно.
Спасибо что ответили хотя бы тут. В чате с вашей стороны тишина, хотя в админах сидит куча сотрудников. Он уже заполнен мемами про вас и ДЦ.
Раз уж заговорили за чат. Зачем вы убрали ссылку на него из канала с алертами? Ночью закрыли чат, а после утром включили слоумод на 1 час? Сообщения чистите. Вы же не успокаиваете людей этим, а наоборот драконите. Клиенты хотят связи со стаффом, объяснений. Более 20-и часов их проекты стоят.
Все-таки ваш ответ по инциденту в мае меня не устроил. Что было сделано с охлаждением? Как была устранена проблема в мае, в чем она заключалась и почему повторилась в июне? Не поверю что спустя месяц у вас нет информации об этом инциденте и вы не можете дать инфу в канал.
Ваши компенсации ничего не закроют. Прошло уже 20 часов, и мы уверенно шагаем ко всем 24. Такой даунтайм для любого проекта - подобно смерти. Мы теряем клиентов, репутацию, прибыль. Лично для меня даже компенсация эквивалентная аренде вашего сервера на ГОД не покроет мои потери.
Большинство уже пришло к выводу, что нужно переезжать. И они к этому готовы, единственное что осталось - чтобы проблема была устранена в Qupra и сервера поднялись. В тот же миг все делают бекапы и дружно переезжают к другим хостерам, после чего удаляют у вас сервера. Не думаю что у вас получится вернуть этих клиентов.
Так может стоит все-таки выйти на связь с людьми в чате, убрать слоумод и дать им высказаться, попутно отвечая на их вопросы, а не отмалчиваясь? Мы понимаем что проблема в ДЦ, но ваш выбор пал на этот ДЦ. Клиенты платят вам за услугу, за заявленный SLA, чего в итоге и близко не получают. При этом цены у вас действительно высокие относительно рынка.
Лично для меня даже компенсация эквивалентная аренде вашего сервера на ГОД не покроет мои потери.
При ваших потерях за день больше, чем стоит ваша же инфраструктура за год, есть смысл закладываться в гео-распределенные решения, иначе и новый хостинг рано или поздно выиграет в рулетку.
>Лично для меня даже компенсация эквивалентная аренде вашего сервера на ГОД не покроет мои потери
я думал веруны в то, что облака это белогривые лошаттки единороги и поники уже все вымерли )
У меня, как и у других коллег по несчастью, объективная претензия одна - не информативность всей ситуации, без вменяемой станицы состояния, алерты в запрещенном телеграме, которые тоже мало о чем говорят… вместо того, чтобы выйти на диалог с клиентами, как гитлаб в свое время, просто везде все подзакрыли и помалкиваете… народ нашел рупор сначала в идеях но и их закрыли… поэтому сюда все перешло…
П.с. Чукча не писатель - чукча читатель…
В соглашении об уровне обслуживания по вашей ссылке написано, что пострадавшим в этой ситуации полагается хер с маслом, а не компенсация. Выдержку из случаев не предоставления компенсации прилагаю.
По SLA компенсация оформляется по обращению: в течение 30 дней после инцидента достаточно создать тикет в панели или написать
Как удобно (нет) :) Вы знаете что нарушили SLA. Вы знаете какие заказы попали под нарушение SLA. Вы знаете сколько за каждый заказ платить при нарушении SLA. У вас есть команда разработки. Но осилить авто начисление компенсации - не хотите. Сложно? Нет! Специально, на "ну авось забудут" работаете чтоб бюрократией максимально еще создать преграды своим клиентам. Правильно... Пусть за 30 дней "помаринуются" после конца инцидента, возможно забудут, а потом им будет лень и писать уже. Вот и денежки сохранили. Удобно! Даю вам подсказку: сделайте что запрос на зачисление SLA можно подать только через "Почту России" заказным письмом.
Я использую хостинг от allhostings
У меня хостинг на сервере в Нидерландах. За последние полгода были кратковременные сбои. А в ночь с субботы на воскресенье (я после трех ночи) произошло что-то масштабное (а может и субботним вечером).
Сервер заработал только сегодня. Где-то в часов 15 +/-.
SLA это не гарантия аптайма, это просто прейскурант, по которому хостер покупает право лежать
Что ж сказать? Ребята не выдержали и из-за шквала критики и кучу мемов походу снесли свой тг канал подчастую... мдаааа)
Всё на месте, это у вас что-то глюкнуло
Выше писали, что за упоминание этой статьи банят в чате… Может @Domi_sama (случайно?) попал под раздачу плюшек…
Эх, hostkey тоже со вчерашнего дня именно в Амстердаме лежит. Пишут что авария из-за жары, хотя жара по прогнозу пару дней как спала.
Дополняю. В 18:48 TimeWeb все-таки решил выйти на связь со своими клиентами и написать в чат сообщение. Ситуация следующая:
В мае были проблемы с охладом, починили, чиллер заменили. 26-о июня произошла "сетевая недоступность", которая в будущем стала "проблемой с системой охлаждения, которую не могут вывести на полную мощность". 29-о число, 8:34 утра - снова проблема с охладом. 13:53 - проблема закрыта. 21:44 того же дня - охлад пал, не ожил. 30-е число - получили новые запчасти для чиллера(но видимо не помогли). 17:07 - отправили мобильный чиллер, но кабелей для него не нашлось. Кабели для него ожидаем завтра с 12 до 14 МСК, в лучшем случае. Дай бог бедный мобильный чиллер запустится и пользователи наконец-то получат доступ к своим серверам.
На данный момент даунтайм уже почти 23 часа.
У меня на AdminVPS сервер Нидерланды там же видимо, уже сутки недоступен из-за проблемы с охлаждением..
Сейчас у многих ЦОДов проблемы из-за аномальной жары, но могу порекомендовать следующее: hostkey.ru (оплата возможна в ru за сервера в NL и других локациях по всей Европе), мы сами через коллег сервера размещаем - локаций в NL у них много, а также в других европейских странах. НАШИ сервера в хосткей сейчас работают - возможно только в одном из цодов проблема, кстати говоря всем желающим можно создать и настроить проекты действительно отказоустойчивые с разнесением vm в разные цоды и балансировкой - фактически это делается сейчас из коробки
Ты уверен что Нидерланды hotkey работают??
про hostkey.com интересно: у них на главной странице красным текстом
явно про это же написано:
Update on the Incident at the Amsterdam Data Center 30 June 2026, 18:40 CEST: Recovery work is ongoing. Additional components required to start the cooling system are expected to arrive later today. The next update will be published no later than 01 July 2026, 13:00 CEST, or earlier if new confirmed information becomes available.
с другой стороны, в разделе "Дата-центры" упомянут euNetworks, из которого TimeWeb ушел, сказав, что он закрывается в июле.
Может быть, Вам повезло и ВАШИ сервера хосткей ещё не успел перенести в новый ДЦ?
HostKey в т.ч в этом же ДЦ что и Timeweb - Qupra DC2. Они сами это указали на https://www.peeringdb.com/fac/16111
После предпоследней аварии, сделал бекапы через панель, чтобы вдруг если случится опять перекинуть снапшот на другой сервер и пользователи не страдали. Риторический вопрос: доступны ли бекапы и на каком сервере они хранились)))
Кроме Timeweb, в Qupra сейчас еще с десяток российских и не только хостеров. Это произошло из-за закрытия в июле ДЦ euNetworks. Видимо Qupra предоставил какие-то гарантии хостерам, раз туда переехало столько компаний (арендую сервер у одной из них и он тоже сейчас в отвале. У этой компании еще и головный сайт с панелью управления был в этой локации), не все же такие жадные побежали туда чтобы сэкономить (мой хостер, к примеру уже тоже планирует переезд в другой ДЦ). Цены сейчас на аренду в регионе NL у этих компаний - копеечные, по сравнению с другими вариантами (тоже искал резервную площадку на время отпадания NL). Автор хотел подешевле и при этом понадежнее, но так увы - не бывает (за надежностью вам к Hetzner или DO, ах да, они не принимают от нас оплату, а с нашей стороны подсети заблочены). Арендаторы стойкомест по факту - ничего не могут сделать в текущей ситуации, у них по сути есть только доступы к коммутаторам своим и розеткам + отписки от ДЦ, которые они стараются передать пользователям. К чилерам и прочему оборудованию в ДЦ у них естественно доступа нет. Хостеры могли бы делать резервирование на других площадках, но это увеличило бы цену в х2-х3, а за эту цену уже никто брать не будет такие сервера. Автору хочу посоветовать то же, что сделал я - продублировать площадку на другую локацию, чтобы иметь резерв. Обвинять хостеров в том, что им отрубили розетки - на мой взгляд бессмысленно в данной ситуации, учитывая кучу факторов, в том числе то, что в европе сейчас так жарко, что в германии светофоры плавятся, отношение к ру-компаниям в целом (никто не хочет с нами иметь дел сейчас), цену на сервера и то, насколько много и зачем сейчас арендуют VPS-ки в AMS зоне и РФ.
"Автор хотел подешевле и при этом понадежнее, но так увы - не бывает"
тут ошибка: а этой же локации AdminVPS или First продают те же VPS-ки дешевле
то есть Timeweb спозиционировали себя как дорогие потому что у них надежность, много умных статей и историй какие они классные
а по факту они точно такие же реселлеры и от них ничего не зависит
UPD: насчет цены еще наюнсик - тот же дигиталоуэшен или хецнер уже стал дешевле таймвебовцев
Та же фигня.
Попробовал раз VPS у timeweb, больше не буду.
В защиту TimeWeb скажу что имею очень положительный и продолжительный опыт использования услугами. Долгое время у меня были серверы в зоне МСК, аварий не помню совсем, кроме одного крупного DDOS. Что же касается иностранных сервисов - ну ребят, вы посмотрите на гугл-картах как этот дата-центр выглядит. У меня вторые стуки лежит сервис. Да и учитывайте международную обстановку в конце-концов. "Нужно понимать всю глубину наших глубин"
Ужас, конечно... И кошмар... Но! Если уж охлаждение в физическом ЦОДе "посыпалось" и не тянет нынешнее излишне жаркое европейское лето (то ли при проектировании недоразмерили холодилку, то ли оборудование не самое удачное выбрали). То вероятность, что оно по мановению волшебной палочки починится - не велика. Надо полномасштабную реконструкцию системыиохлажления проводить. А это - год.
Так что, я бы ожидал дальнейших катаклизмов на этой площадке. Какбы печально это не звучало.
Видимо FirstVDS там же хостится. График сбоев совпадает с вашим полностью.
p.s. В ЛК указан датацентр: Qupra DC2.
UPD: сервера частично ожили, но бьются в конвульсиях
Больше года уже наблюдаю проблемы у таймвеба. Сначала с пониманием относился, потом начал переносить понемногу проекты. Для зарубежных серверов уже 3 месяца на ДиджиталОушн полет нормальный. А еще и дешевле в 2-3 раза.
Спасибо за статью. Кто какие альтернативные предложение по VPS в Амстердаме может порекомендовать?
Я вам сочувствую, но данная ситуация говорит о вас, как о человеке, который не позаботился о безопасности своей работы и об отсутствия плана Б, к сожалению. Я думаю, нет смысла писать сюда о ситуации в нашей стране и об отношении других стран к нам. Проблема с впс и выделенными серверами наблюдается не только у ТаймВеб. Эта ситуация касается всех Российских ДЦ, арендующих стойки в других странах, по известной всем причине.
Если вы рассчитывали на чудо, то чуда не будет, у вас должен был быть запасной план на случай подобных ситуаций, на которую ТаймВеб не может повлиять напрямую. Как минимум: ежедневный бекап и готовый слепок сервера локально, который вы можете быстро развернуть в другом месте. Вы этого не сделали, теперь имеете то, что имеете. Я сейчас никого не защищаю, но странная позиция винить в своих ошибках других.
у вас всегда с собой набор для реанимации от укусов зомби? а рекомплет для замены тормозного цилиндра? а загранпаспорт мальты? как нет? данная ситуация говорит о вас, как о человеке, который не позаботился о безопасности своей работы
хостинг должен стабильно работать, точка.
Ежедневные бекапы имеются. Речь сейчас не о том, что мы должны быть готовы к такому. Это понятно. Речь о том, что хостер переехал в ДЦ далеко не Tier 3 как утверждает, без сертификации. И элементарно там каждый месяц падает охлаждение, а резервного нет. Это норма?
Какой дурачок при свободном выборе между OVH и таймвеб будет брать таймвеб? OVH это хостер с мировым именем который требует свифтовых карт и явно KYC идентификации не на русское имя. Таймвеб с таким вообще не должен сравниваться это две разные категории. Если у тебя уже есть KYC и свифтовая карта нет смысла в этом выборе, если их нет, то смысла в нём нет тоже.
14-00 МСК 01.07.2026 - даунтайм продолжается, отписки от Таймвеба со вчерашнего дня нет. Привезли силовые кабели или не привезли, неизвестно
Есть у Таймвеба еще один веселый момент. Часть их сетей в ГеоIP базе Гугла проходят как казахские. Довольно забавно смотреть Ютуб с казахской рекламой.
Подписываюсь под каждым словом автора. Ещё дополню любопытную стратегию TW:
- включать в чате комьюнити кд 60 минут, когда сервера ложатся;
- отключать возможность писать в чат, когда серверам совсем плохо;
- снимать блок и кд, но удалять ссылку на чат вообще отовсюду, когда ситуация из ряда вон.
А, да, ещё биллинг отключили только к концу вторых суток простоя. Когда ситуация вот-вот нормализуется (по заверениям). Решения какого-то запредельного уровня...
Та же история с firstvds......уже вторые сутки сервак в Qupra DC2 недоступен.....
Тоже были проблемы с их сервером. Провисело 2 недели. После изнурительного общения вопрос решился.
У нас с ними вообще случилась забавная история. Мы у них держим домены и почту. 25го июня утром у нас отвалилось всё. В непонятках начали искать, что случилось. Оказывается домен перенесли в "отстойник", т.к. 24го июня кончилась регистрация. На балансе деньги есть, автопродление - включено. Начинаем продлять домен вручную, на все манипуляции - "неизвестная ошибка". Удалось продлить только через пополнение баланса (СБП). После продления домен завис в стадии возобновления. И все. А самое прикольное что нам ответил чувак из техподдержки:
Здравствуйте!
По данным сейчас домен ***.ru уже в зоне просроченных: он делегирован на ns1.expired.timeweb.ru и ns2.expired.timeweb.ru, поэтому службы, завязанные на этот домен, перестали работать.
То, что на балансе есть деньги и включено автопродление, само по себе не гарантирует продление: важно, как именно прошло списание за домен и какие настройки автопродления стоят именно для него.
Вот такие дела...
больше скажу, до сих пор не восстановили. Тоже принял решение, что буду выходить.
Я хочу ещё момент подсветить:
- Они ограничили чаты внутренние, удаляют все сообщения, поддержка не отвечает сутки. То есть банят людей даже в комментариях, за попытку войти, если ты хочешь зайти.
Вот это самое ужасное, что может быть. Я перевёл часть проектов на сервак попроще. И то, прикол в том, что технически сервер не выключен у меня. Поэтому мне везде нужно было поднимать и ревокать токены и менять каждый проект.
Но походу будем переходить дальше, искать также иностранный IP.
Если у кого есть рефералка и предложение по серваку, с 1ГБ в сек скоростью, иностранным IP и норм пингом - свяжитесь со мной, пожалуйста, можно здесь в личке или я отдельно тг напишу
Вчера отключил автопродление, тоже достало это все. Причем цена ещё очень большая. Не вижу смысла уже у них сидеть
Ну вставлю свои 5 копеек. Я свалил с этого хостинга. Был один сервер. До этого год работал и как то не особо смотрел за аптаймом. Нужно было постольку, поскольку. Тут 25го закончились деньги на счёте. Виртуалку заблокировали. Ок. Вливаю оплату за год. Включаю. И ничего. Висит в статусе запуск. Пишу заявку. Говорят починили. Проверяю. Не работает... Ну то есть в панели управления пишет что запущена, но зайти на неё не могу. Отписался что не работает и на этом тех. поддержка уходит в закат. На топик никто не отвечает. Создал ещё один. Говорю пните их там. Ок. Мы поднимем приоритет, ждите час-два. Жду. Нет движений. В общем приоритет поднимали раза три. Сервер восстановили. Заняло это 10 часов. Вот так работает тех. Поддержка. Но по итогу кинули бонус. Оплата хостинга на неделю. Запоминаем этот момент.
Теперь вторая часть. Вчера с утра смотрю. Виртуалка выключена. В истории нет ничего кто ее выключал. Включаю и она так же и висит в статусе запуск как в прошлый раз. Хорошо. Пишу заявку в тех. поддержку. И в ответ тишина. Полный игнор. У них указано что ответят в течении полу часа. Не ответили. В общем я завёл так же ещё пару тем попинать висящую. И получил в основном топике отписку о проблеме выше через 8 часов. В одном из топиков им отписал что давайте заканчивать. Блокируйте счет и делаем возврат оплаты. Предложили подождать. Ну ок. Сегодня утром все так же висит. На тот момент это уже 28 часов с момента первой заявки. Пишу опять что нафиг ваш сервис. Делайте возврат. А теперь следите за руками. Они полностью списывают со счета начисленный ранее бонус себе в карман. Остаток неизрасходованных средств пишут что вернут. То есть первый простой они деньги списывали. Сейчас пока я, ждал ответа они исправно начисляли оплату за то что не работает. И это за мой счёт. То есть как они объяснили, бонус можно потратить только на оплату их услуг. Но деньги о6и взяли не с бонуса, а с мной оплаченных. А компенсацию за первый простой забрали себе. За второй простой о компенсации даже не вспомнили. Сумма небольшая, от меня не убудет. Но показательно какой это крохоборский сервис.
В общем наверное если бы я получили вчера в разумные сроки это сообщение что у них проблемы и надо подождать, возможно я бы сейчас ждал. Но работа тех. поддержки когда тебя тупо игнорят целый день. При их же назначенных споках ответа. Ну это издевательство. Что в прошлый раз тех. поддержка себя, показала неадекватной. Что сейчас.
16:45 Заработало.
Поднялись.
SLA таймвеб - это шутка над пользователями. Сам там сидел, но в ру сегменте - их европейский сегмент никогда не возбуждал. Так даже ru сегмент деградирует под постоянными DDoSами и абсолютным неумением хостера от них защищаться.
Месяца 2 назад был простой кластера менеджед куба почти на неделю.
Уже накопилось инцидентов минимум на 99.0.
Если европейский - рекомендую cherryserver. За все это время ничего с ним не происходило.
Очередная статейка обиженного клиента. Не в защиту таймвеба пишу, просто всегда забавляет читать такое, когда кого-то сильно огорчили и человечек бежит строчить всякую хрень (а тут ещё и с помощью ИИ, во прогресс-то, мамочки, даже думать особо не надо), в надежде, что его поддержат такие же обиженные (формируется этакий кружок по коллективной психотерапии ветеранов таймвеба)), а заодно дадут вертолет, миллион долларов и поцелуют в жопу и даже если компания это внезапно сделает, он как Роршах из “Хранителей” скажет НЕТ! КАЙТЕСЬ ЕЩЁ, СУКИ!))
По факту, мы все любит своих хостеров, банки, операторов связи, пятерочки-магниты, парикмахеров, врачей, сантехников и так далее ровно до первого, второго, третьего … (очередной красно-коричневой линии) косяка, а потом топаем ножкой, говорим, какие все плохие и ужасные (ведь услышав наше важное мнение, все обязательно станут лучше), и бежим в другое место, где… всё повторяется и ты снова оказываешься ЗДЕСЬ, плак-плак. И так раз за разом. Цикличная, мать её, история.
В общем, братишка, не пиши больше - ИИ статьи отстой, мне неинтересно (кому вообще в здравом уме это интересно), почему ты уходишь и куда, лучше на отзовик относи сразу или блог себе заведи в телеграме там. Хабру и так нехорошо. Ну и пользуйся тем хостером, который нравится, а который не нравится - тем не пользуйся)
Зарегистрируйтесь на Хабре, чтобы оставить комментарий
Почему я ухожу из Timeweb Cloud: 46 часов простоя в Амстердаме за два месяца — по данным самого хостера