Pull to refresh

Comments 97

UFO just landed and posted this here
Вы не один такой. Я тоже увидел и начал выяснять что ж случилось.

Пока не ясно, надолго ли это. Как станет известно — добавлю в пост.
На короткий срок ложились colocall & dc.volia.com — но в целом живые
В числе недоступных — самый крупный укр. магазин rozetka.ua

Также пострадали сайты с установленой банеркой holder.com.ua/ (и.уа)
Они не грузятся — ожидая банеров, которые как правило в шапке сайта.
Укртелекомовский ДЦ похоже проблема (или пока?) обошла.
Да, Волю как то обошло по сравнению с другими провайдерами.
Кстати была когда-то похожая ситуация, когда задели оптику на харьковском, тоже лежал сегмент, примерно год назад.
Да не скажите что обошло, мой сервер на воле периодически выпадает секунд на 30
Ну, видимо кого-то сильнее зацепило, а кому-то больше повезло в этой ситуации. Судя по домашнему мониторингу, мои сервера на Воле вообще не затронуло, а вот Мирохост поколбасило.
У кого генераторы и резервное питание есть те справляются но могут часть серверов выключать что-бы другая часть работала.
colocall@Бункер, видимо, не ложился: у себя в мониторинге перебоев в работе не вижу.
Мне одному кажется, что таким новостям не место на хабре?
Вы считаете, что это никак не относится к IT?
Я этого не говорил. Я считаю что такие «новостные выплевки» не нужны на хабре.
Если бы через несколько дней появился грамотный пост об этом происшествие, но с подробностями о причинах возгорания, что именно легло, как именно в этих дата-центрах пережили это, то вот этому и есть место на хабре. А так это для твиттера\блога пост.
Если бы не такие «выплевки», многие вообще не знали бы, отчего их сайты перестали работать. Как быстрый способ узнать, что случилось — вполне должно оправдывать свое существование. А потом уже можно и расследование развернутое провести, отчего и почему это случилось…
Что значит не нужны? Я тут на провайдера гоню, а это, оказывается, авария в Киеве.
1. Безуспешно пытался выяснить, почему «лежат» сайты на хостпро.
2. Видел в новостях репортаж о пожаре на станции киевского метро.
Первое со вторым не связал никак, пока не прочел заметку на хабре. Так что автору однозначно спасибо за новость.
а где им место?

Вполне себе айтишная новость, о которой, кстати, я даже не нашел упоминание на различных новостных ресурсах, все говорят про пожар в метро, а про проблему с сайтами — молчат, либо еще не успели написать.
Не правда. Вчера еще в половину седьмого Лига уже опубликовала заметку про аварию — biz.liga.net/all/it/novosti/2152468-sayty-na-mirohost-vremenno-ne-rabotayut-.htm

Т.е. где-то после 1-1,5 после начала проблем с сайтами уже появились новости.

Поиск гугла по новостям рулит :)
они опубликовали топик в 18:44, где-то в это время я и зашел на хабр и не нашел ничего, так же не нашел ничего в поиске по новостям.

Этот топик я опубликовал в 19:11 :) Так что все правда.
Новость была проиндексирована почти сразу, но я сам на неё вышел с трудом. Пришлось всякие извраты в поиск вбивать. Что только в голову не лезло — от рейдерской атаки на Мирохост до атаки анонимоусов на корневые днс-сервера. А оказалось причина в сгоревшей лампочке на станции метро…
Да, только вам. Мне вот интересно было отчего rozetka перестала работать, в следствии чего я не смог купить там бойлер.
первое дело, куда я пошел, чтобы хоть что-то узнать (помимо того, что уже знаю) конкретно по этой проблеме — Хабр.
Да, я был удивлен, что еще никто об этом не написал. Решил написать. Как видим — не все знали о проблеме.
две одинаковые картинки на главной 0_о
это не оптическая иллюзия :)
т.е. вы это специально?
да нет, так получилось. Я эту отдельно закачивал, даже не зная, что там уже есть новость с такой же картинкой.
а я подумал, что это результат обновления хабра )
Это один из способов начать технические работы в Nginx
Пока не работает. Сайт на Mirohost
Обновление от Датагруп: в ДЦ восстановлена работа 2х портов, но проблемы еще есть, связь с серверами может пропадать/появляться. /СБ
Сайт мирохоста заработал, мой сервер — нет
Вам повезло. Там всего два порта только начали работать.
да, у нас тоже сайт заработал.
В датацентре Мирохоста крупная авария электропитания. Обещают к 21 часу полностью восстанивиться. Сочуствуем коллегам и их клиентам. © @colocall
спасибо, добавил в пост тоже.
У вас еще не выкапывали оптику? Вы не знаете, как забивают сваи в метро? У вас не горела подстанция, снабжающая электроэнергией несколько районов пятимиллионного города?
Тогда мы идем к вам!
Нет, лучше мы к вам — с оранжевым приветом:)
О mirohost: по питанию «подарили» 10K Bатт. Упсы и стабилизаторы не рассчитанные на подобный неадекват вышли из строя.

Сервера клиентов, насколько нам известно, живы, на большинство уже можно зайти по ssh.

О rozetka.ua: никакие данные не пострадали, основной сервер уже работает, скоро восстановятся реплики и заведутся слейвы (сервера вырубило по горячему).

Должен сказать, что дата-центр очень оперативно и подробно держал в курсе происходящего, за что им отдельное спасибо.
название датацентра в студию.
Это ж серверная комната с инфраструктурой NewTelco, по сути отдельная гермозона, не более.
Называть это датацентром у меня язык не поворачивается.
Хотя конечно сайт их почитать и складывается впечатление что там мегадц…
UFO just landed and posted this here
Конечно же вольт, спасибо, что обратили внимание
Уточните, пожалуйста, потому что предложение: "… подарили 10 кВ" — может носить двойственный характер:
1) Подключили питающую подстанцию 10/0,4 к резервной линии питания. — радостная новость.
2) Подали по-ошибке на сторону 0,4 — 10 кВ. — печальная новость.
У хостпро, на двух серверах еще в 13-14 начались проблемы со связью. Горело внутри станции, точнее люстра. Как она могла задеть оптоволокно — загадка, разве что, оптика проложена по станции.
У Укртелекома, на сколько мне известно, свои каналы.
Думаю, что проблемы была больше в энергоснабжении. По-идеи, когда тушили метро — электричество отключали. Вот могли и Датагруп остаться без энергии.
Некоторые очевидцы уверяют что видели огонь и в перегоне
Ура, мои сайты уже работают (Мирохост)
Есть мнение, что авария задела магистраль идущую на UA-IX/G50, но официальных заявлений по этому поводу пока не было.
у меня и коллег весьма резонансные проекты восстановилось довольно быстро.
(Мирохост)
спасибо, ребята.
держитесь.
Хостпро 12 марта:
В связи с проведением плановых работ на сети ЧАО «ДАТАГРУП» 14.03.12 с 09:00 до 10:00 возможно прерывание предоставляемого Вам сервиса связи до 2 минут, по следующему адресу:

г. Киев: ул. Гайдара, 50.
Ура. Почти всё у хостпро ожило. Почта пошла.
«Связь со всеми нашими стойками восстановлена.» /СБ

Хостпр восстановился
вроде и вниз стремится
Большинство сайтов уже возобновило свою работу, как и хостинг-площадки.
adamant.ua очень быстро куда-то и как-то переподключился.
Примерно в это время увидел что 2 сайта + phpmyadmin резко 502 отдали но через пару минут все заработало, даже не понял что случилось.
интересно что
включив телек — в новостях пожар в метро,
включил комп — несколько укр сайтов почти не грузились
(в районе 8-ми вечера) и все это в черновцах)

мелькнула мысль, что случилось что-то более чем просто пожар, а вот нет, любимый хабр уже в курсе ))
Я вообще фигею, пожар в метро повлиял на весь украинский сегмент. Особенно отличился мирохост.
Даже наша небольшая конторка может себя обеспечить электричеством неограниченное кол-во времени (ну, пока топливо не кончится), неужели для операторов так тяжело сделать толковое электропитание?
Тут как говорится не говори гоп пока не перепрыгнешь. Вы же не знаете деталей происшествия. Или может ваша конторка продолжает бесперебойно работать при выгорании UPSов?
Может, у нас 4ИБП суммарной мощностью 70кВА.
Если вылетит половина — мы все равно будем работать. Даже если вылетят все — на щитах они переводятся в байпас и запускается дизель.
Включаете байпас, запускаете дизель — и рискуете убить железо которое от этого питается (в первую очеред клиентское)?
Может быть, человек имеет в виду, что выход дизеля на номинальные обороты/напряжения — занимает некоторое время?
Но все современные дизель-генераторы предусматривают режим выхода на номинал.
Недавно была авария на «Новом канале» (ТВ).

Так вот, там 2 независимых ввода от ТП, 2 дизель-генератора, несколько ИПБ.

Эфир пропал на 7 минут. Так что, зарекаться не стоит.
Это все хорошо в теории. Думаю до аварии, владельцы мирохоста также хвалились своей «неубиваемой» системой. Зайдите на сайт мирохоста, там красочно расписано, и про 2 независимых канала питания, и два независимых подключения в UA-IX, 2 зарубежных канала, дизели, ИПБ. Или Вы всерьез считаете что на одном из крупнейших хостеров Украины, не знают что такое ИПБ и дублирование всего?
Но бывают случаи когда теоретическая надежность не соответствует практической. Можно ту же Фукусиму вспомнить.
Для этих целей есть автоматы, дублирующие системы.
Если такого нет, то это треш-датацентр.
Из того что я видел у них и N+1 по питанию нет.
Собственно наверно потому и заполненность такая мизерная.
Всё у них есть, в новостях же написали
«Вышли из строя оба источника бесперебойного питания (UPS), включённых в параллель для резервирования по схеме N+1, через которые было подключено электропитание всего дата-центра.»
А вот тут уже начинается бред.
N+1 предусматривает что дублирующее оборудование включается только при проблемах с активным.
Возникает вопрос, как могло выйти из строя отключенное оборудование.
И ответ один — там нет N+1.
Ольшанский, между прочим, так и не ответил почему нет элементарной защиты от перепадов на входе.
Включились хотя бы напрямую от NewTelco где стоят, у них хоть автомат есть.
Есть подозрение, что не пожар стал причиной аварий, а скачок напряжения/мощности вызвал и пожар и аварии
Не такой там и большой пожар чтобы аж оптику где-то в земле поломать, если только оптика не прямо над станцией проходит, что было бы странно.
> Точная причина выхода из строя оборудования, которое как раз предназначено для обеспечения бесперебойности питания, пока не установлена.

Мне кажется что ситуация показательна и есть наглядной демонстрацией гимна безответственности.
UFO just landed and posted this here
Уже вроде еще вчера все исправили. Или у вас что-то не работает?
Использую решение от Canonical — Ubuntu One для бекапов важной инфы, без котой в случае чего не жить. Для фото есть съёмник в двух экземплярах, обновляющийся 2 раза в год. В сети фотографии только «Паблик», чего и вам советую.
Госпади, не туда ответил. Токо не сливайте за офтоп.

По теме: Все работает. Спасибо за оперативные новости. Я бы в глубинке и не узнал бы об этой аварии.
Почитал журналистов, а также почитал письмо Сергей Полищука от 15.03.12 02:10, которое собственно и является информацией «из первых рук», но так и не понял как технологические площадки UA-IX на Леонтовича и/или на Гайдара (правый берег) связаны с пожаром на метро «Осокорки» (левый берег):

«На одной из технологических площадок UA-IX одновременно были обесточены все вводы электропитания.
В результате, 45 портов Участников, а также: logger.ix.net.ua, lg.ix.net.ua, ntp.ix.net.ua, RS-2, Root DNS mirrors
были недоступны на протяжении 32 минут в интервалах времени 17:40-18:00, 18:41-18:45, 19:01-19:09
Причины аварии уточняются.»

Имхо, но господа от журналистики попытались связать не связуемое.
Связаны например так — во время отключения электричества в метро (для тушения пожара), произошел скачек напряжения в городской сети, из-за чего на входы УПС-ов на Гайдара,50 пришло 10кВ вместо 0.4кВ. Образовалась дуга, которая просто приварила автоматы (соотв они даже не успели сработать), батареи УПС-ов просто взорвались, про электронику я уж молчу…
Благо рядом стояли новые УПС-ы, которые должны были с дня на день заменить старичков, их и подключили в экстренном порядке, иначе авария бы затянулась не на один день :-\
Исходя из этого стоит предположить, что все наши энергосети работают без систем защиты, а клиенты запитываются напрямую от высоковольтных линий минуя трансформаторы и т.д. и т.п.
И при таком раскладе «пришло 10кВ вместо 0.4кВ» на Гайдара 50 должно было бы погореть оборудование не только UA-IX'а, но и других провайдеров присутствующих в том офисном центре. Но вот в чём беда, у нас там ничего не сгорело и всё оборудование работало в штатном режиме.
Да и помимо этого при «скачке в городской сети» погорело бы куча оборудование у кучи народа в центре города, но об этом никто не пишет, никто не говорит, все молчат.
Именно поэтому я скорее поверю в простое совпадение по времени этих двух событий, но не в вышеприведённую версию про 10кВ… ;)
Собственно ещё одна цитата из сообщения, показывающая несостоятельность идеи про «10кВ», ответ на запрос в «Киевэнерго»:
Обслуживание и эксплуатация энергохозяйства коммунального предприятия «Киевский метрополитен» не относится к компетенции ПАО «КИЕВЭНЕРГО». Метрополитен имеет собственные электрические сети и источники питания, в том числе резервные, которые обслуживают его же службы.

14 марта 2012 года оборудование ПАО «КИЕВЭНЕРГО», обеспечивающее электроснабжение потребителей, расположенных по ул. Гайдара, работало стабильно, без нарушений.

Аварийных отключений электросетей, которые эксплуатирует Компания, в период с 17.00 до 19.00 по адресу ул. Гайдара, 50 не было.
Вероятно вы правы, но факт — батареи упсов взорвались а автоматы приварились…

Бред сивой кобылы, какие 10кВ?
Вчера вечером об этом относительно оперативно написали — biz.liga.net/all/it/novosti/2152468-sayty-na-mirohost-vremenno-ne-rabotayut-.htm

Но все равно не могу понять (как и многие другие) — как скачек напряжения спалил бесперебойники в датацентрах? Разве они запитываются напрямую от городских кабелей питания без системы сетевых фильтров?
Снова проблемы у Датагруп со связью.
Всё. Заработали. На этот раз быстро.
Угу ночью они баловались.
И сейчас что-то икнулось

"
Примите предупреждение.
В связи с проведением плановых работ по глобальной модернизации ядра интернет-сети ЧАО «ДАТАГРУП» 04.04.12 с 02:00 до 08:00 будет перерыв в работе услуги доступа к сети интернет в течении 2-6 часов.

По возможности простой будет минимизирован.
Приносим свои извинения за причиненные неудобства.”
"
Sign up to leave a comment.

Articles