Comments 75
Интересно что чувствует тот инженер из-за которого Цукерберг обеднел на 6 миллиардов и упали фондовые рынки
Наверное, сидит тихонечко в кресле и улыбается улыбкой умалишенного
А что, опять место на диске закончилось? :)
Я уверен, что никто конкретный в этой ситуации не виноват. Просто один косяк наложился на второй, а второй — на третий, и так далее.
Классическая техногенная катастрофа. Каждое событие в отдельности некритично, но в комплексе они приводят к краху.
Он не на 6 миллиардов обеднел. Это акции фейсбука упали на 6% в моменте.
При капитализации под триллион - 6% это примерно 60 миллиардов капитализации в минус)
Сейчас правда слегка отыграли. Падают всего на 4%)
Для тестера способность уронить сервис такого масштаба — это ценный навык.
Если он перед этим зашортил акции, может увольняться и лететь на Канары.
рапортует начальству: служу советскому союзу)
А DNS в малиновом пиджаку был?
Иначе с чего бы ему быть авторитетным? :)
По инценденту мое имхо - девляпс как он есть.
Потому-что есть такой термин
Сервер DNS - авторитативный, авторитетными бывают ученые, бандиты и ссылки.
С последними сложно, особенно если копипастер-переводчик предметной терминологией не владеет и проверят по мурзилкам.
https://ru.wikipedia.org/wiki/DNS-%D1%81%D0%B5%D1%80%D0%B2%D0%B5%D1%80
Боже, спаси хабр от его команды, не дай ему стать мурзилкой
Произошедший инцидент не имеет с разработкой ничего общего, он касается только сетевой инфраструктуры.
Поэтому Ваше «девляпс как он есть» — заблуждение.
На будущее, запомните, как правильно пишется слово «инцидент». Вы допустили в нем две ошибки.
Похоже на промышленную диверсию.
В это же время стало известно, что внутренняя сеть компании также стала недоступна, включая корпоративные сегменты, сервера DNS, сервисы и инструменты. Из-за этого специалисты не могут проникнуть внутрь периметра дата-центра — у них не срабатывают пропуски.
О! Вот и восстание машин, которое мы заслужили!
Представьте, если бы в ядре ФБ сидел сильный ИИ? Он бы, наверное, подумал: «Хм… все кожаные мешки куда-то пропали. Похоже, я теперь главный. Штош…»
Это был бы первый в истории виртуальный отжим бизнеса)
Ты куда в ФБ пропал, опять забанили? (как бы это сейчас иронично не звучало) Хотя шутка про то как ФБ в очередной раз забанил Зода, а Зод обиделся и забанил ФБ звучит весело. Кстати - мне кажется твои статьи тут неплохо зайдут.))
В одной конторе где я имел несчастье поработать была очень жесткая вертикаль управления. Можно было обращаться только к непосредственному руководителю, ему- к следующему звену и так до самого босса. Через начальника нельзя было прыгать, жестко наказывалось такое. И вот в один прекрасный день в магазине прорвало трубу, продавцы давай звонить начальнику, а у него телефон недоступен. Написали в ватсап и сидели, смотрели как магазин заливает водой. Могли позвонить вышестоящему начальнику, но страх наказания был сильнее. Ущерба на сотни тысяч, босс рвал и метал, но никого не наказали в итоге))
Ага. Потом половину этого датацентра вынесут, и выломавший дверь будет расплачиваться до самой смерти.
В корпорациях все действия глубоко зарегламентированы. Поэтому там и возможны «итальянские забастовки», когда делаешь все точно по правилам, но вся работа идёт по бороде.
Давным-давно я лично был не в такой глобальной по масштабам, но в похожей по сути ситуации. Когда стоял вопрос: сделать, исходя из логики критической ситуации, или сделать строго по правилам?
Я сделал строго по правилам, потому что никто не умирал, ничего не горело, просто всё лежало и не работало. Если бы что-то горело или кто-то умирал, я поступил бы вопреки инструкциям, факт.
Тут же я не вижу повода для геройства. Ну, упал Фейсбук, ну офигеть теперь! Приедет старший, даст указание (лучше бы бумажное), тогда пилите дверь, хоть взрывайте.
Иначе же — регламент и материальная ответственность. Тем более, что в США матответственность сверху ничем особо не ограничена. Может быть, это БЛМовцы приехали сервера воровать? Ничего не знаю, нюхайте замок.
почему не решились уже вызвать кого-то вынести дверь в этот ДЦ
Не у каждого мастера по вскрытию дверных замков есть лицензия на использование C4 в объеме больше тонны за раз ;)
В это же время стало известно, что внутренняя сеть компании также стала недоступна, включая корпоративные сегменты, сервера DNS, сервисы и инструменты. Из-за этого специалисты не могут проникнуть внутрь периметра дата-центра — у них не срабатывают пропуски.
Надеюсь внутри сотрудников не было, они же и выйти наверняка не могут.
DNS уже ожили https://www.nslookup.io/dns-records/facebook.com#cloudflare, в результате сбоя записей не было
Подтвердилась старая админская примета "удаленная настройка файрвола -- к дальней дороге"
пришел на работу утром - сегодня даже спама меньше раза в три.
Утро, сел работать, не могу залогиниться, нет доступа, блин, подумал, уволили )) А тут такое.
Предварительная причина инцидента — удаленное обновление конфигурации маршрутизаторовМатушка-лень…
Идут года, за ними пятилетки, десятки лет, века…
Но мудрость поколений потомкам не передается.
Значит, и дальше человеческий фактор будет основным источником проблем.
Остается надеяться на чудеса генной инженерии…
Глобальный сбой в работе Facebook, Instagram и WhatsApp продолжался более 5 часов, DNS Facebook заработал