Сомневаюсь, на длинной дистанции TCO лент будет больше чем у хранилок аналогичного объема. Плюс, у лент есть такие приятные плюшки как невозможность какого-нить WannaCry зашифровать данные :)
Если in-house система просрёт эти данные, то даже письма не будет. ;)
Не просрет, для этого как раз правильная организация всего процесса и нужна.
Какой sla у всей этой инсталяции?
Достаточный:) Вынуть данные с ленты — это где-то полчаса времени, с учетом перекура. В случае конкретно архивного хранения, никто не ожидает on-line доступа к данным, тут в первую очередь важна именно надежность. А с надежностью все хорошо — 2 ЦОДа, 3 копии каждого куска данных, off-site хранение, плюс организационные мероприятия по регулярной проверке лент и замене поврежденных копий.
Хранение в облаке не исключает мероприятий по резервации.
Хранение в облаке — это перекладывание ответственности на третью сторону. Во всех договорах что я видел, провайдер обещал что он приложит максимум усилий чтобы сохранить данные, но если придет пушной зверек, то провайдер просто умоет руки со словами «так бэкапиться надо было!», и никаких претензий принимать не будет. Опять же, может быть, сейчас что-то и поменялось, но раньше в законодательстве не было такого понятия как хранение в облаке. И даже больше, такое длительное хранение (50+ лет) обычно касается такой информации и клиентов, которые в любом случае по закону вынуждены хранить данные in-house.
Как реклама решения NetApp — сойдет, но только если убрать требование про 50 лет хранения.
Занимался я подобной задачей (длительное архивное хранение) несколько лет назад. Возможно, сегодня что-то и поменялось, но тогда не было ни одного доступного (т.е. такого которое можно было бы купить за разумные деньги, или вообще купить) ТЕХНИЧЕСКОГО решения, которое могдо бы обеспечить гарантированное хранение данных на столь длительный срок. Самое лучшее что могло быть — это ленточные библиотеки, но только в связке с кучей организационных мероприятий (причем именно организационные мероприятия тут главные). Причина — ни один вендор не подпишется, что их продуктовая линейка ХХХ будет доступна через 5-10 лет, или что для нее могут выпускаться совместимые железки, или что она вообще не окажется в статусе End-of-Life. Поэтому и не получится поставить железку, и потом по мере необходимости только докупать к ней модули — через пару-тройку лет выяснится, что совместимых винчестеров нет и нужно покупать новые полки, еще через годик окажется что менеджмент-ноды не поддерживают новые модели полок расширения и их нужно менять, а в процессе замены окажется что существующие полки уже не поддерживаются — и все, привет миграция на новенький массив.
И чтобы два раза не вставать — нет, хранение в облаке тут вообще не вариант. Если провайдер просрет ваши данные, то максимум что дождетесь — это письма в стиле «извините, мы тут потеряли ваши данные, вот вам в качестве компенсации скидка на следующий месяц».
Вот так и варят лягушек, медленно и неотвратимо:(. По-моему, вы сами не замечаете, что уже живете в «1984», и называете нормальным то, что не является нормальным по определению.
З.Ы. Если что, я не наезжаю и не призываю, просто констатирую факт.
Прааавильно, начали дёргать диски (на горячую, оно же hotswap да и вообще что-то делать перед физическим отключением диска это не путь джЫдая), мол наверное «контакт отошел»
Пфф, когда-то видел статистику вендора по отказам дисковых систем, так там в тройке лидеров была «когда нужно было поменять сломавшийся диск, не тот диск выдернули».
Ну понятно, что денег вам не видать как своих ушей, но вы хотя бы уведомили официалов, чтобы закрыть этот наебизнес (например, через тех же юристов, с которыми консультировались)? Вряд ли ICE понравятся такие игрища с иммиграционным законодательством. Опять же, насколько я знаю, налоговая не любит деньги, полученные мошенническим путем, а тут явно какая-то мутная схема. Или вы все еще надеетесь, что товарищи прочитают статью на Хабре, испугаются и все вернут, да еще и с процентами?
О да, перевозка железа — это то еще развлечение:):)
Однажды мы получили смятую дисковую корзину, причем вся упаковка была целой и неповрежденной. Такое ощущение что корзину где-то еще на сборочной линии уронили и погрузчиком переехали. К чести вендора, после пары дней переписки с фотографированием он все же согласился заменить оборудование.
Ну и дисти рассказывал, как однажды вез Hitachi VSP (дисковый массив в виде отдельно стоящего шкафа, набитого корзинами с контроллерами и дисками). При внешнем осмотре в Москве обнаружили слегка помятый угол упаковки. Решили не вскрывать, т.к. это повреждение не тянуло на сколь-нибуть серьезную проблему. По приезду в конечную точку (Екатеринбург) выяснилось, что шкаф от удара повело винтом так, что невозможно было вынуть оборудование. Пришлось менять всю систему целиком:(
Альтернатива — просто не закладываться на realtime availability
А можете подробней, как вы решаете эту задачу? Озаботили задачей авторизации на удаленных площадках, в условиях если канал связи лег, и пока что кроме сервера авторизации на каждой площадке, ничего в голову не приходит:(
Если топы без мозгов, то какие бы им инструменты (вот эти все ML, Big Data и прочие ИИ) не дали, получатся только такие sucks story.
Когда-то давно, в конторе, где я работал инженером, директору в голову пришла идея фиксировать в журнале время прихода-ухода. Журнал лежал на входе у секретаря, и каждый должен был проставлять время, когда он пришел и ушел. Выглядело как глупая формальность, но однажды, когда я вернулся из длительной командировки, меня ждало в почте письмо от директора, что «следующим сотрудникам (список сотрудников), в связи с регулярными опозданиями, поставить на вид (и обломать премию), а при повторении подобного поведения — уволить по статье». Увидев себя в этом списке и подофигев, я пошел на разборки к директору. Он, узнав в бухгалтерии, что я действительно был в командировке, только и сказал «ну ок». Хоть каких-то извинений, и тем более письма по компании я не дождался.
Через некоторое время, вернувшись с очередной командировки, я обнаружил в почте такое же письмо. В этот раз, когда я только зашел в кабинет, я сразу получил в лоб вопрос:
— Вернулся из командировки?
— Ага.
— Понятно:(
Извинений я все так же не получил (где это видано чтобы руководитель за косяки извинялся), но, насколько мне известно, и таких писем больше по компании не было, хотя журнал и продолжал лежать на входе, и все в него записывались.
Все проще. По американским законам, если штаб-квартира расположена в США, то все действия компании по отношению к свои сотрудникам в любом другом офисе (даже в снежной нигерии) могут быть оспорены в американском суде. Поэтому им проще отсыпать ништяков, чем потом разбираться с обвинениями в незаконном увольнении. Это мне объяснил HR менеджер когда я увольнялся из подобной компании. И да, компенсация в моем случае была тоже очень неплохой.
Ага, мне как-то доктор прописал препарат на основе беладонны. Препарат помог, но у него была интересная побочка — несколько дней глаза (склера) были красного цвета, как в фильмах про вампиров:)
Кора, листья и древесина ложной акации токсичны как для людей, так и для домашнего скота
Странно, у бабушки летом часто заготовляли листья «белой акации» (собирали и сушили на чердаке), чтобы зимой добавлять в рацион курицам — хоть бы одна потом кашлянула:) Или куры не относятся к домашнему скоту, или в процессе сушки листьев все ядовитое из них улетучивается/разлагается?
Я смотрю на эту картинку и вижу три параллельно идущие активности, причем две из них не имеют конца. Для того, чтобы воспользоваться этой «удобной» схемой, я должен быть либо «в теме» (например, иметь специальность «травматолог», тогда зачем в этом случае мне нужна эта схема), либо заранее потратить время чтобы вникнуть в схему (но не сильно заранее, чтобы не забыть к моменту когда она понадобится).
Если такие запутанные схемы — это преимущество использования дракона, то имхо, и даром такого не нужно.
Значит, вы просто не сталкивались с сильными програмистами:) Из того что видел лично:
SCSI кабели, забитые в LPT порт,
планки памяти, вставленные наоборот (и да, там же есть платиковые ограничители — их срезали ножом, «потому что мешали вставить»)
А еще, на военке препод рссказывал, как его боец при подготовке комплекса С-300 к стрельбе умудрился соединить вместе разъемы «папа-папа» и «мама-мама», что до него вообще считалось невозможным.
При всем уважении к Гордону, но мир поменялся. Когда-то, когда мониторы были большими, а их разрешения — маленькими, именно благодаря таким людям и ИТ технологиям, которые они приносили в компании, бизнес получал толчок и мог бежать быстрее конкурентов, а значит, зарабатывать больше денег. Но сегодня ИТ — это ширпотреб, а к ширпотребу совсем другое отношение. Подходы, правила и требования Гордона правильные, но они сегодня являются тормозом, а значит, приносят убытки бизнесу. А убытки — это к увольнениям :(
Можно вспомнить пример из истории Нокиа (когда она была еще финской). В какой-то момент Нокиа пробовала сделать смартфон, но он не мог пройти стандартные тесты на механическую прочность, которые компания выдвигала к своим телефонам. Якобы это была одна из основных причин, почему Нокиа отказалась делать смартфон; результат такого решения всем известен.
Я был малым тогда, и мало что запомнил, но да, это было мое самое удивительное лето, проведенное где угодно, только не в Киевской области. Из того что помню:
1) Информация об аварии скрывалась как могла, но вместе с мамой работал коллега, чей сын работал на ЧАЭС. Поэтому каждое утро у них начиналось со свежайшей «политинформации». В один из дней коллега пришел нервный — «Если не сольют барботер (наверно, уже не помню что именно), Киев накроет радиоактивным облаком». На следующий день приходит счастливый — «смогли слить!»
2) Первомайскую демонстрацию никто не отменял. Но после, дома была тщательнейшая помывка и постирка всей одежды (мама настояла). Когда через несколько дней в квартире смогли проверить уровень радиации (с работы дозиметр принесли), повышенный уровень был только на входном коврике и на подоконнике там, где щели в окнах.
3) Папа поехал на вокзал в надежде купить билеты на поезд. По словам отца, масштабы 3.14здеца для него стали ясны, когда он увидел на вокзале генерала армии при полном параде, скромно стоящего в общей очереди.
4) Вместе с другом меня отправили (не дожидаясь конца учебного года) к его бабушке в Николаевскую область. Так как билетов не было, поехали на станцию в надежде договориться с проводниками и сесть в проходящий поезд. На станции останавливается поезд на Николаев, открываются вагоны и проводники кричат — «есть билеты, нет билетов — пофиг, мы заберем всех!»
5) Тем, у кого дети, в тот год на работе старались выдать путевки — куда подальше. В результате мама получила путевку в пансионат в Сочи, где мы и прожили почти две смены. Из смешного/грустного — некоторые таксисты боялись брать нас когда узнавали что мы из Киева.
6) Папа тоже ездил в Чернобыль на вахты, участвовал в строительстве саркофага. Об опасности, впрочем как и о подтверждающих документах, тогда не думали. В результате папа поимел некоторые сложности со здоровьем, и отказ в получении статуса ликвидатора.
Ещё слышал байки про разбор внешней стены и подачи сервера краном
Ну почему же байки — вполне себе реальность. Я участвовал в заносе стойки с оборудованием SUN краном через окно где-то на шестой этаж — незабываемые, знаете ли, ощущения, когда миллион на крюке болтается и норовит об стену шмякнуться:). Оборудование сквозь стену тоже доставляли — занесли и заделали. Вот как потом обратно выносили — не знаю, может, до сих пор там стоит.
А еще у одного клиента была разрезанная и потом собранная на заклепки стойка, потому что дверь в серверную была очень оригинальная — переборка с гермодверью как на подводных лодках:)
А ещё перекрытия должны выдерживать эти многотонные сервера
О, это отдельная история. Многие клиенты живут в зданиях, построенных по гражданским нормам, и перекрытия которых не расчитаны на вес забитых стоек. В этом случае либо усиливают перекрытия, либо используют специальные системы для распределения веса по большой площади, либо ограничивают максимальный вес оборудования в стойке. У одного клиента стойки были вообще к потолку прикручены, т.к. снизу пол был на деревянных лагах, а потолок сверху — вполне себе нормальное железобетонное перекрытие.
Не просрет, для этого как раз правильная организация всего процесса и нужна.
Достаточный:) Вынуть данные с ленты — это где-то полчаса времени, с учетом перекура. В случае конкретно архивного хранения, никто не ожидает on-line доступа к данным, тут в первую очередь важна именно надежность. А с надежностью все хорошо — 2 ЦОДа, 3 копии каждого куска данных, off-site хранение, плюс организационные мероприятия по регулярной проверке лент и замене поврежденных копий.
Хранение в облаке — это перекладывание ответственности на третью сторону. Во всех договорах что я видел, провайдер обещал что он приложит максимум усилий чтобы сохранить данные, но если придет пушной зверек, то провайдер просто умоет руки со словами «так бэкапиться надо было!», и никаких претензий принимать не будет. Опять же, может быть, сейчас что-то и поменялось, но раньше в законодательстве не было такого понятия как хранение в облаке. И даже больше, такое длительное хранение (50+ лет) обычно касается такой информации и клиентов, которые в любом случае по закону вынуждены хранить данные in-house.
Занимался я подобной задачей (длительное архивное хранение) несколько лет назад. Возможно, сегодня что-то и поменялось, но тогда не было ни одного доступного (т.е. такого которое можно было бы купить за разумные деньги, или вообще купить) ТЕХНИЧЕСКОГО решения, которое могдо бы обеспечить гарантированное хранение данных на столь длительный срок. Самое лучшее что могло быть — это ленточные библиотеки, но только в связке с кучей организационных мероприятий (причем именно организационные мероприятия тут главные). Причина — ни один вендор не подпишется, что их продуктовая линейка ХХХ будет доступна через 5-10 лет, или что для нее могут выпускаться совместимые железки, или что она вообще не окажется в статусе End-of-Life. Поэтому и не получится поставить железку, и потом по мере необходимости только докупать к ней модули — через пару-тройку лет выяснится, что совместимых винчестеров нет и нужно покупать новые полки, еще через годик окажется что менеджмент-ноды не поддерживают новые модели полок расширения и их нужно менять, а в процессе замены окажется что существующие полки уже не поддерживаются — и все, привет миграция на новенький массив.
И чтобы два раза не вставать — нет, хранение в облаке тут вообще не вариант. Если провайдер просрет ваши данные, то максимум что дождетесь — это письма в стиле «извините, мы тут потеряли ваши данные, вот вам в качестве компенсации скидка на следующий месяц».
Вот так и варят лягушек, медленно и неотвратимо:(. По-моему, вы сами не замечаете, что уже живете в «1984», и называете нормальным то, что не является нормальным по определению.
З.Ы. Если что, я не наезжаю и не призываю, просто констатирую факт.
Пфф, когда-то видел статистику вендора по отказам дисковых систем, так там в тройке лидеров была «когда нужно было поменять сломавшийся диск, не тот диск выдернули».
Однажды мы получили смятую дисковую корзину, причем вся упаковка была целой и неповрежденной. Такое ощущение что корзину где-то еще на сборочной линии уронили и погрузчиком переехали. К чести вендора, после пары дней переписки с фотографированием он все же согласился заменить оборудование.
Ну и дисти рассказывал, как однажды вез Hitachi VSP (дисковый массив в виде отдельно стоящего шкафа, набитого корзинами с контроллерами и дисками). При внешнем осмотре в Москве обнаружили слегка помятый угол упаковки. Решили не вскрывать, т.к. это повреждение не тянуло на сколь-нибуть серьезную проблему. По приезду в конечную точку (Екатеринбург) выяснилось, что шкаф от удара повело винтом так, что невозможно было вынуть оборудование. Пришлось менять всю систему целиком:(
А это тогда что? Вроде как досудебное расследование только-только завершили.
А можете подробней, как вы решаете эту задачу? Озаботили задачей авторизации на удаленных площадках, в условиях если канал связи лег, и пока что кроме сервера авторизации на каждой площадке, ничего в голову не приходит:(
Когда-то давно, в конторе, где я работал инженером, директору в голову пришла идея фиксировать в журнале время прихода-ухода. Журнал лежал на входе у секретаря, и каждый должен был проставлять время, когда он пришел и ушел. Выглядело как глупая формальность, но однажды, когда я вернулся из длительной командировки, меня ждало в почте письмо от директора, что «следующим сотрудникам (список сотрудников), в связи с регулярными опозданиями, поставить на вид (и обломать премию), а при повторении подобного поведения — уволить по статье». Увидев себя в этом списке и подофигев, я пошел на разборки к директору. Он, узнав в бухгалтерии, что я действительно был в командировке, только и сказал «ну ок». Хоть каких-то извинений, и тем более письма по компании я не дождался.
Через некоторое время, вернувшись с очередной командировки, я обнаружил в почте такое же письмо. В этот раз, когда я только зашел в кабинет, я сразу получил в лоб вопрос:
— Вернулся из командировки?
— Ага.
— Понятно:(
Извинений я все так же не получил (где это видано чтобы руководитель за косяки извинялся), но, насколько мне известно, и таких писем больше по компании не было, хотя журнал и продолжал лежать на входе, и все в него записывались.
Странно, у бабушки летом часто заготовляли листья «белой акации» (собирали и сушили на чердаке), чтобы зимой добавлять в рацион курицам — хоть бы одна потом кашлянула:) Или куры не относятся к домашнему скоту, или в процессе сушки листьев все ядовитое из них улетучивается/разлагается?
Если такие запутанные схемы — это преимущество использования дракона, то имхо, и даром такого не нужно.
А еще, на военке препод рссказывал, как его боец при подготовке комплекса С-300 к стрельбе умудрился соединить вместе разъемы «папа-папа» и «мама-мама», что до него вообще считалось невозможным.
Можно вспомнить пример из истории Нокиа (когда она была еще финской). В какой-то момент Нокиа пробовала сделать смартфон, но он не мог пройти стандартные тесты на механическую прочность, которые компания выдвигала к своим телефонам. Якобы это была одна из основных причин, почему Нокиа отказалась делать смартфон; результат такого решения всем известен.
1) Информация об аварии скрывалась как могла, но вместе с мамой работал коллега, чей сын работал на ЧАЭС. Поэтому каждое утро у них начиналось со свежайшей «политинформации». В один из дней коллега пришел нервный — «Если не сольют барботер (наверно, уже не помню что именно), Киев накроет радиоактивным облаком». На следующий день приходит счастливый — «смогли слить!»
2) Первомайскую демонстрацию никто не отменял. Но после, дома была тщательнейшая помывка и постирка всей одежды (мама настояла). Когда через несколько дней в квартире смогли проверить уровень радиации (с работы дозиметр принесли), повышенный уровень был только на входном коврике и на подоконнике там, где щели в окнах.
3) Папа поехал на вокзал в надежде купить билеты на поезд. По словам отца, масштабы 3.14здеца для него стали ясны, когда он увидел на вокзале генерала армии при полном параде, скромно стоящего в общей очереди.
4) Вместе с другом меня отправили (не дожидаясь конца учебного года) к его бабушке в Николаевскую область. Так как билетов не было, поехали на станцию в надежде договориться с проводниками и сесть в проходящий поезд. На станции останавливается поезд на Николаев, открываются вагоны и проводники кричат — «есть билеты, нет билетов — пофиг, мы заберем всех!»
5) Тем, у кого дети, в тот год на работе старались выдать путевки — куда подальше. В результате мама получила путевку в пансионат в Сочи, где мы и прожили почти две смены. Из смешного/грустного — некоторые таксисты боялись брать нас когда узнавали что мы из Киева.
6) Папа тоже ездил в Чернобыль на вахты, участвовал в строительстве саркофага. Об опасности, впрочем как и о подтверждающих документах, тогда не думали. В результате папа поимел некоторые сложности со здоровьем, и отказ в получении статуса ликвидатора.
Ну почему же байки — вполне себе реальность. Я участвовал в заносе стойки с оборудованием SUN краном через окно где-то на шестой этаж — незабываемые, знаете ли, ощущения, когда миллион на крюке болтается и норовит об стену шмякнуться:). Оборудование сквозь стену тоже доставляли — занесли и заделали. Вот как потом обратно выносили — не знаю, может, до сих пор там стоит.
А еще у одного клиента была разрезанная и потом собранная на заклепки стойка, потому что дверь в серверную была очень оригинальная — переборка с гермодверью как на подводных лодках:)
О, это отдельная история. Многие клиенты живут в зданиях, построенных по гражданским нормам, и перекрытия которых не расчитаны на вес забитых стоек. В этом случае либо усиливают перекрытия, либо используют специальные системы для распределения веса по большой площади, либо ограничивают максимальный вес оборудования в стойке. У одного клиента стойки были вообще к потолку прикручены, т.к. снизу пол был на деревянных лагах, а потолок сверху — вполне себе нормальное железобетонное перекрытие.