Подход к оценке “живой” инфраструктуры и построению disaster recovery

[zVlad909]

Из собственного опыта 25-ти лет работы в большой энергетической компании провинции Онтарио, Канада. Но начну с начала.

До Канады, в 80-е и 90-е никто дизастер рековери особо не заморачивался. Большенство Вычислительных Центров (ВЦ) в Челябинской области где я работал в Региональном Центре Обслуживания ЕС ЭВМ было по одному компьютеру ЕС ЭВМ. Редко два-три. Только на ВЦ ЮУрЖД было две ЕС-1045, одна в продакшн и другая в резерве. Обе стояли в одном зале.

В Канаде я начал как раз с того момента когда начали серьезно задумываться о DR. Это был 2000 год. Основная активность началась после атаки Сентября 11, 2001 в США. Тогда еще основные приложения выполнялись на ИБМ мэйнфрэймах.

На тот момент делался бэкап на ленты и ленты вывозились на склад удаленный от Дата Центра. Имелось в сиду что в случае дизастера с лент где нибудь (в ИБМ Дата центре конечно) с этих лент все будет восстановлено на рентованной у ИБМ машине и потихоньку будет востановлен свой Дата Центр.

Но как раз примерно в это время была разработана схема использымая до сих пор. Суть ее заключалась в зеркалировании всех дисков продакшн МФ с нашего Дата Центра в Дата Центр ИБМ где стоял наш девелопмент МФ на котором и будет в случае DR будет загрушена продакщн система с зеркала. В отличии от "современных" ИТ инфраструктур с использованием МФ можно на одной системе сосредоточит то что нынче требует десятки и сотни разномастных серверов. Это для DR большое подспорье.

Каждый год, раз в год, делались тесты DR и были всегда успешными. Со временем приложение на МФ стало обрастать элементами на серверах. Для них тоже разрабатывались DR планы. И для них тоже проводились DR тесты. Никогда DR тесты на серверах не проходили без проблем.

В августе 2003 года в Онтарио случился blackout, Торонто погрузилось во тьму прям по средине дня. (В этот день, 14 августа, мой старший сын стал экзамен на лицензию электрика). На нашем ДЦ должна была быть включена дизельная установка для питания, но она не включилась, как говорили не было солярки.

Нас привезли в ИБМ ДЦ где был наш DR site. Дизеля на ИБМ ДЦ работали исправно и мы загрузили систему на наш DR МФ. Но связи не было и пользователи не могли подключаться к этому МФ.

Много воды утекло с тех пор. Приложение перенесли с МФ в Azure. Вместо одного МФ теперь оно сидит на 36 серверах и их DR план весьма сомнителен. Строго говоря это не DR, а failover что есть совсем другое чем DR. Кстати очень советую не путать DR c failover. Это очень разные вещи.