How to become an author
Search
Profile
Pull to refresh

Comments 37

Скорость порадовала. При такой скорости снапшоты в лругих регионах можно не хранить.
Total votes 1: ↑1 and ↓0 +1
Круто! Вы, прям, настоящие популяризаторы AWS, больше вас о них, наверное, никто не пишет) Скажите, Amazon вам доплачивает?)) Спасибо! Продолжайте в том же духе!
Total votes 1: ↑1 and ↓0 +1
Мы партнёры с AWS. А я — архитектор. Сам много интересуюсь и вот популяризирую.
Total votes 1: ↑1 and ↓0 +1
тогда вопрос такой — почему Вы написали что скорость хорошая и выделили это?
8GB * 1024 = 8192MB * 8 = 65536Mb / 3 (min) = 21845 (Mbpm) / 60 (sec) = 364Mbps — Я бы не сказал что это волшебно…
Для сравнения Я использовал хороший ДЦ в EU — скорость копирования между ДЦ была где-то 2100Mbps, причем трафик без тарификации через их точку обмена трафиком.
P.S. от Amazon ожидал больше — хотя например IOPS дисковой подсистемы уже давно разочаровал, и кстати в Ирландию лучше не копировать — там ДЦ стоит в «молниеопасном» и «волшебном для жестких дисков» месте :)
Total votes 1: ↑1 and ↓0 +1
UFO just landed and posted this here
Так и автор пишет о «US-EAST-1 в EU-WEST-1»
Total votes 1: ↑1 and ↓0 +1
Я копировал между ДЦ — Чехия Нидерланды и Румыния Нидерланды, технически можно скопировать и в США (у хостера и там есть сервера), но из-за «драконовского» законодательства там не держу сервера.
(возможно Я не совсем полно пояснил — но 2100Mbps это НЕ у Amazon а у другого хостера)
Total votes 1: ↑1 and ↓0 +1
А чем законодательство отпугивает, если не секрет?
Плата за перерасход электроэнергии?
Total votes 1: ↑1 and ↓0 +1
1) DMCA — очень сильно будет напрягать, в EU все намного проще, там только 3 организации которые реально могут достать и как правило получить от них абузу крайне сложно (трансляция платного цифрового вещания спортивных событий, концертов и т.д.)
2) Если сайт является финансовой организацией — то есть вероятность получить перманентный бан за финансовую деятельность без лицензии… (да — комиссия по ценным бумагам хуже копирастов)
3) Есть требования об обязательной идентификации конечного заказчика услуги (хотя не все его соблюдают) — т.е. хостер будет требовать выслать сканы и требовать верификации (кстати Amazon это и так делает)
4) За «Ответный удар» по атакующим (если DDoS или SPAM центр) могут выключить сервер
… остальное в личку если интересует…
и естественно стоимость трафика в USA выше чем в EU примерно в 2-2.5 раза
Total votes 1: ↑1 and ↓0 +1
Спасибо большое за развернутый ответ!
Total votes 1: ↑1 and ↓0 +1
UFO just landed and posted this here
если korjik не против — то может-быть проведет тест на копирование US East US West для примера…
Total votes 1: ↑1 and ↓0 +1
$ ec2-copy-snapshot  -s snap-c5db6db1 -r us-east-1 --region us-west-2
SNAPSHOT	snap-a5e7c983

$ ec2-describe-snapshots --region us-west-2 snap-a5e7c983
SNAPSHOT	snap-a5e7c983	vol-f84c4a80	completed	2012-12-18T20:01:50+0000	100%	273530516661	100	[Copied snap-c5db6db1 from us-east-1]


Итак, как видим, снапшот размером 100ГБ был скопирован из Вирджинии в Орегон.
На копирование было потрачено 7 минут 30 секунд = 450 секунд.

1024*100*8/450 = 1820.4 Mbps. Вполне замечательная скорость, не находите? Ранее этой опиции не было совсем. Сейчас с хорошей скоростью можно вылить ваши данные в другой регион.

С архитектурной точки зрения DR планы поменяются кардинально в лучшую и более лёгкую сторону. А предстоящая фича с копированием AMI вообще порвёт всех.
Total votes 2: ↑2 and ↓0 +2
UFO just landed and posted this here
Эта опция сейчас в статусе Coming Soon. Следите за блогом, я сразу про это напишу!
This comment wasn’t rated yet 0
Они бы ещё научились эти снапшоты делать без убийства write performance.

Покупаем дорогой piops диск на 1000 «гарантированных» iops, останавливаем базу, делаем снапшот, запускаем базу, получаем 20 wiops и соответственно падение высоконагруженного бэкэнда.

«Also, a volume's I/O performance may become degraded temporarily due to an action you have taken (e.g., creating a snapshot of a volume during peak usage, running the volume on a non-EBS-optimized instance, accessing data on the volume for the first time).»
docs.amazonwebservices.com/AmazonCloudWatch/latest/DeveloperGuide/CW_Support_For_AWS.html#ebs-metricscollected

«May become degraded temporarily» как-то не вяжется c " Provisioned IOPS volumes are designed to deliver within 10% of the provisioned IOPS performance 99.9% of the time".

В общем aws — нехорошие люди.
Total votes 2: ↑2 and ↓0 +2
Эту проблему Я в свое время решал — в конце концов было сделано решение на базе Xen PVM + виртуальная файловая система (NFS-like) в качестве рут раздела (загрузка по PXE) — хотя решение вышло и костыльное, но зато проблем при записи нету — т.к. идет переключение контекста виртуальной ФС и новое состояние пишется отдельным разделом, после снапшота идет коммит изменений и возврат.
Total votes 1: ↑1 and ↓0 +1
Сегодня получил от Амазона эту новость, порадовался) Упростит поднятие приложений в случае проблем в AZ. Кстати для России, вторая зона с наименьшим пингом это US-EAST. Проверить можно тут www.cloudping.info/
Total votes 2: ↑1 and ↓1 0
А Ирландия не ближе?
image
This comment wasn’t rated yet 0
Ирландия, то понятно. Но вот после Ирландии вторая зона не так очевидно какая ближе.
This comment wasn’t rated yet 0
UFO just landed and posted this here
Как я вас понимаю. В больших проектах мне всегда её не хватает.
This comment wasn’t rated yet 0
UFO just landed and posted this here
UFO just landed and posted this here
Да, забыл упомянуть о том, что трафик считается как обычно. Только исходящий из региона по обычной цене. Входящий не стоит ничего.
This comment wasn’t rated yet 0
По TCP/IP можно тоже получить хорошую скорость, если использовать, например торрент. Скорее всего они именно торрент и используют.
Total votes 1: ↑1 and ↓0 +1
Если Вы для копирования используете SCP то мне Вас жаль — это неэффективно.
Рекомендую Вам использовать tar + стриминг в сырой TCP — очень помогает при копировании больших данных.
(к сожалению про rsync ничего не могу сказать — лично не использовал)
Total votes 2: ↑2 and ↓0 +2
UFO just landed and posted this here
и что потом делать после сырого tcp?
сверять суммы тарболлов на много сотен гигабайт?
Total votes 1: ↑1 and ↓0 +1
Сырой TCP позволяет сделать прямой канал (условно pipe) между серверами без лишнего кодирования байт.
Естественно проверка будет идти в 2 этапа:
1) контрольный суммы в самом протоколе TCP/IP
2) SHA512/SHA1/MD5 для архива
Если Вы НЕ проверяете контрольные суммы бэкапов перед разворачиванием — то Вы или (1) очень смелый (и не боитесь лишних проблем из-за этого) или (2) очень глупый (если не делаете элементарные проверки)
Total votes 1: ↑1 and ↓0 +1
Дельное замечание. Но теперь на AWS уже всё проще = )
This comment wasn’t rated yet 0
благодарю за мою краткую характеристику.
вынужден огорчить, я такой херней не занимаюсь.
Total votes 1: ↑1 and ↓0 +1
Смотрите про приставку «Если» — это важная часть предложения ;)
Total votes 1: ↑1 and ↓0 +1
Эту функцию, да пару бы месяцев назад. Отличная новость!
Total votes 1: ↑1 and ↓0 +1
Only those users with full accounts are able to leave comments. Log in, please.

Your account

Sections

Information

Services

Support
© 2006–2023, Habr