vostryakov 20 мар 2009 в 15:31

Рисоваська, часть 3: Амазоновские веб-сервисы в действии

10 мин

36K

Хостинг

+95

Комментарии 51

kinmila 20 мар 2009 в 15:56

КОгда продолжение?

vostryakov 20 мар 2009 в 15:57

В течении двух недель допишу этот цикл статей.

kvladimir 20 мар 2009 в 15:59

Вау, спасибо за такой большой объем очень полезной информации!

vostryakov 20 мар 2009 в 16:03

Спасибо! Я очень надеялся, что это будет многим полезно

kvladimir 20 мар 2009 в 16:07

Наверняка будет, амазоновские сервисы очень мощные и всегда интересно узнать подробности о применении их на практике в реальных проектах, подобных вашему.

Скажите, а можно как-то автоматизировать подключение инстансов при увеличении нагрузки? Или все это делается только вручную?

vostryakov 20 мар 2009 в 16:10

Можно, так как все управление доступно через выполнение команд, то можно написать свои скрипты, которые автоматически запускают новый инстанс при увеличении нагрузки или останавливают, при снижении нагрузки

kvladimir 20 мар 2009 в 16:11

Спасибо, я так и думал)

shuron 20 мар 2009 в 17:00

Давно слышал, но разобрался что к чему только сейчас.
Очень интересная тема.
Судорожно думаю могу ли я это-где-нибудь применить?
Или всетаки выделеный сервак за туже цену мне выгоднее…

vostryakov 20 мар 2009 в 17:26

Самое лучшее применение Амазона — это стартапы, когда нельзя спрогнозировать нагрузку точно. Толи один сервер взять, то ли десять. А тут за пару минут нужно поднял еще инстансы :)

shuron 20 мар 2009 в 18:51

Нет ну просто у моего хостера поднять доп. сервак тоге вопрос минут…
Поэтому не очень убеждает.

vostryakov 20 мар 2009 в 19:41

А останавливать на каждую ночь лишние инстансы, когда нагрузка спадает автоматически? Я сильно не настаиваю на Амазоне, если у вас поднять-остановить сервак дело нескольких минут, и стоит вам это не больше $100 за сервер в месяц сравнимой конфигурации со стандартным инстансом. Возможно вас заинтересует S3 как хранилище данных, а сервера у вас будут свои.

shuron 20 мар 2009 в 19:01

Видимо ключевые моменты всетаки вот эти:

гибкий выбор типов инстансов под разные задачи

и

После выбора инстанса нужно выбрать и настроить образ операционной системы, который будет там работать. Образ — это как сама операционая система так и все необходимые для работы программы (Apache, MySQL, Memcached, Erlang и т.д.), а так же в образ могут быть включены и все нужные вам данные: содержимое сайта, исходники программы и т.д. Есть большое кол-во готовых образов от Амазона и энтузиастов.

Cataclysm 20 мар 2009 в 17:20

Попробовал этот сервис — правда удобно. Так же радует стабильность и надежность. Но решил им не пользоваться: Сайт в месяц жрет 500 Гбайт трафика, что равноценно 85 долларам в месяц. Получается слишком высокая цена.

shuron 20 мар 2009 в 18:56

В моем случае скорее наоборот. Амазон дешевле достойного выделеного сервака, хоть не на много.

Cataclysm 20 мар 2009 в 20:54

Ну теже выделенные сервера можно взять без ограничения по трафику.

НЛО прилетело и опубликовало эту надпись здесь

andry 21 мар 2009 в 14:26

В самом деле, говорить что это дешевое решение не совсем правда=) Зачастую выделенный будет дешевле. Однако здесь есть плюшки за которые надо платить.

vorushin 20 мар 2009 в 17:27

Отличная статья, спасибо!
Недавно еще lionet порадовал — они потестили разные конфигурации выделенных серверов и амазоновских инстансов применительно к хостингу эрланг-приложений — lionet.livejournal.com/29844.html

thorn0 20 мар 2009 в 17:36

Спасибо за статью! Comindwork в ближайшем будущем ожидает интеграция с амазоновскими сервисами, так что актуально, буду вникать.

vostryakov 20 мар 2009 в 17:40

Спасибо, за отзыв! Старался написать максимально просто. Если будут вопросы: пиши

kurokikaze 20 мар 2009 в 17:37

Вот это гайд, спасибо :)

vostryakov 20 мар 2009 в 17:42

Рад! :)

НЛО прилетело и опубликовало эту надпись здесь

vostryakov 20 мар 2009 в 17:55

Мы используем два или три инстанса. Один под web-сервер: risovaska и один или два (в зависимости) от нагрузки под application server. Смотрим просто по нагрузке на систему и поднимаем еще инстанс, если становиться слишком большой. Система построена с учетом масштабируемости, поэтому для нас это не представляет проблем.

shuron 20 мар 2009 в 19:03

Ааа вот вижу реальную пользу. Вы экономите деньги отключая ненужное поненадобности…
Тепер наводит и менай на интересные мысли…
Спасибо…

savostin 20 мар 2009 в 18:08

Спасибо, особенно за плагины.
Кстати, есть AWS Management Console как вариант.
А не подскажете как удалить Instance? Или я чего-то не понимаю?

vostryakov 20 мар 2009 в 18:27

Про AWS Management Console знаю, но он пока еще малофункциональный. У Elasticfox намного больше возможностей. Вот они его докрутят к лету до всего чего обещали (в том числе и балансировка нагрузки между инстансами), тогда можно перейти на него. Правда, насколько я понял, когда они его докрутят, то он будет платный.
остановить инстанс можно с помощью Elasticfox на закладке Instances: выделить нужный инстанс в гриде и нажать кнопку «Terminate Selected Instance(s)»

savostin 20 мар 2009 в 19:07

остановить понятно, а вообще удалить/очистить список? Обновить не помагает — terminated висит в списке. Вышел/зашел — terminated instance пропал. Они там по какому-то принципу сами удаляются?

vostryakov 20 мар 2009 в 19:46

Да, они удаляются из списка через какое-то время, примерно через пару часов. Могу предположить, что так сделано, что в случае зависания инстанса, ты мог сообщить амазону какие-то данные о зависшем инстансе, чтобы они попробовали что-то сделать.

savostin 20 мар 2009 в 19:50

Спасибо.

theRavel 20 мар 2009 в 18:09

быстро развиваетесь :)

vostryakov 20 мар 2009 в 18:27

Спасибо! :)

f33l 20 мар 2009 в 20:58

спасибо

только все же неясно, как обеспечить надежность хранения данных, если используется, например, mysql?
насколько я понимаю, можно сделать, чтобы физически бд хранилась на Elastic Block Store, насколько это надежно и быстро? и не придется ли в таком случае сильно переплачивать?

vostryakov 20 мар 2009 в 22:15

Да, располагаете базу mysql сервера на EBS. Как я писал в статье, скорость работы с EBS выше чем со встроенным диском инстанса. Надежность тоже выше. К тому же вы можете делать snapshots в S3, то есть фактически снимок тома EBS. А S3 обеспечивает сверхнадежность хранения данных. И как я писал в статье стоит это очень мало. У нас один том в 10ГБ обходиться около $2 в месяц.

Еще вам будет интересен комментарий ниже от neiromancer.

f33l 21 мар 2009 в 06:31

ок, пасиб еще раз )

lasc 21 мар 2009 в 01:16

я весь root кидаю на EBS и с него все работает

vostryakov 21 мар 2009 в 11:06

Ого, круто! Будем знать :)

lasc 21 мар 2009 в 11:20

howto на форумах амазона есть, работает через pivot. за полгода проблем нет.

впрочем и инстанс ни разу не ломался, так что даже не знаю надо ли гемороится с EBS

baxtep2 3 апр 2009 в 12:10

ну vostrikov пишет что, скорость работы с EBS выше чем со встроенным диском инстанса, т.е. переброс всего root на EBS дает прирост в дисковых операциях???

lasc 3 апр 2009 в 13:08

не могу сказать, для меня все сьедается удаленностью от зеландии, надо бы перенести в другую зону попробовать но что то руки не доходят

vostryakov 3 апр 2009 в 18:19

Я тоже не могу сказать точных данных. Мои слова основаны на заявлении Амазона в описании EBS у них на сайте.

P.S. Моя фамилия: Востряков — vostryakov :)

neiromancer 20 мар 2009 в 21:07

кому интересно — спрашивайте,
под AWS гоняем кластера приложений и БД уже более полугода — есть реальные вопросы — в личку или аську

Yfka 21 мар 2009 в 08:36

Спасибо.

Интересуют вопросы:
1. Для самого маленького инстанса они писали: I/O Performance: Moderate
Насколько это умеренное?
Больше всего интересует не файловая система, а сеть в инет.

2. 160 GB instance storage (150 GB plus 10 GB root partition)
Я так понял, что при любом зависании или перезагрузке или выключении эти 150 Гб теряются. Есть ли какой в них практический смысл?

vostryakov 21 мар 2009 в 11:13

1. На первый вопрос не могу ничего сказать, замеров не делали. У нас работает иногда два инстанса с распределенной базой между ними. Нас скорость устраивала, но каких-то замеров мы не делали.

2. Обычно есть. Мы используем распределенную базу Mnesia на Эрланге. Так вот первый инстанс хранит свою базу мнезии на EBS, а второй инстанс хранит на instance storage, так как это не критично, если он зависнет. Плюс всякие логи мы храним тоже на instance storage, то есть то, что можно в принципе потерять. Реально за полгода работы ни один инстансе ни разу не упал. То есть на EBS можно хранить критичные данные, а все остальное на instance storage.

oleamm 24 мар 2009 в 18:21

Можно ли использовать амазон как обычный VPS/выделенный сервер? Изучив тему и содержание сайта понял что на заказанную площадку устанавливается система (ubuntu, fedora, windows и т.п.), я имею к ней root доступ и могу поставить на нее LAMP и все что мне потребуется. Или я заблуждаюсь?

vostryakov 24 мар 2009 в 18:27

Да, вы можете использовать любой сервер от Амазона (инстанс) как VPS и поставить туда все что захотите (LAMP, конечно без проблем). Вы все правильно понимаете.