Amazon S3: рекордная нагрузка

[Denis_in_ua]

Надо будет разобраться как с этим хранилищем работать. Как раз есть подходящий сайт, с большими объемами фоток и видео, можно будет разгрузить сервак.

[sindrom]

Что конкретно понимается под «объектами»?

[wii]

Предположу, что файлы и директории (не папки).

[wii]

Не кажадя папка есть директория. Папка может быть виртуальной и не существовать физически на диске (например, корзина и панель управления в винде — это папки, но они не являются директориями).

[wii]

Скажите, а из-за чего так выросла популярность?

[ZeBeS]

скорее всего с этим)

Oct 09, 2008
New Tiered Pricing for Amazon S3 Storage

Effective November 1st, Amazon is lowering prices for storage by introducing tiered pricing, with prices as low as $0.12 per GB per month. This new pricing structure means that your costs will continue to decrease over time as your storage increases. (с) aws.amazon.com/about-aws/whats-new/

[ZeBeS]

тю) сморозил) заработался

[BisnoyZakat]

В Казахстане скорее всего только один проект использует AmazonS3 это zigzag.kz, по опыту работы скажу, что штука очень занятная и предоставляет замечательные возможности =)

[Rulez]

Было интересно почитать об опыте использования и настройке и т. д. в реальных проектах

[BisnoyZakat]

я в личном блоге тогда скоро напишу.

[Nicomashi]

O! Я бы тоже был очень благодарен, т. к. материала на русском очень мало, а очень уж хочется перенести проекты на данный хостинг. Ну, и если будете что-то писать, то я думаю будете это делать в комплексе, т. е. не только S3, а и эластик и базы =)

[BisnoyZakat]

bisnoyzakat.habrahabr.ru/blog/42034/

[BisnoyZakat]

Единственное, что я не могу рассказать о настройках и прочем, я могу рассказать это с моей точки видения, человека который тесно работает с сервер-сайд программистом я же строю только клиент-сайд и в результате тесной работы понял основные плюсы и минусы S3 конкретно для нашего проекта.

[yuryk]

Мы сделали harvester и разместили его на ec2. Плюс ec2 в том, что вы можете программно управлять количеством машин. Т. е. если у вас мертвый сезон, то работает где-то 10 машин. Если у вас раш, то запускаете 30 на время.
Есть у amazon-а один недостаток. Если вы сканите сайты и кто-нибудь из этих сайтов пожалуется в амазон на вас, то амазон высылает вам письмо, чтоб вы в течении 24 часов прекратили бомбить этот ресурс. Если же вы не остановитесь, то ваш аккаунт выключат.

[d1gital_love]

гламурненький хостинг

[BisnoyZakat]

как мы в офисе шутим… «розовый цвет — доверься ему!» =)

[Rulez]

Вот когда локальный трафик перестанет существовать еще больше у них нагрузка вырастет, надо будет попробовать на практике их сервера.

[rojer]

как говорится, я был с вами до этого места:

> количество запросов на запись, считывание или удаление объектов превысило 70 000 в секунду.

ahem. ok. :)

[neiromancer]

S3 это подключаемое внешнее хранилище для ECC юнитов
к юнитам-виртуальным серверам на Xen можно подключить или внешнее хранилище от 1Гб до 1Тб, для сервера будет как обычный диск, или использовать S3 для хранения данных через SOAP/REST
деньги за юниты берутся за повременку использования, от 20 до 80 центов/час в зависимости от кол-вая ядер/RAM
деньги за хранилище берутся за Гб/месяц + кол-во операция чтения/запись на объекты на S3 или кол-во иопсов за подключаемый диск
а вообще на сайте амазона всё разжёвано

[sieukrem]

А можно еще поподробнее!

Из «движения челюстями» самого амазона мне не понятно, как вычислить центы за час и что ж это за час и кто такие юниты.

[AstonMartin]

Вы похоже в теме. Не могли бы ответить на давно интересующий меня вопрос относительно EC2. По сути, ec2 получается дороже обычных дедиков и единственное его весомое преимущество это потенциально большая надежность и стабильность работы. Но как она достигается? Что если я арендую 4-х ядерный юнит с 8ГБ памяти разве он не будет размещен на одной единственной машине и в случае поломки материнки на ней у меня не будет такого же простоя как в случае с дедиком?

[lasc]

вы такое не сможете арендовать, там всего 6 вариантов машин.
но можно пачками создавать VM на основе вами загруженого образа.

я лично использую ec2 и рут перекидываю на EBS таким образом при убивании и востановлении VM вся система остается.

[AstonMartin]

Я думал может там сделана какая то хитрая репликация виртуальных машин и их оперативное восстановление в случае отказа. Похоже что такого нет.
А этот «EBS» на который вы перекладываете данные ведь точно так же может упасть…

[lasc]

EBS закапится на s3 в пару кликов, или по крону

[Eunix]

Хм… мне пришло письмо от них, в котором они сообщают, что снизится скорость только при хранении данных на более, чем 50 Тб:

Current storage price (through Oct 31, 2008)
US: $0.150 per GB
EU: $0.180 per GB

New storage price (effective Nov 1, 2008)
US
$0.150 First 50 TB / month of storage used
$0.140 Next 50 TB / month of storage used
$0.130 Next 400 TB / month of storage used
$0.120 Storage used / month over 500 TB

Так что цены от 12 центов только, если очень много хранить :)

[BisnoyZakat]

вы наверное имели ввиду снизить цену, а не скорость)))) 50 тб… эхх. у нас пока сколько фотографий нет))

[rubyrabbit]

Кто бы написал подробную статью про практическое использование Cloud Computing: ну то есть вот если пользуюсь я VDS, то что мне надо знать и как проще воспользоваться теми же сервисами Amazon'а? надо отказаться от MySQL, использовать другой язык запросов? у меня будет такой же коннект к серверу по SSH? есть готовые Linux/BSD-дистрибутивы или надо будет самому лепить?

Если кто напишет — со всей силы (вдруг больше баллов получится) нажму на кнопку мыши, когда буду «ставить плюсик».

Успехов!