Amazon открывает новый сервис в облаках «Elastic MapReduce»

    В дополнение к сервисам Amazon Elastic Compute Cloud (EC2) и Amazon Simple Storage Service (Amazon S3) компания Amazon сообщила об открытии нового сервиса Amazon Elastic MapReduce, который на данный момент пребывает в статусе беты.

    Elastic MapReduce — вебсервис, который позволят с легкостью обрабатывать огромные количества разнообразных данных. Сервис основан на совместном использовании EC2 и S3, а также фреймворка Hadoop.


    По заверениям Amazon, используя Elastic MapReduce вы с легкостью сможете:
    • Разрабатывать приложения для обработки большого массива данных на любом удобном для вас языке: Java, Ruby, Perl, Python, PHP, R, or C++.
    • Загружать данные и приложения по их обработке в Amazon S3. Надежность, масштабируемость, легкость в использовании — это все он, Amazon S3.
    • Стартовать через AWS Management Console так называемый MapReduce «job flow». Вы просто напросто выбираете нужный инстанс Amazon EC2, далее выбираете путь к данным и приложению по их обработке, которые находятся на Amazon S3, нажимаете кнопку «Создать Job Flow» и MapReduce начнет свою работу.
    • Мониторить статус job flow посредством AWS Management Console, коммандной строки или же специального API. После окончания работы результат помещается в Amazon S3.

    Для того, чтобы использовать Amazon Elastic MapReduce вы должны сперва создать инстанс EC2 на территории США, так как MapReduce еще не поддерживается для EC2 инстансов размещенных в европейских датацентрах Amazon.

    Ну и разумеется цена. При использовании MapReduce вы платите за инстанс EC2, количество данных, которое хранится в S3, а также за использование технологии MapReduce.

    При использовании Standard Amazon EC2 Instances:
    • Small $0.015 час
    • Large $0.06 час
    • Extra Large $0.12 час

    Для High CPU EC2 Instances соответственно:
    • Medium $0.03 час
    • Extra Large $0.12 час

    Похоже, что Amazon первая начала предоставлять коммерческие услуги MapReduce с использованием Hadoop. Чтобы говорить об эффективности подобного решения стоит подождать тестов и рабочих проектов на основе Elastic MapReduce.

    Для желающих получить дополнительные подробности: aws.amazon.com/elasticmapreduce
    Поделиться публикацией

    Комментарии 13

      +3
      Выглядит очень вкусно, вполне ожидаемое развитие сервиса EC2. Для тех, кто не в курсе, что такое MapReduce и Hadoop — Cloudera недавно выпустила серию скринкастов: Cloudera Hadoop Training
        +2
        А для тех, кто не совсем в курсе, что такое вообще Amazon S3, можно линки на статьи, например, на хабре? Спасибо!
          +1
          Была серия статей, последняя из которых посвящена Amazon EC2 и Amazon S3: Рисоваська, часть 3: Амазоновские веб-сервисы в действии (первые две можно посмотреть здесь и здесь)

          А вообще посмотри статьи по тегам EC2 и S3.
          0
          Интересно, за что человеку минус влепили…
            +2
            да мудачье потому что. простите, не сдержался :-/
              0
              Э… %(
              Минус у тебя стоит, вот я и не понял, почему поставили то… Или ты сам себе влепил? ))
                0
                эээ, вобщем, я ответил ниже :-)
                  0
                  Вижу. Но на тот момент ниже ни чего не было…
                  Я просто задаю данный риторический вопрос периодически на хабре в попытке понять. Может минусующий не заочкует и хотя бы попытается пояснить, за что ставит тем более криминала в сообщении не вижу обычно.

                  Но видимо действительно на хабре обитает немало тролей.
          0
          этот эпитет относился к тем, кто вот так минусы ставит направо налево. )
            +1
            Интересно какой Hadoop они используют, так как тот что доступен по hadoop.apache.org/ еще довольно сырой, очень много из задуманного не реализовано.

            Только полноправные пользователи могут оставлять комментарии. Войдите, пожалуйста.

            Самое читаемое