codezombie Jan 10 2013 at 00:20

Microsoft HDInsight. «Облачное» (и не только) будущее Hadoop

7 min

9.6K

Big Data*Microsoft Azure*Hadoop*

+18

Comments 15

strelkan Jan 10 2013 at 05:27

глаза боятся!
а статья отличная, спасибо

-2

FINTER Jan 10 2013 at 05:32

МС последнее время только радует. Так держать!

micbsv Jan 11 2013 at 02:52

Скотт Гатри ушел из Asp.net MVC в Azure, теперь МС будет радовать долго и стабильно :)

XaocCPS Jan 10 2013 at 10:00

Отличная статья! Спасибо!

Не так давно я постил перевод руководства по использованию Hive + Excel c HDInsight для анализа данных

habrahabr.ru/company/microsoft/blog/152313/

тоже может быть интересно для продолжения темы

codezombie Jan 10 2013 at 12:31

Спасибо. Полезная ссылка (и статья интересная). Вообще, конечно, интеграции HDInsight с BI-tools от Microsoft ~~можно~~ нужно 'посвящать' целые статьи.

rzykov Jan 10 2013 at 11:24

я бы добавил в список языков программирования Pig и Hive.

От себя могу добавить, что участвовал в закрытом тестировании этой штуки еще год назад, когд она только появилась.
Назывался тогда проект Isotope. Уже тогда мы использовали плагин PowerView для Excel для доступа нашим данным к Hadoop. Выглядело все тогда замечательно.
Вот с ODBC драйвером у них есть какие-то проблемы до сих пор. У нас он так и не заработал нормально, когда мы решали задачу подключения Hadoop как Linked server в MS SQL Server 2008R2. В итоге используем драйверы от MapR и Hortonworks

codezombie Jan 10 2013 at 12:22

> добавил в список языков программирования Pig и Hive
ну тогда Hive QL, т.к. Hive все же больше инфраструктура, чем ЯП. По платформе Pig, аналогично, язык — Pig Latin.

ToSHiC Jan 10 2013 at 13:40

Если хотите реалтайма — смотрите больше в сторону twitter storm и похожих решений, где делаются вычисления на потоке.

codezombie Jan 10 2013 at 14:26

Да, для streaming-данных Storm — идеальный ~~шторм~~ кандидат (при использовании Hadoop). Я его незаслуженно-умышленно не упомянул (т.к. не хотел уходить от темы статьи), как, собственно, и не упомянул про StreamInsight (последний, как я понимаю, в рамках проекта Austin из on-premise движется в облака Azure).

denisemenov Jan 11 2013 at 01:49

Меня одного смущает наличие ЕМС на картинке в посте о Microsoft?
www.flickr.com/photos/emccorp/5615916207/

-1

codezombie Jan 11 2013 at 11:44

Меня одного смущает, что таких же картинок полон интернет без всякой ссылки на EMC?

P.S. я независимый разработчик и статья не 'o Microsoft', а о решении, позволяющем использовать Hadoop в облаках (и не только). Называйте, пожалуйста, вещи своими именами.

P.S.S. Денис, если Вы поможете найти первоисточник картинки, то буду только благодарен.

denisemenov Jan 11 2013 at 13:01

И пусть меня заминусуют за занудство… :)

В свое время работая в одной крупной ИТ-компании мне приходилось использовать те или иные картинки в анонсах, статьях и рассылках. Нам нельзя было использовать картинки с предыдущих материалов и материалов вендоров/конкурентов/etc. И после этого (в очередной раз) для себя я усвоил одну вещь — Google решает! bit.ly/11lMRDx ;)

Вашу статью я воспринял не как «о решении, позволяющем использовать Hadoop в облаках (и не только)», а как «о решении Microsoft, позволяющем использовать Hadoop в облаках (и не только)». потому и сократил. Извините, если обидел.

Конкретно эта картинка использовалась в серии мероприятий от EMC по всему миру — bit.ly/11lNhKb

codezombie Jan 11 2013 at 13:36

Денис, (теперь) Ваше замечание более обоснованное. Хотя корпоративные правила с Вашей прошлой работы, к сожалению, никак не относятся к предмету статьи и не увеличивают кол-во знаний по теме 'Hadoop + Azure' на этой странице.

denisemenov Jan 11 2013 at 16:42

Это добавляет Вам знаний по оформлению каких-либо работ… А сегодня любые знания полезны, если их правильно принимать и применять…

denisemenov Jan 11 2013 at 12:49

Промахнулся :(

Show the best of all time