Comments 3
Классно что разобрался в экосистеме. А не думал использовать BigTop для установки?
Ненене, тут идея именно в минимальном наборе ПО для реализации стандартного функционала.
Так получилось, что затронул BigTop в рамках другого проекта. И вернувшись к Вашему вопросу сейчас могу пояснить, что создать свой готовый дистрибутив из всего выше перечисленного - в целом, идея хорошая. Но изначально все основано на docker-контейнерах, которые, если разворачиваются на разных машинах (а BigData как правило все-таки - это не один компьютер), то используют сеть через технологию docker swarm. То есть данная технология используется не совсем по назначению. Требуется ее «донастройка» (развертывание dns-сервера внутри и т.п.). В общем, есть некоторые трудности, которые сразу решить даже не знаю пока как. Но в целом - да, идея хорошая… Развернуть любое ПО из готового deb-пакета конечно же да, всегда удобнее и проще.
Hadoop на микросервисах или история одного пет-проекта