Современный стек данных: прошлое, настоящее и будущее

Многие крупные технологические компании создали достаточно хорошие  продукты по управлению внутренними данными:

• У Linkedin — DataHub;

• у Lyft — Amundsen;

• у WeWork — Marquez;

• у Airbnb — Dataportal;

• у Spotify — Lexikon;

• у Netflix — Metacat;

• у Uber — Databook.

По опыту работы в одной из "крупных технологических компаний" такие продукты создаются как костыли внутри компании потому, что есть какие-то уникальные особенности компании, или потому, что за красивый новый продукт можно получить больше плюшек, чем за использование чего-то стороннего.

В какой-то момент продукты опенсорсятся в надежде, что кто-то ещё начнёт их использовать и, как следствие, вкладывать в поддержку/развитие.

Для сторонних контор же внедрять такое без переманивания хотя бы одного-двух исходных разработчиков - себе дороже.

Спасибо, очень интересная статья!