Обновить

Data Mesh, Data Fabric, Lakehouse: разбираем модные термины

Уровень сложностиПростой
Время на прочтение5 мин
Охват и читатели9.3K
Всего голосов 7: ↑4 и ↓3+1
Комментарии7

Комментарии 7

И на каждом этапе одни и те-же люди доказывают, что наконец-то они нашли пилюлю для всех проблем, чтобы через какое-то время опять про следующую пилюлю расказать итд. При этом не забывают 'приверженцев' и понимателей особенностей и нужности старых технологий забрасать всевозможными ярлыками. С агилем то-же самое. Отвергается всё старое, чтобы в новом это старое поновой изобрести...

Кажется, в изменениях и есть сама суть развития. Думаю, что нормально даже в случае чего возвращаться к старому через трансформации, без них не была бы понятна ценность этого самого «старого».

Почему вообще возникает путаница?

В очередной статье читаю эту фразу... Да никто из не путает! По крайней мере из нормальных инженеров! За много лет ни разу не встречал лично человека, которой бы путал. Зато авторы статей и прдвигаторы личных брендов нередко эту фразу упоминают для того, чтобы написать ещё одну статью с азбучными истинами. Придумайте уже другое что ли введение!) ИИ в помощь)

Data Fabric

Прошло от Майкрософта с его Fabric. По сути маркетинговый термин. И ничего более.

Спасибо за ваше мнение, по поводу путаницы и «нормальных» инженеров - Лиду инженеру да, конечно, это очевидно, но в начале пути действительно можно запутаться с терминами, так как их не мало, именно поэтому сложность статьи указана как «простая»

Если вы их не путаете, все же не значит, что их не путает никто

Берем возможности как в Data Warehouse: ACID-транзакции, управление схемой, оптимизация запросов.

Технически это реализуется через специальные слои поверх озер – транзакционные форматывроде Delta Lake, Apache Iceberg или Apache Hudi.

нет там ни acid ни понятия транзакции, все что есть - атомарность на уровне одной таблички.

Не надо быть таким строгим, это же "Мир Авито"! Там и не такие чудеса возможны :)
PS это сраказм)

Сразу вспомнил про эту статью

https://habr.com/ru/articles/846296/.

Зарегистрируйтесь на Хабре, чтобы оставить комментарий

Публикации