p0mami Jun 7 2022 at 13:30

Введение в dbt шаг за шагом

11 min

16K

SQL*Big Data*

Tutorial

Comments 7

little-brother Jun 8 2022 at 03:32

{%- ... -%} {{- ... -}} Минусы в mustache-шаблонах используются, если требуется удалить пробельные символы слева и/или справа от вставки. Может быть полезно, если вставка внутри текстовой константы.

Запрос на функционал, аналогичный dbt, один из самых популярных для DataGrip.

p0mami Jun 8 2022 at 11:58

Спасибо, буду знать

Мне кажется, что плюсом dbt является возможность интеграции с Airflow/Dagster/Meltano и т.д. Благодаря этому нам во многом удалось автоматизировать elt

makar_crypt Jun 9 2022 at 09:16

Я как раз подобный вопрос задавал на QA habr , мне подойдет dbt ?

https://qna.habr.com/q/1156442

p0mami Jun 12 2022 at 01:26

Привет, если нужно получать эти параметры в realtime, dbt возможно не лучший вариант. Возможно подойдут какие то потоковые решения, например spark

EvgenyVilkov Jun 10 2022 at 16:19

"Нужна база данных, которая поддерживает и хорошо справляется с большим количеством join-ов;"

Уверены что это про GP? :)

p0mami Jun 12 2022 at 01:24

Привет, у нас максимум было 5-8 джоинов таблиц по 10кк строк и гп справлялся. Бывало падало по спил файлам, но это отдельная тема. Но у нас и сам кластер был не большой.

EvgenyVilkov Jun 12 2022 at 22:18

С этим и телефон справиться. Попробуйте 30 джойнов миллиардов так по 5 на в половине таблиц. Вот тут то и начнется бигдата и разочарование от зелёной сливы

Show the best of all time