Vertica Eon в K8S — 3 года развития

[SLASH_CyberPunk]

Проблема не в медленной вертике в режиме eon, проблема в данных, что они лежат в стороне на s3...

[barloc]

Может не хватает более агрессивного кеширования. Если бы на графиках было видна полка хоть где-то :(

[fujinon]

А в чем легендарность sort merge join?

[barloc]

Позволяет дешево реализовать моделирование data vault. Дешево в смысле не убивать расчетами кластер типа попытки реализации волта, например, на спарке :)

[fujinon]

В спарке же тоже есть SMJ (хотя broadcast варианта вроде нет), да и вообще в любой СУБД. А если соединение не по отсортированному ключу то hash join и побыстрее будет, не?

[barloc]

Hash join более прожорливый по ресурсам просто потому что надо посчитать хеш для всех строк, а для сорт мерж не надо :)

Не буду сейчас меряться, просто это один из мифов про вертику :) как человек, работающий с ней каждый день, некоторые запросы гораздо быстрее сделать в спарке, чем дождаться вертику...

[EvgenyVilkov]

а некоторые еще быстрее сделать в Impala чем в спарке и вертике :) причем местами на порядок

[barloc]

А местами нет. Вся проблема стероидов, никогда не знаешь где лажанет. А с политикой вендоров делать несовместимые обновления, так и вовсе грудью на минное поле )

[EvgenyVilkov]

дешево? Вы просто платите за операции обновления тройную цену чтобы потом быстро выполнять операции join.

[barloc]

В кликзаузе тоже платим, но и этого не получаем )

[EvgenyVilkov]

Так CH вообще штука сугубо специфическая не про join ни разу :)