Apache Iceberg: как выполнить запрос

[BogdanPetrov]

Делал примерно тоже самое после прочтения статьи https://habr.com/ru/articles/850674/

Я бы даже сказал, что в моей базе знаний лежит очень похожая по наполнению заметка, с таким же итогом

По сути просто более детальное описание https://iceberg.apache.org/spark-quickstart/ , еще что-то полезное можно посмотреть тут: https://iceberg.apache.org/spec/

тут ещё много полей для эксперимента

Лично мне так не показалось. Смысла разбираться с этим в домашней песочнице кажется нет никакого.

В любом случае спасибо, почти единственная статья, которая за сегодня привлекла внимание, один сплошной ИИ вокруг...

[kamikashi]

Спасибо за комментарий).

Лично мне так не показалось. Смысла разбираться с этим в домашней песочнице кажется нет никакого

Тут по большей части соглашусь. Кажется, что на маленьком кол-ве данных в личной песочнице, много смысла нету. Нужно прям, чтобы было много строк, чтобы можно было бы сделать выводы. + Нужно смотреть, как какой-нибудь движок работает в связке с Apache Iceberg. Но цель была немного другая.

Дело в том, что меня и моих коллег спрашивали именно о том, как работает под капотом эти вещи (ох уж эти собесы). Без примеров это быстро выветривается. А так, можно ещё покопаться в том, что там будет когда сделаешь UPDATE, удаление строк и т.д. То что просто добавит немного понимания.

Действительно, что все те ссылки, которые вы прислали и являются первоисточником и в этой конкретной статье не особо много смысла. Но просто хотелось финализировать свой опыт ковыряния. Видимо я настолько привык писать инструкции с очень большими подробностями, что то что я видел мне не нравилось и казалось, что это "недостаточно" подробно. Тут, возможно, я переборщил. Ну, что поделать. Пускай всё так и останется)