Присматриваемся к Kafka tiered storage

[Ivanhoe]

Привет

Я разработчик remote storage manager плагина https://github.com/Aiven-Open/tiered-storage-for-apache-kafka, использованного в статье. Как говорится, ask me anything

[Ivanhoe]

Альтернативная реализация от Aiven Open не может успешно вычитать
записанные ей в удаленное хранилище данные. Для попытки починки
необходимо более детально исследовать механизм chunk-ов.

Обязательно посмотрим, в чем проблема!

[mikeGolovanov]

Шикарно. Рад Вас встретить.

Спасибо за Ваш труд.

Если сподвигнусь продолжить писать продолжение статьи, то приду к вам на github обсудить текущий дизайн и идеи по улучшению/изменению.

[AnatolyPopov]

Полностью статью еще не прочитал, но насколько помню в нашей(Aiven) реализации плагина чтобы запустить e2e тесты image с Kafka можно собрать из докер файла который лежит в том же репозитории. Например используя Makefile лежащий в корне: `make build_image`

[mikeGolovanov]

Добрый день, коллега

И Вам искреннее спасибо за труд.

Хочется ж сразу ./gradlew build и чтобы работало.

Готов дальше пробовать и помочь написать кусочек документации, чтобы сделать жизнь пользователей проще.