Как Apache Kafka поддерживает 200К партиций в кластере?

[strangeman]

Но ведь сейчас в ходу уже Kafka 2.6 (если не выше). Упомянутые оптимизации были реализованы 3-4 года назад.

[Polina_Averina]

да, вы правы, статья написана в 2018 году. Сейчас есть версия 2.7.0. Статью приводим в качестве ответа ответ на частый вопрос про количество партиций. А механизм с тех пор не поменялся.

[sshikov]

Но вопрос «а не устарело ли это все» все равно всплывает. Я вторым буду — у меня он с утра возник сразу. Потому что у нас достаточно старая клоудера 5, и то в ней штатно кафка 2.х. Стоило добавить от переводчика что-то типа «начиная с 1.1.0 и по сегодняшний день».

[sojey80135]

в кафку завезли или нет при агрегации окном отправлять только финальный результат?