Материализуем результаты поиска, или как мы освободили 25 процессорных ядер

[elephantum]

Кстати, интересно было бы подумать, обобщается ли это решение до уровня write-through materialized views поверх эластика. Наверняка ведь это типовая задача.

[NikolaySivko]

Эластик не очень дружелюбный в плане диагностики, профилирования, так что навешивать на него больше логики я бы не рикнул. А вот иметь event bus например на kafka и нужными сервисами фигачить свои представления, подписавшись на события — это достаточно неплохо работает. Плюс если говорить про оптимизацию производительности, это же процесс обратный к обобщению логики как правило =)

[gtbear]

а ковыряли clickhouse от яндекса? он по идее для метрик самое то

[NikolaySivko]

Clickhouse хорошо подходит для хранения сырых событий. На мой взгляд для задачи хранения timeseries колоночная БД не дает какого-то выигрыша по производительности или удобству относительно стандартных подходов.

[Tsentr]

может вам индекс на выделенный сервер вынести - подешевле будет поиск.