Мне нравится решение Debezium + Kafka. Удобно собирать данные для аналитики в DWH. Из Oracle, PostgreSQL, MySQL, MongoDB. И складывать это в Clickhouse, BigQuery. Правда коннектор от Clickhouse не может создавать таблицы автоматически, структуру не обновляет, с датой плохо работает. Пришлось потратить 2 выходных и расширить эти функции самому. Сейчас работает как часы! Может тоже написать статью на тему Как готовить Debezium?
Ой, вспоминаю времена, когда начинал программировать сам, как выл по ночам:) спросить некого, все ищешь в интернете. Никто мне не сказал, что не надо распыляться, не пытаться реализовать сразу все фичи. Открываю сейчас свой первый код и смеюсь). Но его там 2к строчек. Помню как разбирался, как подключить прогу к бд, как бд создать, как все это на сервере разместить. Как у меня все падало. Как не хватало времени) Щас пришел в компанию, где есть тимлид, где есть спецы. И какой же это кайф просто подойти и спросить некоторые нюансы и вопросы, на которые искал бы часами ответ в интернете. Но это самоначало в программирование дало мне огромные понимание и опыт!!!
Мне нравится решение Debezium + Kafka. Удобно собирать данные для аналитики в DWH. Из Oracle, PostgreSQL, MySQL, MongoDB. И складывать это в Clickhouse, BigQuery. Правда коннектор от Clickhouse не может создавать таблицы автоматически, структуру не обновляет, с датой плохо работает. Пришлось потратить 2 выходных и расширить эти функции самому. Сейчас работает как часы! Может тоже написать статью на тему Как готовить Debezium?
Ой, вспоминаю времена, когда начинал программировать сам, как выл по ночам:) спросить некого, все ищешь в интернете. Никто мне не сказал, что не надо распыляться, не пытаться реализовать сразу все фичи. Открываю сейчас свой первый код и смеюсь). Но его там 2к строчек. Помню как разбирался, как подключить прогу к бд, как бд создать, как все это на сервере разместить. Как у меня все падало. Как не хватало времени) Щас пришел в компанию, где есть тимлид, где есть спецы. И какой же это кайф просто подойти и спросить некоторые нюансы и вопросы, на которые искал бы часами ответ в интернете. Но это самоначало в программирование дало мне огромные понимание и опыт!!!