Как стать автором
Обновить
6
0

Пользователь

Отправить сообщение

Оптимизируем NiFi Flow. Настройка Load Balancing, подходы к Scheduling и выбор метода merge

Уровень сложностиСредний
Время на прочтение8 мин
Количество просмотров3.6K

Если вы используете в своей работе NiFi, то наверняка не раз задумывались об оптимизации, а может быть и делали ее. В этом посте я поделюсь своими наработками в области настроек NiFi, благодаря которым мы получили позитивные результаты и улучшили работу наших собственных сервисов. А если конкретно, речь пойдет про выбор стратегии балансировки нагрузки между нодами кластера (load balancing), настройке работы процессоров NiFi в рамках одной ноды (Concurrent tasks, Run Duration), а также о том, что делать с косяками Merge Record. Если интересно, ныряйте под кат и давайте обсудим, что еще хорошего можно сделать с NiFi. 

Читать далее
Всего голосов 6: ↑6 и ↓0+6
Комментарии1

Информация

В рейтинге
Не участвует
Зарегистрирован
Активность

Специализация

Data Engineer
Senior
ETL
Database
SQL
DWH
Apache Airflow
Python
Apache Kafka
PostgreSQL
Git
Docker